카카오, AI 성능평가 데이터셋 슬롯사이트로 내놨다

오픈소스로 '슬롯사이트챗-벤치' 공개

카카오가 인공지능(AI) 언어모델의 슬롯사이트(함수호출) 성능을 평가할 수 있는 데이터셋인 ‘펑션챗-벤치’를 오픈소스 커뮤니티인 깃허브에 공개했다고 27일 발표했다.

슬롯사이트은 AI 언어모델이 자체적으로 할 수 없는 동작을 지시하거나 사전에 학습하지 않은 정보를 받아올 수 있도록 언어모델과 외부 도구를 연결하는 기술이다. 슬롯사이트을 활용하면 언어모델이 가진 한계를 해결해 새로운 기능을 선보일 수 있다. 지도 등 특정 API를 연결한 언어모델이 실시간 도로 정보를 제공하는 경우가 대표적인 사례다.슬롯사이트 성능 평가용 데이터셋 중 한국어에 바탕을 둔 건 국내 정보기술(IT) 기업 중 이번이 첫 사례라는 게 카카오의 설명이다. 그간 슬롯사이트 성능 평가에 쓰이는 데이터셋은 해외 기업이 구축한 영어 환경에서 구동되는 경우가 대부분이었다.

김병학 카카오 카나나알파 성과리더는 “이번 데이터셋 구축과 오픈소스 공개는 슬롯사이트 기반 AI 기술 생태계의 형성에 기여할 것”이라며 “꾸준히 이번 데이터셋의 활용성을 높이기 위해 노력하겠다”고 말했다.

이주현 기자 deep@hankyung.com