SK텔레콤은 우리말 인공지능(AI) 언어모델의 개발 역량 향상과 국어 정보화 저변 확대를 위해 문화체육관광부·국립국어원과 함께 ‘인공지능 언어 능력 평가 대회’를 개최한다고 1일 밝혔다.
대회는 1일 오후 SK텔레콤의 기본 AI 언어모델과 국립국어원의 평가 데이터 세트 공개와 함께 시작되며, 참가자들은 15일부터 11월 1일까지 결과물을 수시로 업데이트해 제출하면 된다.
이번 대회는 개인 또는 팀으로 누구나 참가할 수 있다. 참가팀 중 대상(문화체육관광부 장관상), 금상·은상·동상, 특별상을 선정할 계획이며, 수상자 전원에게는 매년 SK텔레콤이 개최하는 AI Fellowship의 서류 심사 면제 특권도 제공할 계획이다.
참가자들은 제공된 언어 모델 등을 기반으로 각각의 AI 언어모델 프로그램을 개발하여 우리말을 이해하고 분석하는 능력을 평가받는다.
제출된 언어모델을 평가하는 과제는 4가지로, 문장의 문법 오류 판단하기(문장 적법성 판단), 맥락별 단어 의미 구별하기(동형이의어 구별), 문장 읽고 원인 추론하기(인과 관계 추론), 제시문 읽고 질문에 예/아니오 답하기(판정 의문문) 등이다.
<과제 및 평가 내용>
과제명 |
AI 언어모델의 언어 능력 평가 내용 |
문장 문법성 판단 |
문법에 맞는 문장과 문법에 맞지 않은 문장을 구분하는가? |
동형이의어 구별 |
형태가 같고 의미가 다른 단어의 의미를 구별하는가? |
인과 관계 추론 |
주어진 문장의 원인 또는 결과를 적절하게 추론하는가? |
판정 의문문 |
제시문을 읽고 질문에 ‘예, 아니오’로 답변할 수 있는가? |
[데일리e뉴스= 최성욱 기자]