progress

지난 과제(과거시스템)

완료된 인공 지능 언어 능력 평가 과제입니다.(과거시스템)

과제 개수 : 3
다른 과제 목록 보기
과제 개요 자료 받기 신청·제출 순위표(리더보드) 공지 사항 문의 사항

 

 

문화체육관광부와 국립국어원이 9월 1일(수)부터 두 달간 ‘2021 국립국어원 인공 지능 언어 능력 평가’ 대회를 개최합니다. 


올해 대회는 작년까지 진행했던 ‘국어 정보 처리 시스템 경진 대회’와 달리 글루(GLUE), 슈퍼글루(SuperGLUE) 등 해외 인공 지능 언어 이해 능력 평가 과제를 참고합니다. 
이번 대회에서는 참가자가 개발한 인공 지능 프로그램으로 모두 4개의 과제를 해결해야 합니다. 참가자는 주어진 문제에 대한 답안을 시스템에 제출하고, 채점 결과는 순위표(리더 보드)에 게시됩니다. 

과제 해결에 참고하실 수 있는 베이스라인 모델은 아래 경로를 참고해 주세요.

1. 과제 내용
과제는 자연스러운 우리말 사용을 반영하여 국립국어원과 에스케이텔레콤이 협업을 통해 구축, 제공한 것입니다. 문장 문법성 판단과 동형이의어 구별 과제는 국립국어원에서 말뭉치 사업을 통해 수집한 원문을 기반으로 하였으며, 인과 관계 추론 및 판정 의문문 과제는 에스케이텔레콤의 전문 작업자가 직접 생성하고 검수하였습니다. 

 

 과제명

 인공 지능 언어 능력 평가 내용

 문장 문법성 판단

 문법에 맞는 문장과 문법에 맞지 않은 문장을 구분하는가

 동형이의어 구별

 형태가 같고의미가 다른 단어의 의미를 구별하는가

 인과 관계 추론

 주어진 문장의 원인 또는 결과를 적절하게 추론하는가

 판정 의문문

 제시문을 읽고 질문에 '예,아니오'로 답변할 수 있는가

 

2. 주요 일정 

 일정

내용 

 2021년 9월 1일(수)

 과제용 말뭉치(Train, Dev, Test), 베이스라인 모델 공개

 2021년 9월 15일(수)

 과제 신청서 접수 및 답안 제출 시작, 리더 보드 반영 시작

 2021년 11월 1일(월)

 과제 신청서 접수 및 답안 제출 종료

 2021년 11월 중

 상위권 참가자 출품작 취합 후 비공개 데이터를 이용한 검증, 수상작 결정

 

3. 시상 내역  

 상

시상 내용 

 수상작

 대상

 문화체육관광부 장관상(상장 및 상품)

 1개 팀

 금상

 국립국어원장상(상장 및 상품)

 1개 팀

 은상

 국립국어원장상(상장 및 상품)

 2개 팀

 동상

 국립국어원장상(상장 및 상품)

 3개 팀

 특별상

 관련 단체(상장)

 미정


※ 수상자 특전 
- 2022년 SKT AI Fellowship 지원 시 서류 전형 면제 
- 관련 업체 지원 시 초기 전형 면제 또는 외부 수상 경력으로 우대(네이버 등)

4. 참고 사항
- 과제용 말뭉치와 설명 자료는 ‘자료 받기’에서 내려받을 수 있습니다. 
- 과제 신청 및 제출 방법은 접수 시작 전 ‘공지 사항’ 을 통해 안내합니다.
- ‘문의 사항’에 내용을 남겨 주시면 대회 사무국에서 답변 드리겠습니다(3일 정도 소요).