해당 포스트는 문화체육관광부와 국립국어원이 주최하고, SKT와의 협업으로 진행되는 '2021 국립국어원 인공 지능 언어 능력 평가' 대회에 대해 소개합니다.
INTRO
문화체육관광부와 국립국어원이 9월 1일(수)부터 두 달간 ‘2021 국립국어원 인공 지능 언어 능력 평가’ 대회를 개최합니다.
작년까지는 '국어 정보 처리 시스템 경진 대회'를 진행했었는데 올해부터는 글루(GLUE), 슈퍼글루(SuperGLUE) 등 해외 인공지능 언어 이해 평가 능력 과제를 반영하였습니다.
이번 대회의 과제는 총 4개의 문제를 풀어야하며, 참가자가 개발한 모델을 이용하여 문제를 풀고 제출하면 Squad나 Korquad와 같이 답안 채점 결과를 스코어링 하여 순위표(리더보드)에 게시됩니다.
참고로 SKT와 협력해서인지 베이스라인 모델은 huggingface 저장소에 등록된 SKT 언어 모델인 Ko-GPT-Trinity 1.2B를 기준으로 합니다.
대회에 대한 자세한 내용은 아래 정리하였으니 참고하시어 도전해보시면 좋겠습니다!
1. 과제 내용
과제는 자연스러운 우리말 사용을 반영하여 국립국어원과 에스케이텔레콤이 협업을 통해 구축, 제공한 것입니다. 문장 문법성 판단과 동형이의어 구별 과제는 국립국어원에서 말뭉치 사업을 통해 수집한 원문을 기반으로 하였으며, 인과 관계 추론 및 판정 의문문 과제는 에스케이텔레콤의 전문 작업자가 직접 생성하고 검수하였습니다.
2. 주요 일정
3. 시상 내역
※ 수상자 특전
- 2022년 SKT AI Fellowship 지원 시 서류 전형 면제
- 관련 업체 지원 시 초기 전형 면제 또는 외부 수상 경력으로 우대(네이버 등)
4. 참고 사항
- 과제용 말뭉치와 설명 자료는 ‘자료 받기’에서 내려받을 수 있습니다.
- 과제 신청 및 제출 방법은 9월 둘째 주 ‘공지 사항’ 및 ‘자료 받기’를 통해 안내합니다.
- ‘문의 사항’에 내용을 남겨 주시면 대회 사무국에서 답변 드리겠습니다(3일 정도 소요).
5. 관련 링크
[2] https://huggingface.co/skt/ko-gpt-trinity-1.2B-v0.5
