독파모 2차전 '모티프' 탈락…업스테이지·SKT·LG 진출

과기정통부, 독파모 2차 평가 결과 발표

모티프테크놀로지스가 국가대표 인공지능(AI)을 선발하는 '독자 AI 파운데이션 모델(독파모)' 프로젝트에서 3차 관문을 넘지 못했다.

과학기술정보통신부는 독파모 프로젝트 2차 단계평가 결과 업스테이지, SK텔레콤, LG AI연구원 등 3개 정예팀이 다음 단계에 진출했다고 18일 밝혔다. 

업스테이지 정예팀이 개발한 '솔라 오픈2'는 한 한번에 기억하고 처리할 수 있는 텍스트 양이 문서 수백 페이지 이상에 해당하는 최대 100만 토큰에 달해 전 세계 최상위긥 AI 모델과 동일한 수준의 정보처리 능력을 확보했다.

(사진=과기정통부)

SK텔레콤 정예팀이 개발한 '에이닷엑스(A.X) K2는 국제수학올림피아드 2026년 문제 평가에서 금메달 기준에 해당하는 점수를 기록했다. LG AI연구원 정예팀이 개발한 'K-엑사원 2.0'은 아티피셜 애널리시스 인텔리전스 인덱스(AAII) 벤치마크 지표 중 AI 모델 환각 최소화 지표에서 전 세계 AI 모델 중 9위를 기록했다. 

이번 2차 단계평가는 벤치마크 평가(40점)와 전문가 평가(35점), 사용자 평가(25점)를 병행해 진행됐다. 과기정통부는 1차 평가 대비 대외 공신력 높은 고난도 글로벌 벤치마크 평가 도입, 현장 AX 접목 및 확산 평가 확대, 국민 참여형 사용성 평가 신규 도입 등을 통해 평가 체계를 정교화했다고 강조했다.

벤치마크 평가는 AAII 벤치마크 평가(배점 25점)와 NIA 벤치마크 평가(배점 15점)로 구성됐다. AAII 벤치마크 평가는 AAII를 구성하는 ▲에이전트 ▲코딩 ▲일반 ▲과학적 추론 분야의 고난도 벤치마크 9종으로 평가를 진행했다. 이 과정에서 글로벌 AI 평가기관 아티피셜 애널리시스(AA)가 직접 벤치마크 평가를 진행했다. 

NIA 벤치마크 평가는 1차 평가 대비 ▲지시이행 ▲한국어 평가 분야를 확장해 ▲수학 ▲지식 ▲장문이해 ▲지시이행 ▲한국어 ▲안전성 ▲신뢰성 분야까지 포괄해 벤치마크를 구성했다. 

NIA 벤치마크는 전체 문제와 정답이 공개되지 않아 벤치마크 오염 우려가 낮다. AAII 벤치마크가 글로벌향 AI모델 범용 성능 평가에 중점을 뒀다면, NIA 벤치마크는 한국어·한국적 맥락에서의 성능과 안전성·신뢰성까지 종합 평가했다. 벤치마크 평가(배점 40점) 4개 정예팀 전체 평균은 22.5점이며, 1위와 4위 간 점수 격차는 4.0점이다.

전문가 평가는 외부 AI전문가로 구성된 전문가위원회를 구성해 정예팀이 제출한 평가서류 등을 바탕으로 약 일주일 내외 간의 평가를 진행했다. 

정예팀들의 ▲개발 전략 및 기술(10점) ▲개발 성과 및 계획(10점) ▲파급효과 및 기여계획(15점)을 중심으로 심층 평가했다. 전문가위원회는 AI 알고리즘, 서비스, 데이터 분야 등의 전문성을 보유한 전문가들로, 이해충돌 문제가 없는 10명이 평가에 참여했다. 

단순한 독자성 확보 여부에서 나아가, '독자성 및 이를 기반으로 한 성능 향상 수준'을 전문가 평가 항목에 반영해 독자적 기술이 실제 AI모델 성능 향상으로 이어지는 경우, 이를 높게 평가할 수 있도록 했다. 

또 국내외 AI생태계 파급효과·기여계획에 대한 평가 비중을 확대해 실질적인 현장 확산 등 국내 AX 등의 확대를 유도하는 데 초점을 맞췄다. 전문가 평가(배점 35점) 4개 정예팀 전체 평균은 28.8점이며, 1위와 4위 간 점수 격차는 2.4점이다.

사용자 평가는 AI 전문 사용자진 평가(15점)와 일반 국민 평가(10점)으로 구성됐으며 이를 기반으로 AI 사용성 등에 대한 평가를 진행했다. AI 전문 사용자진 평가는 49명의 AI 전문 사용자가 참여해 평가를 진행했다. 

일반 국민 평가는 185명(최종 200명 선정 후, 185명이 평가에 참여)의 국민이 직접 참여해 평가를 진행했다. 사용자 평가(25점) 4개 정예팀 전체 평균은 17.6점이며 1위와 4위 간 점수 격차는 5.0점이다.

다음 단계에 진출한 정예팀에는 고성능 그래픽처리장치(GPU) B200 지원을 확대할 계획이다. 올 상반기 768장 수준에서 B200 1000장 수준으로 규모를 늘렸다.

과기정통부는 "최상위급 독자 AI 모델 개발 필요성을 깊이 인식하고 기존 방식을 뛰어넘는 지원 체계를 관계부처와 논의 중"이라며 "추후 구체적인 내용을 준비해 발표할 것"이라고 말했다.