크래프톤, AI 게임 실력 평가 'Orak 챌린지' 글로벌 개최

LLM 에이전트의 게임 수행 능력 정량 평가

크래프톤은 다양한 장르의 게임을 기반으로 AI의 게임 플레이 능력을 평가하는 글로벌 경진대회 'Orak 챌린지'를 개최하고 참가자를 모집한다고 10일 밝혔다.

이번 대회는 LLM(Large Language Model, 거대언어모델) 에이전트의 게임 수행 능력과 의사결정 능력을 정량적으로 평가하는 데 중점을 둔다.

'오락'에서 착안한 이름인 Orak은 AI가 게임 속 상황을 인식, 판단, 행동 결정하는 전 과정을 수치화해 평가하는 체계다. 이를 통해 AI가 실제 게임 환경에서 얼마나 효율적이고 전략적으로 플레이할 수 있는지 객관적으로 측정하고, 게임 실력의 반복적인 검증이 가능하다.

크래프톤, AI 게임 실력 평가 ‘Orak 챌린지’ 글로벌 개최

참가자들은 Orak이 제공하는 실제 상용 게임 환경 기반의 통합 평가 인프라를 활용해 자신이 개발한 모델을 테스트할 수 있으며, 결과는 실시간으로 갱신되는 글로벌 리더보드를 통해 공개된다. 대회는 ▲스트리트파이터 III ▲슈퍼마리오 ▲포켓몬 ▲스타크래프트 II ▲2048 등 다섯 개의 게임을 활용하며, 모델의 전략적 사고, 문제 해결력, 효율성을 종합적으로 평가한다.

이번 챌린지에는 엔비디아, AWS, 오픈AI가 공식 후원사로 참여한다. 참가팀에게는 LLM 실험에 활용할 수 있는 총 4만5천 달러(약 6천542만원) 규모의 크레딧이 제공되며, 최종 우승자에게는 총 2만 달러(약 2천907만원)의 상금이 주어진다. 상위권 팀은 Orak을 개발한 크래프톤 AI 연구진과의 에이전틱(Agentic) LLM 기술 논의 세션에 참여할 기회도 얻는다.

참가팀은 최대 5명까지 구성 가능하며, 하루 5회 이내로 모델을 제출할 수 있다. 참가 등록은 오는 21일까지이며, 최종 우승자는 2026년 2월에 발표될 예정이다.

크래프톤은 과학기술정부통신부가 주관하는 '독자 AI 파운데이션 모델' 프로젝트의 SK텔레콤 컨소시엄 정예팀으로, 다국어 지원 및 멀티모달 기능을 갖춘 차세대 AI 모델 개발에 참여하고 있다. 크래프톤은 이번 Orak 챌린지를 통해 축적된 실전형 의사결정 LLM 연구 경험을 국가 AI 생태계로 확장하고, 'AI First' 전략을 기반으로 전사 AI 내재화를 가속화할 계획이다.

이강욱 크래프톤 AI 본부장은 "크래프톤은 Orak을 통해 LLM 에이전트 연구의 새로운 평가 기준을 제시하고, 게임 산업 전반의 AI 혁신을 선도할 것"이라며, "앞으로도 크래프톤은 'AI First' 전환에 맞춰, 글로벌 무대에서 경쟁력 있는 인게임 AI 적용 사례를 만들어 나갈 계획"이라고 전했다.