크래프톤 "AI 경쟁력, 글로벌 시장서도 두각…'눈마새'에도 적용"

크래프톤 성준식 딥러닝본부 실장·김도균 AI전략실 매니저 인터뷰

인터뷰입력 :2024/03/19 10:02    수정: 2024/03/19 13:11

"게임 개발 과정에 AI를 접목하면, 비용과 시간을 단축할 수 있을 것으로 예상한다. 크래프톤은 이달부터 AI 전략실을 신설하면서, 전사적인 AI 기술활용을 가속화하고 기대효과 창출을 위해 움직이고 있다."

인공지능(AI) 기술의 급격한 발전이 글로벌 산업시장의 화두가 되고 있다. 일찍부터 AI 관련 연구에 관심을 보였던 국내 게임업계도 최근 더욱 박차를 가하는 모양새다.

크래프톤은 생성 AI 학습에 쓰이는 딥러닝 기술이 게임 산업의 판도를 바꿀 '게임체인저'가 될 것으로 보고 있다. 게임 개발 단계에서 AI로 제작 비용·시간 감축 등 효율화 작업을 진행할뿐 아니라 게이머가 체감할 수 있는 AI 관련 경험을 제공하겠다는 것이 회사 측의 설명이다.

(왼쪽부터)크래프톤 성준식 딥러닝본부 실장과 김도균 AI전략실 매니저

크래프톤은 지난 14일 크래프톤 역삼 오피스에서 크래프톤 딥러닝본부 및 AI전략실 관련 미디어 인터뷰를 진행했다. 이날 인터뷰에는 성준식 딥러닝본부 실장과 김도균 AI전략실 매니저가 자리했다. 성 실장은 인터뷰에 앞서 '게임산업 속 AI 기술 전반'이라는 주제로 기조강연을 진행하기도 했다.

성 실장은 "최근 AAA급 규모 게임을 개발하기 위해서는 많은 시간과 비용이 든다. 락스타게임즈에서 선보인 '레드데드리뎀션2'는 배우만 1천200명이 투입됐고, 700명은 목소리 캡처까지 들어갔다. 지난해 출시된 '발더스게이트3'는 배우들이 모든 모션과 표정을 캡처하는 과정을 거쳤다"며 "비용과 시간이 많이 드는 만큼 버티컬 슬라이스(부분적 빌드플레이)를 만드는 것이 중요한데, 이 과정에 AI를 활용하면 효율성을 높일 수 있다"고 강조했다.

그는 크래프톤이 개발 중인 '눈물을 마시는 새(눈마새)' 지식재산권(IP) 기반 개반으로 예시를 들었다. 성 실장은 "눈마새 개발자들은 당연히 기본적으로 IP, 즉 책에 대한 이해도가 있어야 한다. 하지만 모든 개발자들이 해당 내용을 온전하게 기억하는 것은 어려움이 있을 수 있다"고 말했다.

이어 "딥러닝 센터에서는 이러한 문제를 언어모델로 해결하기 위해 연구중이다. 예를 들어 타나한은 나가 종족에게 아내가 살해당했기에 엄청난 적의를 가지고 있다. 또한 티나한은 레콘 종족이지만, 동족들과 달리 공동체 의식을 가지고 있다"며 "해당 설정을 반영한 뒤 대화를 생성했는데, 어느정도 유의미한 결과가 나오기도 했다"고 덧붙였다.

크래프톤 성준식 딥러닝본부 실장

성 실장은 아트에셋과 오디오에셋에서도 생성형 AI가 활발히 사용될 수 있다고 설명했다. 그는 "아트의 경우 미드저니와 같은 프로그램이 활발히 사용되고 있다. 스케치만 있어도 채색이 가능하고, 간단한 콘셉트 시안만 있어도 그림을 만들 수 있다. 몇 주가 걸리던 일을 며칠로 줄일 수 있게 됐다. 게임사는 이용자에게 제공하는 포트폴리오가 더욱 다양해질 수 있다"고 말했다.

이어 "오디오의 경우 거대언어모델(LLM) 출력과 연계한 다양한 음색 발화를 지원하는 음성합성(TTS)을 선보일 수 있다. 앞서 언급한 발더스게이트3가 더빙을 위해 많은 성우를 필요로 했지만, 앞으로 AI를 사용한다면 이러한 노력을 줄일 수 있다"고 전했다.

현재 크래프톤은 언어모델을 직접 개발하는 대신 현재 출시된 언어모델을 게임에 자연스럽게 적용할 수 있는 방안을 연구하는 것에 집중하고 있다. 성 실장은 "지금 시점에서 언어모델을 직접 개발하는 것은 난이도도 높고 리스크가 크다고 판단하고 있다. 대신 이를 게임성으로 녹여내는 것이 중요하다고 생각한다"고 강조했다.

이어 "현재 크래프톤은 AI 학술 연구에서 두각을 드러내고 있는데, 지난해에는 인공지능(AI) 분야 최고 권위 학술대회인 'NeurIPS 2023(신경정보처리시스템학회, 뉴립스)' 메인 트랙에 5개의 논문을 발표했다"며 "국내 기업으로 보면 삼성, LG, 네이버, 카카오 다음이다. 게임기업으로 본다면 글로벌 순으로 텐센트와 소니 다음이다. 그만큼 AI 기술 경쟁력이 글로벌 수준으로 높다고 볼 수 있다"고 덧붙였다.

이러한 경쟁력을 더 높이기 위해 크래프톤은 이달 초 AI전략팀을 신설했다. 김도균 매니저는 "크래프톤 AI전략팀은 AI기술 기반 제작비용 효율화, AI기술을 활용한 창의력 발굴 및 창작을 위한 지원에 힘쓰고 있다. 또한 전사적으로 AI 기술 활용을 가속화하고 기대효과 창출을 위해 노력하고 있다"며 "스튜디오별 게임제작 내용과 상황에 따라 적합한 AI 기술을 제안 및 지원하기도 하고 리스크 관리와 기술 사업화 검토로 담당하고 있다"고 설명했다.

성 실장은 다양한 신작 게임에 이미 AI 연구가 접목되고 있다고 설명했다. 올해 상반기 중에는 크래프톤이 퍼블리싱하는 디펜스 더비에 강화학습을 활용한 AI 봇이 업데이트될 예정이다. 그는 "앞서 디펜스 더비팀도 기초적인  AI봇을 만들었는데, 특정 등급이상부터는 AI 수준이 떨어졌다. 이를 강화학습을 통해 봇 수준을 높이는 방식으로 문제를 해결했다"고 설명했다.

(왼쪽부터)크래프톤 성준식 딥러닝본부 실장과 김도균 AI전략실 매니저

야심차게 개발 중인 인생 시뮬레이션 '인조이'에도 AI 기술이 상당부분 적용됐다. 성 실장은 "결국 인조이는 많은 NPC들이 상호작용하는 게임이다. 현존하는 언어모델을 그대로 적용하면 게임 구동이 사실상 불가능하다. 인조이 팀에서 언어모델과 게임 렌더링이 공존할 수 있게 해달라는 부탁을 받았다"며 "현재는 작고 빠른 모델을 개발해 게임에 적용하는 방식으로 풀어가고 있다"고 간략히 소개했다.

이용자와 함께 대화하며 게임을 즐길 수 있는 가상 친구 '버추얼 프렌드'에 대한 자세한 이야기도 들어볼 수 있었다. 버추얼 프렌드는 스스로 게임을 이해하고 해결할 수 있는 능력까지 부여받았다. 이를 위해 몇 년 전부터 자연어 처리, 3D 아바타 생성 기술, 음성인식기술 등 딥러닝 기술에 대한 R&D가 진행 중이다.

성 실장은 "우리가 지향하고자 하는 바는 버추얼 프렌드가 사용자의 플레이를 인지하고, 말하지 않아도 이용자에게 도움이 되는 역할을 하는 것이다. 처음에는 스피치를 통한 소통도 생각을 해봤지만, 굳이 소통을 하지 않고도 할 수 있는 게임이 많다. 결국 게임 특성에 맞춘 플레이스타일을 보여주는 것이 중요하다고 본다"고 말했다.

그는 "현재 버추얼 프렌드의 수준을 본다면, 아직까지 완벽히 의사소통을 할 수 있는 상황이라고 보기는 어렵다. 대신 하나하나 확인해보면 음성인식은 모두 가능하다. 관건은 버추얼 프렌드가 얼마나 이용자와의 대화에서 키워드를 정확하게 반영하는지 여부다. 조사 같은 부분이 어느정도 틀릴 순 있지만, 맥락을 파악하면 소통에는 큰 문제가 없다"고 부연했다.

이어 "현재 필요한 특정기술은 많이 준비된 상황이다. 강화학습 역시 꾸준하게 반복 중이다. 최종 버전의 버추얼 프렌드도 근시일 내에 선보일 수 있을 것으로 생각된다. 다만 단순히 응답 속도를 빠르게 하는 것을 핵심이라고 보지는 않는다"며 "결국 버추얼 프렌드가 성공하기 위해서는 실제 게임에 적용했을 때 재미가 있어야 한다. 또한 속도를 줄이기 위해 더 좋은 언어모델을 사용할 수는 있지만, 현실적으로 비용 문제가 있다"고 덧붙였다.

관련기사

인터뷰 말미 성 실장은 크래프톤 AI 연구에 대한 큰 포부를 드러내기도 했다. 그는 "AI가 적용된다면, 유니크하고 엔드리스한 게임을 만들 수 있을 것이라는 생각이 든다. 구체적으로 설명한다면, 대화형 인공지능 '이루다'를 이용할 때 각각 이용자마다 다른 메시지를 주고받을 수 있는 것처럼, 각각의 플레이어가 저마다 자신만의 고유하고 무한한 게임을 즐길 수 있게 되는 것"이라고 말했다.

이어 "결국 게임의 본질은 재미를 추구하는 시뮬레이션이라고 볼 수 있다. 게임산업에 AI기술이 접목되면 더 다양하고 많은 세상을 볼 수 있다. 이를 통해 우리는 더 많은 장단점을 시뮬레이션 할 수 있게 될 것이다. 또한 이를 통해 장점만을 현실로 옮겨올 수 있을 것이라는 생각이 든다"고 덧붙였다.