바이트댄스 창업자, 실시간 월드 모델 개발 직접 챙긴다

라이브 스트리밍·게임 등 활용…이르면 내달 출시 목표

바이트댄스가 실시간으로 가상세계를 생성하는 인공지능(AI) 모델 개발에 나서며 메타와 구글 등이 경쟁하는 '월드 모델' 시장에 뛰어든다.

블룸버그통신은 7일(현지시간) 소식통을 인용해 장위밍 바이트댄스 창업자가 실시간 공간 영상 생성 AI 모델 개발을 직접 지휘하고 있다고 보도했다. 

이르면 다음 달 출시 예정인 신규 모델은 바이트댄스의 영상 생성 AI '시댄스'를 기반으로 개발된다. 라이브 스트리밍과 숏폼 드라마, 게임 등에서 사용자가 상호작용할 수 있는 가상세계를 실시간으로 생성하는 것이 목표다.

바이트댄스 싱가포르 본사 전경 (사진=지디넷코리아)

피코 헤드셋 사용자의 음성이나 움직임에 반응하는 가상환경도 구현한다. 약 0.05초 지연으로 초당 20프레임의 영상을 생성해 가상현실(VR)과 공간 컴퓨팅 환경에서 실시간 상호작용을 지원한다는 구상이다.

바이트댄스는 콘텐츠 생성에 필요한 연산을 클라우드에서 처리하는 방식도 추진한다. 헤드셋의 컴퓨팅 부담을 낮춰 고성능 하드웨어에 대한 의존도를 줄이고 더 저렴한 VR 기기에서도 관련 서비스를 구현할 수 있다는 설명이다.

이번 기술은 바이트댄스의 AI 모델과 클라우드 컴퓨팅 자원, 콘텐츠 플랫폼, 피코의 하드웨어를 결합하는 전략으로 풀이된다. 구글의 범용 월드 모델인 '지니'처럼 AI가 가상환경을 생성하고 사용자 행동에 반응하는 기술은 게임뿐 아니라 로보틱스와 자율주행 등에도 활용될 수 있다.

바이트댄스는 AI 사업 확대를 위해 300억 달러 규모 자금도 확보했다. 회사는 이를 AI 역량과 데이터센터, 관련 하드웨어 확대에 활용할 계획인 것으로 알려졌다.

블룸버그는 "빠른 콘텐츠 생성이 사용자 경쟁의 무게중심을 하드웨어 사양에서 AI 모델, 컴퓨팅 인프라, 콘텐츠 유통 플랫폼으로 이동시킬 수 있다"고 분석했다.