"로봇도 배워야 한다"…韓, 피지컬 AI 데이터 확보전

한국이 피지컬 인공지능(AI) 주도권 확보에 속도를 내면서 로봇을 가르칠 '경험 데이터' 확보 경쟁도 본격화하고 있다.

26일 AI 업계에 따르면 국내 복수 기업은 사람 움직임과 실제 산업 현장, 가상공간을 활용해 피지컬 AI 학습 데이터 확보 기술을 개발하고 있다. 거대언어모델(LLM)은 인터넷에 축적된 텍스트와 이미지를 활용할 수 있지만 로봇이 물체를 보고 집고 옮기는 데 필요한 행동 데이터는 현실 세계에서 별도로 확보해야 한다.

NC AI는 디지털 트윈과 월드모델, 인간 동작 데이터를 활용해 피지컬 AI 학습 데이터를 구축하고 있다. 실제 로봇을 반복적으로 움직여 모든 상황을 경험하게 하는 대신 사람 동작을 로봇이 배울 수 있는 데이터로 바꾸고 현실에서 만들기 어려운 상황은 가상공간에서 구현한다.

NC AI가 피지컬 AI 학습을 위해 구축한 가상환경에서 사족보행 로봇을 구현한 모습. (사진=NC AI)

NC AI는 휴머노이드 분야에서는 LG전자 등과 수행하는 국책과제에서 기존 모션 데이터와 애니메이션 제작 기술을 활용한 '범용 모션 트래킹(GMT)' 초기 학습 데이터를 구축하고 있다. 사람 움직임을 휴머노이드에 맞게 바꾸는 '휴먼-로봇 리타기팅' 기술도 개발 중이다.

현실에서 반복하기 어렵거나 위험한 경험은 가상공간에서 만든다. NC AI는 현대로템과 무인 장비와 로봇이 다양한 상황을 학습할 수 있는 피지컬 AI 통합 시뮬레이터를 개발하고 있다. 실제 환경에서 반복하기 어려운 상황을 가상환경에서 만들어 학습과 검증에 활용하는 방식이다.

리얼월드는 실제 산업 현장에서 사람의 작업 경험을 데이터로 확보하고 있다. 여러 대의 카메라로 작업자 움직임을 360도로 촬영해 3차원 영상으로 재구성하는 '4D+' 기술을 활용하고 촉각 장갑으로 물체를 잡을 때의 압력까지 수집한다.

류중희 리얼월드 최고경영자(CEO)는 지난해 미국 라스베이거스에서 열린 AWS 리인벤트에서 "중국이 대규모 인력을 투입해 텔레오퍼레이션 방식으로 로봇 학습 데이터를 모으고 있다"며 "우리는 국내외 기업의 실제 작업 현장에서 카메라와 촉각 장갑을 활용해 데이터를 확보하고 있다"고 설명했다.

미국과 중국도 데이터 확보에 속도를 내고 있다. 미국 휴머노이드 기업 피규어는 지난달 로봇 학습 데이터 플랫폼 '인덱스'를 공개하고 전 세계 사람들이 집과 공장, 물류센터 등에서 작업하는 영상을 수집하고 있다. 피규어에 따르면 108개국에서 1600만개 이상 영상을 확보했다.

중국은 사람과 로봇을 대규모로 투입해 데이터를 모으고 있다. 로이터에 따르면 중국 류저우의 로봇 데이터 훈련센터에서는 100대가 넘는 휴머노이드가 상자 분류와 국수 포장, 커피 만들기 등을 학습하고 있다.