"한 장에 0.5초"…스태빌리티AI, 2D를 3D로 만드는 고속 AI모델 공개

영화·게임·유통 등 3D에셋 활용 산업 생산성 향상 지원

스태빌리티AI가 0.5초 만에 2D이미지로 3D에셋으로 전환하고 움직임까지 추가할 수 있는 새로운 인공지능(AI)모델을 공개했다.

단시간에 대규모 3D이미지를 만들 수 있는 만큼 영화, 게임 등 3D에셋을 주로 활용하는 분야에서 쓰일 전망이다.

4일 실리콘앵글 등 외신에 따르면 스태빌리티AI는 스태이블패스트3D(SF3D)라는 새로운 생성형AI 모델을 출시했다.

스태빌리티AI에서 2D 이미지를 3D에셋으로 빠르게 전환하는 스태이블패스트3D를 공개했다(이미지=스태빌리티AI)

SF3D은 이미지에 재료 매개변수와 반사율을 적용해 UV-언랩핑, 텍스처 처리된 모델을 생성하는 피드포워드 3D에셋 생성모델이다. 대형 재구성 모델(LRM)을 기반으로 1초 이내에 세부적이고 텍스처가 있는 형태를 구성할 수 있는 것이 특징이다.

스태빌리티AI의 이전 모델인 세이블비디오3D는 정지 이미지를 3D 모델 생성을 위한 회전 3D 비디오로 변환하는 데 약 10분이 소모됐다.

이 AI모델은 정점 색상에 의존하지 않고 빠른 텍스처 생성을 가능하게 하는 빠른 UV 언래핑 기술이 적용됐다. 또한 재구성된 모델의 시각적 품질을 향상시키기 위해 재료 매개변수와 노멀 맵도 학습하는 과정을 거쳤다.

스태이블패스트3D로 제작한 결과물(이미지=스태빌리티AI)

이 밖에도 SF3D는 조명 효과를 효과적으로 제거하기 위한 단계를 통합해 다양한 조명환경이 적용된 이미지도 전환할 수 있다.

이 AI모델은 단시간 내에 기존보다 높은 품질의 3D에셋을 빠른 속도로 양산할 수 있는 것이 특징이다. 이러한 특성을 살려 게임과 영화, 가상현실(VR)을 비롯해 건축 및 디자인, 유통분야에서 활용될 전망이다.

SF3D의 모델 코드는 깃허브를 통해 사용할 수 있으며, 모델 가중치와 데모 공간은 허깅페이스를 통해 공개됐다.

마크 보스 등 스테이블AI 연구팀은 "SF3D는 3D 재구성 분야에서 속도와 품질에 대한 새로운 기준을 제시한다"며 "전례 없는 속도와 품질은 대기업에서 스타트업까지 3D업무에 도움을 제공할 것"이라고 설명했다.