ETRI 생성형 AI로 만든 3D 영화발전사…"손에 잡힐 듯"

비주얼센터와 4분짜리 '시네마제네시스' 제작, 부산 국제단편영화제 상영

한국전자통신연구원(ETRI)이 2D를 3D로 제작한 4분짜리 영화 '시네마제네시스'가 부산국제단편영화제에 공식 상영된다.

이 작품은 ETRI와 부산국제단편영화제(BISFF), 콘텐츠 제작사 비주얼센터와 협력해 제작했다. 오는 23일부터 열리는 제43회 부산국제단편영화제 공식 상영과 프랑스 파리에서 열리는 ‘BISFF 인 파리'에서도 선보일 예정이다.

ETRI 연구진이 영화의 탄생 과정을 3D 입체영상으로 재구성한 시네마 제네시스 한 장면.(사진=ETRI)

'시네마 제네시스'에서 제네시스는 '탄생, 기원' 정도로 해석된다. 제목처럼 영화 발전에 기여한 인물들의 발명과 창작 과정을 AI 기술로 재해석한 약 4분 분량의 입체영상 콘텐츠다. 역사적 자료를 바탕으로 영화의 기원을 현대 기술로 복원했다.

예를 들어 영국 포토그래퍼 에드워드 머이브리지 이미지 복원을 보면, 먼저 생성적 적대 신경망(GAN) 기술을 활용해 손상되거나 해상도가 낮은 이미지를 고화질로 복원한다. 이후 색상을 복원하고, 턴테이블 기반 다면 형체 구축 기술을 통해 한 장의 이미지에서 인물의 입체적인 형태와 깊이 정보를 추출한다. 마지막으로 애니메이션 처리를 통해 좌우 시차를 구현, 3D 입체영상으로 변환한다.

이 과정을 거치면 실제처럼 보이는 실감형 콘텐츠로 재탄생하는 것. 이를 위해 ETRI는 ‘AI 기반 2D-to-3D 입체영상 변환 기술’과 ‘깊이(Depth) 추정 기술’을 적용했다.

계층적 부호화 기술도 적용해 UHD 4K 및 스마트폰 환경에서의 2D/3D 호환형 실감영상도 구현했다. 다양한 디바이스 환경에서의 스트리밍 서비스가 가능하다.

특히 하나의 영상 스트림으로 2D와 3D 콘텐츠를 동시에 제공할 수 있어 스마트폰, TV, 차량 디스플레이 등 다양한 디바이스 환경에서 사용자가 원하는 방식으로 콘텐츠를 선택할 수 있다.

김창호 비주얼센터 이사는 “AI 기술이 영화사의 선구자들과 시공간을 초월한 협업을 만들어냈다"며 "입체영상 기술을 통해 더욱 몰입감 있는 콘텐츠 제작이 가능해졌다”고 말했다.

김성훈 ETRI 동남권지능화융합연구실 책임연구원은 “기존 영상 콘텐츠를 실감형 콘텐츠로 확장할 수 있는 가능성을 입증했다"며 "향후 영화, 드라마, 공연 등 다양한 분야에서 국내 콘텐츠 산업 경쟁력 강화와 글로벌 한류 콘텐츠 확산에 기여할 것"으로 기대했다.