어도비, '비밀 AI 기술' 시연…"청중 환호가 출시 결정"

[로스앤젤레스(미국)=조이환 기자] 어도비가 오디오를 텍스트 문서처럼 수정하고 비디오를 단 한 장의 사진 편집만으로 자동 수정하는 등 기존 미디어의 경계를 완전히 허무는 차세대 인공지능(AI) 기술을 데모로 깜짝 공개했다. AI가 단순 보조 도구를 넘어 콘텐츠 제작 워크플로우 자체를 근본적으로 재설계하고 있음을 보여준다는 평가다.

어도비는 29일(현지시간) 미국 로스앤젤레스에서 '어도비 맥스 2025'의 하이라이트 세션인 '스닉스(Sneaks)'를 개최했다. 이 세션은 어도비 연구소의 비밀 프로젝트를 데모로 맛보는 자리로, 청중의 반응이 향후 실제 제품화에 큰 영향을 미친다.

진행을 맡은 폴 트라니 어도비 에반젤리스트는 "과거 스닉스에서 선보인 '하모나이즈'와 '턴테이블'이 올해 포토샵과 일러스트레이터에 정식 탑재됐다"며 "오늘 여러분의 환호가 미래를 결정한다"고 말했다. 이날 행사에는 미국 유명 코미디언 제시카 윌리엄스가 공동 진행자로 합류했다.

어도비는 29일(현지시간) 미국 로스앤젤레스에서 '어도비 맥스 2025'의 하이라이트 세션인 '스닉스(Sneaks)'를 개최했다. (사진=조이환 기자)

"영상은 사진처럼, 오디오는 텍스트처럼"…AI, 미디어 경계 허물다

가장 큰 환호는 비디오 편집의 패러다임을 바꿀 가능성을 보여준 '프로젝트 프레임 포워드(Project FRAME Forward)'에서 터져 나왔다. 이는 영상의 첫 프레임의 사진만 포토샵 등으로 편집하면 AI가 영상 전체를 분석해 해당 편집 내용을 자동으로 적용하는 기술이다.

이날 프로젝트의 시연자인 주이-시엔 왕 어도비 선임 연구 과학자가 영상 속 인물을 첫 프레임에서 지우자 AI가 영상 전체에서 인물을 완벽하게 삭제하는 모습을 선보였다. 나아가 연기처럼 추적이 불가능한 객체를 제거하고 고양이 영상에 물리 법칙이 적용된 반사광까지 포함된 물웅덩이를 추가하는 등 기존 마스킹이나 트래킹으로는 불가능했던 작업을 시연했다.

오디오 분야에서는 '프로젝트 클린 테이크(Project Clean Take)'가 주목받았다. 시연자인 리 브림로우(Lee Brimelow) 어도비 선임 디자인 엔지니어는 녹음된 음성 파일에서 "5년 차"라는 단어를 "4년 차" 텍스트로 타이핑해 교체했다. 또 '지루한' 톤의 목소리를 '자신감 넘치는' 톤이나 '속삭이는' 톤으로 즉시 변경하는 등 오디오를 텍스트처럼 편집하는 기능을 시연했다.

이 기술은 '소스 분리' 기능도 제공했다. 시끄러운 종소리나 바벨 소리만 골라 음소거하고 저작권 문제가 있을 수 있는 현장에 깔린 음악을 어도비 스톡 음악으로 교체한 뒤 공간감까지 복원하는 기능을 공개했다.

2D가 3D로…AI, 이미지에 '공간'을 입힌다

2D 이미지를 3D 공간으로 바꾸는 기술도 연이어 공개됐다. '프로젝트 뉴 뎁스(Project New Depths)'는 2D 사진을 '가우시안 스플랫(Gaussian Splat)'이라는 3D 요소로 변환해 깊이를 인식하는 편집을 선보였다.

시연을 맡은 엘리 미셸 어도비 리서치 사이언티스트는 평범한 트랙터 사진의 시점을 자유롭게 돌려 3D 공간임을 증명했다. 그는 AI가 깊이를 인식하기 때문에 트랙터 '뒤편' 공간에 나무를 자연스럽게 심거나 트랙터의 색상만 정확히 선택해 파란색으로 바꾸는 등 3D 공간 편집을 시연했다.

2D 사진 속 조명을 AI로 제어하는 기술도 공개됐다. '프로젝트 라이트 터치(Project Light Touch)'는 사진 속 빛을 AI가 인식해 편집하는 기술이다. 지신 슈 어도비 리서치 사이언티스트는 사진 속 꺼져있는 램프를 클릭해 불을 켜고 그 후에는 가상의 3D 조명을 추가했다. 그는 이 가상 조명을 3D 공간 안에서 실시간으로 움직이며 빛과 그림자를 바꾸는 모습을 보여줬다.

어도비 여름 인턴이 개발한 기술도 청중의 이목을 끌었다. '프로젝트 씬 잇(Project Scene It)'은 사용자가 3D 공간에 원하는 물건을 먼저 배치하면 AI가 그 물건과 어울리는 배경을 그려주는 기술이다.

시연을 맡은 오인드릴라 사하 리서치 인턴은 이 기술의 독특한 작업 방식을 선보였다. 그는 AI에게 바로 "덤불을 그려줘"라고 명령하지 않았다. 대신 먼저 빈 3D 공간에 '보이지 않는 상자' 두 개를 놓았다. 하나는 큰 상자였고 하나는 작은 상자였다. 이는 AI에게 '여기에 이만한 크기로 무언가를 만들 것'임을 보이기 위해 자리를 미리 맡는 준비 과정이다.

그 후 그는 그 보이지 않는 상자 두 개에 '히비스커스 꽃' 사진을 '꼬리표'처럼 달았다. AI에게 "이 자리에 만들 물건은 이 꽃 사진을 재료로 써줘"라고 알려준 것이다.

마지막으로 그가 AI에게 '덤불들'이라고 명령하자 AI는 꼬리표로 붙여둔 꽃 사진을 재료로 사용했다. 그리고 AI는 처음 잡아둔 두 '상자'의 크기 차이를 정확히 알아채고 큰 상자 자리에는 '키가 큰 덤불'을, 작은 상자 자리에는 '키가 작은 덤불'을 만들어냈다.

시연이 끝나자 폴 트라니 공동 진행자는 "오인드릴라는 여름 인턴"이라며 "어도비가 그에게 정식 입사를 제안했다"고 깜짝 발표했다.

더 똑똑해진 AI 편집기…그림자·반사광까지 '싹'

기존 편집 워크플로우를 AI로 극적으로 개선하는 기술들도 소개됐다. '프로젝트 트레이스 이레이스(Project Trace Erase)'는 단순한 객체 제거를 넘어섰다.

시연자인 링지 장 리서치 사이언티스트는 창가에 선 인물을 제거할 때 인물 본체뿐 아니라 바닥의 그림자와 유리창에 비친 반사광까지 한 번에 추적해 제거하는 모습을 보여줬다. 이 기술은 연기, 빛 번짐, 심지어 물속의 물거품과 수면 왜곡까지 제거하는 강력함을 선보였다.

'프로젝트 서피스 스왑(Project Surface Swap)'은 2D 이미지의 표면 인식에 집중했다. 발렌틴 드샹트르 선임 리서치 사이언티스트는 자동차 사진에서 창문이나 빛 반사를 제외하고 오직 차체 표면의 페인트만 정확히 클릭해 선택했다. 그는 반사광은 그대로 유지한 채 색상이나 질감을 교체하는 기술을 시연했다.

'프로젝트 모션 맵(Project Motion Map)'은 정적인 벡터(Vector) 이미지에 생명을 불어넣었다. 모힛 고엘 선임 컴퓨터 사이언티스트는 로고 이미지에 "눈을 깜빡여라" 같은 자연어 프롬프트만으로 애니메이션을 생성했다. 나아가 AI 에이전트가 햄버거 로고를 자동 분석해 재료가 쌓이는 애니메이션 코드를 생성하는 과정도 공개했다.

마지막으로 '프로젝트 사운드 스테이저(Project Sound Stager)'는 영상 사운드 디자인 작업을 자동화했다. 오리올 니에토 선임 리서치 엔지니어는 워킹맘의 브이로그 영상을 AI로 분석시켰다. AI는 '기상', '가방 싸기' 등 장면을 스스로 인식하고 알람 소리, 지퍼 소리 등 필요한 효과음을 타임라인의 정확한 위치에 자동으로 생성하고 삽입했다.

기술 시연이 모두 끝나자 청중은 어도비 연구원들에게 아낌없는 박수를 보냈다. 이날 공개된 기술들은 당장 상용화가 보장된 것은 아니지만 어도비의 미래 방향성을 제시하며 청중의 반응을 살피는 무대였다.