"전문가급 영상, 갤럭시 폴더블에 담아보세요"

삼성리서치·MX사업부 공동 개발로 자연스런 빛방울 표현

삼성리서치(SR)와 삼성전자 모바일(MX) 사업부가 협업해 갤럭시 폴더블 신제품에 전문가급 영상 기술을 탑재했다.

16일 삼성전자 뉴스룸에 따르면 갤럭시 Z 폴드8 울트라·폴드8·플립8는 영상 촬영 시 자연스런 보케 효과를 보여준다. 보케 효과는 사진의 아웃 포커스 부분에 미적인 블러 효과를 만들어내는 사진 표현 방법으로, 렌즈가 빛의 아웃 포커스 지점을 표현하는 방식이다.

갤럭시 Z 폴드8 울트라 인물 동영상으로 촬영한 야경. 배경의 간판 불빛이 둥근 빛방울로 표현돼 자연스러운 보케 효과를 보여준다. (사진=삼성전자)

신제품에서는 피사체와 배경 사이 거리에 따라 흐림 정도가 자연스럽게 달라지고, 배경의 작은 광원도 전문가 렌즈로 촬영한 것처럼 빛방울로 표현된다. 촬영이 끝난 뒤에도 영상 속 초점 위치를 다른 피사체로 옮기거나 흐림 강도를 조절할 수 있다.

박상욱 MX사업부 프로는 "별도의 전문 장비 없이도 깊이감과 분위기가 살아 있는 영상을 간편하게 촬영할 수 있다"고 설명했다.

기술 개발의 출발점은 전문 카메라와 스마트폰 영상 간의 간극을 좁히자는 아이디어에서 비롯됐다. 김영걸 SR 프로가 스마트폰 영상에서 전문 렌즈 특유의 깊이감을 구현하자는 연구 아이디어를 제안했고, 일반 사용자의 전문 영상 촬영 환경을 고민하던 MX사업부가 제품화를 결정하면서 공동 개발을 착수했다.

양측 개발진은 상용화 수준의 화질을 확보하기 위해 수많은 환경에서 반복 검증을 진행했다. 연구진이 직접 모델로 나서 서로를 촬영하며 인물과 배경의 경계 처리, 거리별 흐림, 빛망울 형성 등을 점검했다.

MX사업부 카메라 개발 담당 박상욱 프로(좌)와 삼성리서치(SR) 비주얼테크놀로지팀 김영걸 프로(우). (사진=삼성전자)

기술적 난제는 머리카락이나 안경테처럼 경계가 복잡한 영역을 분리하는 작업이었다. AI가 추정한 거리 정보만으로는 미세한 경계를 완벽히 구분하기 어려워 자칫 피사체가 인위적으로 오려 붙여진 것처럼 보일 위험이 있다. 이에 개발진은 AI 추정 거리 정보에 원본 영상의 경계 정보를 결합하는 알고리즘을 적용해 경계선을 자연스럽게 분리해 냈다.

스마트폰 하드웨어 한계를 극복하기 위한 최적화도 병행됐다. 영상에서 실시간 렌즈 효과를 연산할 때 발생하는 발열과 전력 소모를 제어하기 위해, 화질에 결정적인 영향을 미치는 영역에 연산 자원을 집중하고 사용자가 체감하기 어려운 부분은 연산을 간소화했다.

박 프로는 "날씨와 광원, 피사체의 움직임과 거리 등 촬영 조건이 달라져도 안정적인 결과를 유지하는 것이 중요했다"며 "다양한 환경에서 반복적으로 촬영해 결과물을 확인했고, 소프트웨어 최적화와 AI 학습 데이터 보완을 통해 어색한 부분을 개선했다"고 설명했다.