"눈 마주친 순간 사로잡아야"...네이버웹툰 데이터 엔지니어로 사는 법

[디노2024] 김대식 SVP "글로벌 서비스 고도화 기회 제공"

“네이버웹툰 앱을 열면 ‘알아서 딱!’이라는 메뉴가 바로 상단에 있다. 원래는 요일별 연재 작품을 안내했는데, 모든 연재 작품을 중 취향에 맞는 작품을 전면에 추천하는 서비스로 개발했다. 이용자들에게 웹툰 작품들을 어떻게 보여줄지 고민했고, 머신러닝 기반 추천 엔진을 도입했다.”

김대식 네이버웹툰 SVP는 이용자들이 앱에 접근하자마자 흥미로운 웹툰을 찾아 탐독할 수 있도록 하고 있다며 이같이 언급했다.

김대식 SVP는 12일 과학기술정보통신부가 주최하고 한국소프트웨어산업협회(KOSA) 주관, 지디넷코리아가 후원으로 열린 '디지털 혁신 페스타 2024(DINNO 2024)’의 부대 행사 ‘잡테크 커넥팅 데이즈’ 연사로 등장했다.

김대식 SVP는 인공지능(AI)을 비롯한 기술을 네이버웹툰 사업에 활용하는 역할을 담당한다. 세부적으로는 AI, 머신러닝(ML), 데이터 관련 조직을 두고 기술 지원을 하고 있다.

김대식 네이버웹툰 SVP

AI 조직은 AI 기술을 활용해 웹툰 저작권 보호, ‘AI 페인터’ 등 웹툰 창작을 위한 도구 등을 지원했다. ML 조직은 회사가 웹툰 서비스를 제공하는 일본, 미국 등 글로벌 지역에서 수집된 데이터를 토대로 개인화 추천 서비스를 제공하는 것이 주된 업무다. 이렇게 데이터를 활용하기 앞서, 데이터 전담 조직이 수집된 일 수십억 건 규모 데이터의 쓸모를 찾아 정제하고, 사업 의사결정에 활용하는 작업을 한다.

김 SVP는 “타 서비스에서도 흔히 제공되는 콘텐츠 구매 추천 서비스뿐 아니라 광고, IP 활용 등에도 데이터를 활용한다”면서 “데이터 플랫폼을 구축과 더불어 데이터의 자동화 및 최적화를 꾀하는 ‘데이터 옵스’도 자체적으로 한다는 점이 특징”이라고 소개했다.

외부 플랫폼 대신 자체 구축을 택한 것에 대해선 핵심 기술로서 내재화가 필요하다는 판단이 있었다고 설명했다.

김 SVP는 “이용자의 데이터를 토대로 콘텐츠 추천하는 것에 대한 내재화 의지가 컸다”며 “기술 기업인 네이버 산하 회사라 자체 구축이 용이한 점도 작용했지만, 콘텐츠 중심 기업으로서 기술 내재화가 필요한 영역이라는 판단이 가장 주효했다”고 말했다.

네이버웹툰은 이처럼 데이터와 AI를 활용하기 위해 관련 업무 포지션으로 ▲비즈니스 애널리스트 ▲애널리틱스 엔지니어 ▲데이터 프로젝트 매니저 ▲데이터옵스 엔지니어 ▲데이터 플랫폼 엔지니어로 채용하고 있다. 자체적으로 필요한 플랫폼을 구축해 운영하는 만큼 타 기업보다 데이터 담당자 직무를 세분화해 두고 있다고 했다.

김대식 네이버웹툰 SVP가 데이터 기반 업무 구조를 소개하고 있다

비즈니스 애널리스트는 데이터를 분석해 비즈니스 문제를 이해하고 해결 방안을 제시하며, 이해관계자와 협력해 데이터 기반 의사결정을 지원한다.

데이터 프로젝트 매니저는 데이터 관련 프로젝트를 계획, 관리, 실행해 팀간 협력을 이끌고,  프로젝트가 기한 내에 목표에 맞게 완료될 수 있도록 조율한다.

데이터 엔지니어는 데이터를 수집, 처리, 저장하는 데이터 파이프라인을 구축하고 관리해 분석과 활용을 위한 데이터 인프라를 제공한다.

데이터옵스 엔지니어는 데이터 파이프라인의 개발, 배포, 모니터링을 자동화하고 최적화해 데이터가 일관성 있게 처리되고 효율적으로 전달될 수 있도록 데이터 인프라를 운영한다.

데이터 플랫폼 엔지니어는 데이터 저장, 처리, 관리의 전반적인 플랫폼을 설계하고 구축해 데이터 인프라의 성능, 안정성, 확장성을 보장해준다.

애널리틱스 엔지니어는 데이터 엔지니어링과 데이터 분석의 중간 다리 역할을 하며, 데이터를 분석 가능한 구조로 변환하고 비즈니스 요구에 맞는 데이터 모델을 구축한다.

ML 쪽 업무 포지션은 ML 모델러와 ML 플랫폼 엔지니어로 두고 있다.

ML 모델러는 ML 모델을 설계, 훈련, 평가해 비즈니스 문제를 해결하는 데 필요한 모델링 솔루션을 제공하고 모델 성능을 지속 개선하는 역할을 맡고 있다.

ML 플랫폼 엔지니어는 ML 모델의 개발, 배포, 서빙, 운영을 지원하기 위한 확장 가능하고 안정적인 인프라와 도구를 구축해 데이터 과학자와 모델러들이 효율적으로 작업할 수 있도록 돕는다.

ML을 활용해 웹툰을 추천하는 ‘AI 큐레이션’은 전체 글로벌 서비스에서 제공되고 있다. 김 SVP는 “ML은 수집된 데이터를 토대로 알고리즘을 접목해 미래를 예측하는 기술”이라며 “이커머스처럼 이용자 맞춤형 추천 모델이 필요한 회사들이 ML을 직접 구축할 수 있는 ML 플랫폼 엔지니어를 찾고 있고, 저희도 이런 인력을 필요로 하고 있다”고 첨언했다.

데이터, ML 담당자가 얻을 수 있는 이점으로는 글로벌 서비스에 기반한 업무라는 점을 들었다.

김 SVP는 “글로벌 데이터를 다룰 수 있다는 점에서 네이버웹툰 데이터 엔지니어로서의 즐거움이 있을 것”이라며 “나라별 특성도 살펴볼 수 있고, ML 기반 추천 기술을 다뤄볼 수 있다는 점에서 좋은 직무 기회가 될 것”이라고 강조했다.