글로벌 빅테크 기업들의 인공지능(AI) 기술 주도권 경쟁이 가속화되고 있는 가운데, 네이버가 국내 기업에서는 최초로 초대규모 AI인 '하이퍼클로바'를 공개했다. 한국어를 중심으로 한 AI 모델을 만들어 글로벌 기술 대기업들의 AI에 종속되지 않겠다는 목표다.
이와 함께 네이버는 하이퍼클로바를 통해 국내에서뿐만 아니라 글로벌 AI 기술 리더로 발돋움하면서 '모두를 위한 AI' 시대를 이끌어나가겠다는 야심찬 계획도 밝혔다.
25일 네이버는 ‘NAVER AI NOW(네이버 AI 나우)’ 컨퍼런스를 온라인으로 열고 작년 10월 슈퍼컴퓨터 도입 이후 네이버 AI 기술의 성과와 앞으로의 방향성을 공개했다.
국내 최초 초대규모 AI이자 세계 최대 한국어 언어모델 ‘하이퍼클로바’
정석근 네이버 CLOVA CIC(Company-In-Company) 대표는 키노트에서 “글로벌 기술 대기업들은 대형 AI 모델이 가져올 파괴적 혁신에 대한 기대로 투자를 가속화하고 있다”며 “한국의 AI 기술이 글로벌 플랫폼에 종속되지 않기 위해서는 이미 공개된 기술을 활용하고 따라잡는 수준에 그칠 수 없다고 판단했다”고 하이퍼클로바 개발 배경을 밝혔다.
하이퍼클로바는 미국 AI 연구소 오픈AI의 GPT-3(175B)를 뛰어넘는 204B(2040억 개) 파라미터(parameter, 매개변수) 규모로 개발됐다. AI 모델의 크기를 나타내는 파라미터의 수가 높아질수록, AI는 더욱 많은 문제를 해결할 수 있게 된다.
하이퍼클로바는 GPT-3보다 한국어 데이터를 6천500배 이상 학습한, 현재 전세계에서 가장 큰 한국어 초거대 언어모델이기도 하다. 영어가 학습 데이터의 대부분을 차지하는 GPT-3와 달리, 하이퍼클로바 학습 데이터는 한국어 비중이 97%에 달한다. 영어 중심의 글로벌 AI 모델과 달리 한국어에 최적화한 언어모델을 개발함으로써, AI 주권을 확보한다는 의미도 있다.
이를 위해 네이버는 지난 10월 국내 기업 최초로 700 페타플롭(PF) 성능의 슈퍼컴퓨터를 도입하며, 대용량 데이터 처리를 위한 인프라를 갖췄다.
국내 최대 인터넷 플랫폼을 운영하며 쌓아온 대규모 데이터 처리 능력도 하이퍼클로바만의 중요한 경쟁력이다. 네이버는 하이퍼클로바 개발을 위해 5천600억개 토큰(token)의 한국어 대용량 데이터를 구축했다.
슈퍼컴퓨터 인프라와 한국어 데이터 외에 네이버가 보유한 전세계 최고 수준의 AI 연구 개발 역량 역시 하이퍼클로바 자체 개발의 중요한 요소다. 네이버는 작년 한해 동안 글로벌 톱 AI 컨퍼런스에서 국내 기업 중 가장 많은 43개의 정규 논문을 발표하며 기술력을 인정받았다. 또한 서울대학교와 ‘서울대-네이버 초대규모(Hyperscale) AI 연구센터’를 설립하고, 카이스트 AI 대학원과는 ‘카이스트-네이버 초창의적(Hypercreative) AI 연구센터’를 설립하는 등 긴밀하고 강력한 산학협력을 통해 AI 공동 연구에 더욱 박차를 가하고 있다.
네이버는 앞으로 한국어 외 다른 언어로 언어 모델을 확장하고, 언어뿐만 아니라 영상이나 이미지 등도 이해하는 ‘멀티모달(Multimodal) AI’로 하이퍼클로바를 계속해서 발전시켜나갈 계획이다.
네이버 서비스에 하이퍼클로바 상용화해 사용자 경험 차별화
하이퍼클로바는 AI 개발과 적용의 패러다임을 완전히 바꿔, 일상 속에서 AI가 더욱 많이, 널리 사용되도록 돕는다. 기존에는 해결하고자 하는 문제별로 데이터를 확보하고 정제해 모델을 개발했다면, 하이퍼클로바는 하나의 ‘Big Model(빅모델)’에 방대한 데이터를 학습시켜 다양한 문제에 적용할 수 있다. 이를 통해 AI를 더욱 효율적으로 개발할 수 있을 뿐만 아니라, AI의 확장성이 대폭 높아진다.
네이버는 하이퍼클로바의 기술을 네이버 서비스에 적용해 사용자들에게 차별화된 경험을 제공할 예정이다.
첫번째 사례로 지난 6일 검색 서비스에 하이퍼클로바를 적용해, 사용자가 검색어를 잘못 입력하는 경우 올바른 단어로 전환해 검색해주거나 적절한 검색어를 추천해주는 기능을 선보인 바 있다.
나아가, 네이버는 하이퍼클로바가 SME, 크리에이터, 스타트업 등 기술의 도움이 필요한 ‘모두의 능력’이 될 수 있도록 지원한다는 계획이다. 간단한 설명과 예시를 제시하는 소수학습(Few-shot learning) 방식으로 AI를 동작시킬 수 있기 때문에, AI 전문가가 아니어도 누구나 손쉽게 AI 서비스를 만들 수 있게 된다.
예를 들어, 상품 판매에 도움이 되는 적절한 마케팅 문구를 AI가 자동으로 작성해주는 일, 공부해야 할 내용을 AI가 빠르게 요약하거나 모르는 내용을 질문했을 때 자연스럽게 답변해주는 일 등이 가능해지게 된다. 네이버는 향후 적극적인 사업 및 연구 협력을 통해 다양한 방식의 기술 제공을 계획하고 있다.
관련기사
- 네이버-카이스트, 수백억 투자해 ‘초대규모 AI’ 공동연구2021.05.24
- 알리바바, AI로 고서 인식...정확도 97.5%2021.05.25
- "4차산업혁명은 천운···AI, 과감히 받아들여야"2021.05.25
- 과기정통부, AI로 지역혁신 돕는다2021.05.24
네이버는 기존에도 ‘기술 플랫폼’이라는 방향성 아래, 첨단 AI 기술로 사용자의 일상을 더욱 편리하게 바꾸고, SME의 비즈니스와 크리에이터의 활동에 가치를 더하기 위해 노력해왔다. 특히, 코로나19 팬데믹 상황에서 클로바의 자연어처리, 음성 인식 및 합성 기술로 능동감시자 관리를 위한 ‘클로바 케어콜’ 서비스를 내놓으며 방역 현장의 업무 효율화에 기여하기도 했다.
정석근 네이버 클로바 CIC 대표는 “더 짧은 시간과 더 적은 리소스를 사용해서 이전에 우리가 상상만 했던, 또는 우리가 상상하지 못했던 일들마저 가능해지는 새로운 AI의 시대가 열리고 있다”면서 “’하이퍼클로바’를 통해 SME와 크리에이터를 포함해 AI 기술이 필요한 모두에게 새로운 경험을 제공할 것”이라고 밝혔다.