네이버 뉴스 알고리즘 검토위 "현재 알고리즘 적합"

"관리자 개입 원칙적으로 불가능 구조"

네이버 뉴스 알고리즘 검토위원회(이하 검토위)가 네이버 뉴스 서비스 자동화 알고리즘을 분석한 결과 공정성과 신뢰성 문제 해결에 도움이 된다는 결론을 내렸다.

관리자의 개입이 원칙적으로 불가능한 구조라는 설명이다.

검토위는 또 뉴스 서비스 전반에 걸친 알고리즘의 공정성·투명성과 관련해 발전 방안을 논의한 것에 긍정적인 평가를 한 뒤, 알고리즘 개선을 위한 연구개발에 더욱 힘써달라고 당부했다.

네이버 뉴스 알고리즘 검토 위원회는 29일, 서울 중구 프레스센터에서 발표회를 갖고 지난 6개월여에 걸쳐 진행한 네이버 뉴스 알고리즘 검토 결과에 대해 공개했다.

검토위는 네이버 뉴스 알고리즘 검토 결과 "뉴스 검색 서비스 영역에서 명확한 가이드라인을 기반으로 품질평가 방향이 정립돼 있었으며, 앞으로도 계속 이러한 시스템을 정착시키는 것이 중요할 것"이라고 평했다.

맹성현 네이버 뉴스 알고리즘 검토위원장

네이버 뉴스 알고리즘 검토 위원회는 지난 5월 ▲컴퓨터 공학 ▲정보학 ▲커뮤니케이션 총 3개 분야의 전문가 11인으로 발족했다. 검토위는 네이버 뉴스 알고리즘을 학술 및 기술적 관점에서 검토해 서비스의 객관성과 투명성을 확보하며, 기술적 수월성에 대한 의견을 제시하고, 향후 서비스 발전 방향에 대해 권고하는 것을 목표로 운영됐다.

검토위는 먼저 네이버 뉴스 서비스를 ▲뉴스 검색(랭킹 알고리즘) 서비스 ▲에어스(AiRS) 뉴스 추천(개인 맞춤형 뉴스) 서비스 ▲연예 및 스포츠 뉴스 서비스로 구분했다.

각 서비스에 대한 ▲데이터의 확보 과정 ▲실제 검색 결과를 결정하는 알고리즘과 그에 반영되는 자질 ▲이용자에게 서비스가 실제로 공개되는 과정 ▲전체 과정에 대해 수립된 업무 절차의 적절성 등을 검토했다.

검토 과정에서 검토위는 각 분야의 기술 절차에 대한 세부 내용을 파악할 수 있는 문서와 학습 데이터 샘플 등에 대한 상세 내용을 네이버 측으로부터 공유받았다.

검토 결과, 검토위는 “뉴스 검색 서비스 영역에서 명확한 가이드라인을 기반으로 품질평가 방향이 정립돼 있었으며, 앞으로도 계속 이런 시스템을 정착시키는 것이 중요할 것”이라고 평했다.

검토위는 “네이버 뉴스 랭킹 학습 알고리즘으로는 SVMRank가 사용되고 있으며, 다른 학습 알고리즘을 사용하기에 적합하지 않아, 네이버가 알고리즘 교체보다는 더 좋은 자질의 발굴에 초점을 두고 검색 결과 개선을 위한 노력을 기울이는 것으로 파악된다”고 밝혔다.

이어 "뉴스검색 결과는 알고리즘을 통해 자동으로 배치되기 때문에 관리자의 개입은 원칙적으로 불가능 한 구조"라면서 "뉴스검색 개발-운영-개선에 대한 의사 결정 이력이 모두 기록되고 있고, 이용자 피드백을 수집하고 반영해 실제 이용자들의 검색 품질 만족도를 꾸준히 평가하고 있음을 확인했다”고 설명했다.

아울러 검토위는 뉴스 추천 서비스 영역에서도 네이버가 편집자의 개입 없이 자동적으로 뉴스 이용자들의 피드백 데이터를 수집해 학습 데이터를 확보하는 것으로 판단했다. 협력필터와 품질모델을 결합해 이용자의 기사 선호도와 기사 품질을 고려한 개인화된 추천 점수를 계산하는 알고리즘을 활용하고 있음을 확인했다고도 평가했다.

특히 이 과정에서 이용자의 기존 관심사와는 다른 분야의 기사도 함께 추천될 수 있도 록 함으로써, ‘필터버블(확증편향)’ 문제를 최소화 하고 있다는 검토 의견을 냈다.

이어 검토위는 연예 및 스포츠 기사 추천 서비스에서는 일반 분야 뉴스 기사와는 수집되는 기사의 양과 형태, 뉴스 정보의 유효기간 등이 매우 다르다는 특징을 고려해 해당 영역의 특성을 반영한 최신성과 기사 클릭 수치와 같은 피드백 정보를 바탕으로, 비맞춤형 뉴스 추천 서비스를 제 공하고 있다는 검토 결과를 밝혔다.

또한 앞선 두 서비스에 비해 데이터 기반의 기계 학습 이 아닌 규칙 기반의 알고리즘을 바탕으로 서비스가 운영되고 있는데, 이는 정형화된 특성이 존재하는 해당 영역의 특징을 반영한 것이라 분석했다. 다만 연예 및 스포츠 기사 추천 알 고리즘의 핵심 역할을 하는 자질이 현재로서는 체계적으로 적절히 활용되고 있으나 시간이 지남에 따라 효용성에 변화가 있을 수 있으므로, 자질에 대한 꾸준한 검증이 필요할 것이라고 제언했다.

총체적으로 검토위는 네이버의 뉴스 서비스 자동화는 공정성과 신뢰성 문제의 해결을 위한 효율적인 대안으로 평가된다고 밝혔다. 또한 뉴스 서비스 전반에 걸친 알고리즘의 공정성 및 투명성과 관련해 발전 방안을 논의한 것은 세계 최초의 시도며 매우 고무적이라고 덧붙였다.

그 외 학습 데이터 구축 주기를 더욱 단축시키고 다양한 연령층을 포괄하며, 알고리즘 개선을 위한 연구개발에 힘쓸 것과 ‘좋은 기사’에 대한 공통 기준을 확립하고 기사 품질 평가 방법을 개발해 주기적으로 실행하고, 그 결과를 문서화해 전체 서비스에 공유하는 업무 관리체계를 갖출 것을 권고했다.

맹성현 검토위원장은, “전세계적으로도 전례를 찾아볼 수 없 는 네이버 뉴스 알고리즘 검토 위원회를 진행하며 전달한 위원회의 의견들이 공적 가치와 기업적 가치를 동시에 추구해야 하는 뉴스포털로서의 네이버가 더욱 신뢰받고 국제적 경쟁 력에서도 밀리지 않는 플랫폼으로 진화하는데 소중한 밑거름이 될 수 있기를 바란다”고 강조했다.