[블로터]네이버, “내년부터 설명가능한 뉴스 추천 서비스 도입”

| 개편된 네이버 모바일 앱

네이버가 자사의 뉴스 추천 서비스 기술을 공개했다. 네이버는 12월21일 서울 강남구 ‘D2 스타트업 팩토리’에서 테크포럼을 열고 뉴스 콘텐츠 추천 알고리즘 ‘에어스(AiRS)’에 대해 발표했다. 이날 발표에 나선 최재호 뉴스 및 콘텐츠 추천 시스템 에어스 리더는 “기사들이 많은 사용자에게 골고루 추천되도록 해 유용한 정보를 주는 환경을 만드는 게 목표다”라고 말했다.

네이버는 지난 5월 AI 추천 시스템을 전면에 내세우고 뉴스 편집에서 손을 떼겠다고 발표했다. 지난 10월 모바일 앱 서비스 개편을 통해 이를 적용했고, 현재 베타 서비스인 네이버 앱 개편을 내년 1분기 정식서비스로 확대할 계획이다. 이날 발표에서는 추천 알고리즘 기술과 내년부터 도입될 설명 가능한 뉴스 추천 서비스에 대한 내용이 소개됐다.

| 최재호 뉴스 및 콘텐츠 추천 시스템 에어스 리더

뉴스 서비스 자동화 논란

지난 10월 네이버는 모바일 앱 서비스를 개편했다. 뉴스 서비스 영역에서 가장 큰 변화는 네이버가 뉴스 편집에서 손을 뗐다는 점이다. 사람의 손으로 편집되던 메인 뉴스판을 덜어내고 언론사가 직접 배열한 기사와 인공지능(AI) 콘텐츠 추천 시스템 ‘에어스(AiRS)’가 추천한 뉴스가 제공된다. 뉴스 서비스에도 AI 알고리즘을 이용한 개인화 추천 기술을 전격 도입한 셈이다. 당시 한성숙 대표는 “지금까지 뉴스 배열 담당자가 5개 뉴스와 2개 사진기사 선정해 3천만명 이용자에게 동일하게 제공하던 일은 더 이상 하지 않기로 했다”라고 뉴스 서비스 자동화 배경에 대해 밝혔다.

이와 관련해 일각에서는 추천 알고리즘의 공정성과 이용자를 확증편향에 빠트리는 ‘필터버블’ 현상에 대한 우려를 나타냈다. 네이버는 정면 돌파를 택했다. 네이버는 뉴스 서비스에 적용한 알고리즘을 외부 전문가에 맡겨 기술적·학술적으로 검토한 결과를 내놓았다. 뉴스 서비스 자동화는 ‘네이버 뉴스 알고리즘 검토 위원회'(이하 검토위)로부터 공정성과 다양성 측면에서 합격점을 받았다.

지난 11월29일 열린 미디어 간담회에서 검토위는 “에어스 추천 기사와 사람이 직접 편집한 기사를 비교했더니 에어스 추천 기사가 훨씬 다양성이 높았다”라며 “이용자가 관심 있는 정보만 접하면서 편향된 정보를 습득하는 필터버블 문제점은 없는 것으로 확인됐다”라고 밝혔다. 다만 “장기적으로 학습 데이터를 수집·활용하는 계획이 필요하다”라는 권고를 덧붙였다.

추천 알고리즘 기술의 핵심

최재호 리더는 추천 알고리즘 기술의 핵심으로 ‘협력필터’, ‘품질 모델’ 두 가지를 꼽았다. 협력필터는 비슷한 관심사를 가진 사용자 그룹을 시시각각 생성해 이들이 많이 읽은 뉴스를 랭킹화해 추천하는 방식이다. 이용자와 비슷한 관심사를 가진 실시간 사용자 네트워크를 구축해, 해당 구성원들이 많이 소비한 콘텐츠를 랭킹화해 추천한다. 여기에 RNN 기술을 접목해 사용자들이 클릭한 콘텐츠를 기반으로 추천하기 때문에 최신 뉴스를 추천하기 어렵고, 하나의 이슈에 대한 깊이 있는 뉴스를 추천하기 어렵다는 단점을 해결했다.

품질 모델은 사용자가 관심 없는 기사도 추천해줄 수 있도록 하는 알고리즘 기술이다. 매일 생성되는 수만 건의 기사를 딥러닝 기술로 분석하고 예측해 점수를 매긴다. 뉴스 이용자들의 피드백 데이터를 이용해 학습 데이터를 생성하며, 이용자 클릭과 누적 조회수·체류시간 등을 학습해 가중치를 부여하는 방식으로 뉴스를 추천해준다. 검토위가 필터버블 현상이 나타나지 않았다고 밝힌 기술적 배경이다.

기사를 소비하는 한국 이용자들의 특징도 짚었다. 최재호 리더는 “다른 나라 같은 경우 이틀 전 기사, 조금 지난 뉴스도 본인의 취향에 따라 보는 경향이 많은데, 한국에서는 최신 뉴스 위주로 뉴스를 소비하는 경향이 나타난다”라며 “(한국 뉴스 소비자의 특징을) 빠르게 관심사를 얻고 싶은 관심 많은 이용자층이라고 보고, 이에 맞춰 모델 최적화를 하고 있다”라고 설명했다.

설명 가능한 뉴스 추천 시스템

네이버는 에어스 추천 기사에 대한 이용자 반응이 긍정적으로 나타나고 있다고 밝혔다. 최재호 리더는 기존 뉴스판 하단에 나타나는 AI 콘텐츠 일평균 PV가 최근 1년간 증가 추세에 있으며, 그린닷 개편 이후 개인화 PV, 인당 PV가 늘었다고 말했다. 구체적인 수치는 밝히지 않았다. 또 “과도기적으로 기존 뉴스 서비스 방식이 편하다고 생각할 수 있지만, 젊은 세대들은 취향에 맞게 설정하는 걸 중요하게 생각하고 이에 맞춰 변신해야 할 타이밍이라고 생각한다”라고 밝혔다.

개인화 서비스를 저널리즘 영역에 도입하는 것을 부정적으로 보는 의견에 대해선 “(저널리즘 문제를) 기술로만 해결하기 어렵다고 생각하며, 외부의 전문가분들을 모시고 네이버를 통해 유통되는 뉴스가 어떻게 하면 저널리즘적 가치를 내포할 수 있는지 논의하고 있는 것으로 안다”라고 답했다.

네이버는 내년부터 설명 가능한 토픽 기반 뉴스 추천을 도입할 예정이다. 추천 과정의 알고리즘이 보이지 않고, 결괏값인 뉴스만 보이는 방식에서 제기되는 문제를 해결하기 위해서다. 딥러닝 기술을 통해 ‘미세먼지’, ‘경제’, ‘트럼프’ 같은 기사의 주요 단어를 추출하고 사용자의 서비스 이용 맥락을 분석해 관심 분야별로 구분한 뉴스를 제공하는 방식이다. 네이버는 내년 1분기 이내에 현재 베타버전으로 진행되는 모바일 앱 서비스를 정식 서비스로 전환할 계획이다.

출처 : http://www.bloter.net/archives/326877