[CCTV뉴스=신동훈 기자] 네이버 뉴스 알고리즘 검토 위원회는 29일, 발표회를 갖고 지난 6개월여에 걸쳐 진행한 네이버 뉴스 알고리즘 검토 결과를 공개했다.
네이버 뉴스 알고리즘 검토 위원회(위원장 맹성현, 이하 검토위)는 지난 5월 ▲컴퓨터 공학 ▲정보학 ▲커뮤니케이션 총 3개 분야의 전문가 11인으로 발족되었다. 검토위는 네이버 뉴스 알고리즘을 학술 및 기술적 관점에서 검토해 서비스의 객관성과 투명성을 확보하며, 기술적 수월성에 대한 의견을 제시하고, 향후 서비스 발전 방향에 대해 권고하는 것을 목표로 운영되었다.
검토위는 네이버 뉴스 서비스를 1)뉴스 검색(랭킹 알고리즘) 서비스 2)AiRS 뉴스 추천(에어스, 개인 맞춤형 뉴스) 서비스 3)연예 및 스포츠 뉴스 서비스로 구분하고, 각 서비스에 대한 ▲데이터의 확보 과정 ▲실제 검색 결과를 결정하는 알고리즘과 그에 반영되는 자질(feature) ▲이용자에게 서비스가 실제로 공개되는 과정 ▲전체 과정에 대해 수립된 업무 절차의 적절성 등을 검토했다.
검토 과정에서 검토위는 각 분야의 기술 프로세스에 대한 세부 내용을 파악할 수 있는 문서와 학습 데이터 샘플 등에 대한 상세 내용을 네이버 측으로부터 공유 받았다. 이처럼, 전문가 집단이 한 인터넷 기업의 서비스 전반에 걸친 알고리즘과 이에 반영되는 자질을 구체적으로 검토하고, 발전 방안을 논의한 것은 세계 최초의 시도로, 매우 고무적인 일이다.
검토 결과, 검토위는 1) 뉴스 검색 서비스 영역에서 명확한 가이드라인을 기반으로 품질 평가 방향이 정립되어 있었으며, 앞으로도 계속 이러한 시스템을 정착시키는 것이 중요할 것이라고 평했다.
또한, 네이버 뉴스 랭킹 학습 알고리즘으로는 SVMRank가 사용되고 있으며, 다른 학습 알고리즘을 사용하기에 적합하지 않아, 네이버가 알고리즘 교체보다는 더 좋은 자질의 발굴에 초점을 두고 검색 결과 개선을 위한 노력을 기울이는 것으로 파악된다고 전했다.
덧붙여, 뉴스검색 결과는 알고리즘을 통해 자동으로 배치되기 때문에 관리자의 개입은 원칙적으로 불가능한 구조이며, 뉴스검색 개발-운영-개선에 대한 의사 결정 이력이 모두 기록되고 있고, 이용자 피드백을 수집하고 반영해 실제 이용자들의 검색 품질 만족도를 꾸준히 평가하고 있음을 확인했다고 밝혔다.
2) AiRS 뉴스 추천 서비스 영역에서도 검토위는 네이버가 편집자의 개입 없이 자동적으로 뉴스 이용자들의 피드백 데이터를 수집해 학습 데이터를 확보하고 있으며, 협력필터(Collaborative Filtering)와 품질모델(Quality Model)을 결합해 이용자의 기사 선호도와 기사 품질을 고려한 개인화된 추천 점수를 계산하는 알고리즘을 활용하고 있음을 확인했다고 밝혔다. 특히, 이 과정에서 이용자의 기존 관심사와는 다른 분야의 기사도 함께 추천될 수 있도록 함으로써, ‘필터버블(Filter Bubbles, 확증편향)’ 문제를 최소화 하고 있다는 검토 의견을 전했다.
3)연예 및 스포츠 기사 추천 서비스에서는 일반 분야 뉴스 기사와는 수집되는 기사의 양과 형태, 뉴스 정보의 유효기간 등이 매우 다르다는 특징을 고려해 해당 영역의 특성을 반영한 최신성과 기사 클릭 수치와 같은 피드백 정보를 바탕으로, 맞춤형 뉴스 추천 서비스를 제공하고 있다는 검토 결과를 밝혔다. 또한, 앞선 두 서비스에 비해 데이터 기반의 기계 학습 이 아닌 규칙 기반의 알고리즘을 바탕으로 서비스가 운영되고 있는데 이는 정형화된 특성이 존재하는 해당 영역의 특징을 반영한 것이라 분석했다.
다만, 연예 및 스포츠 기사 추천 알 고리즘의 핵심 역할을 하는 자질이 현재로서는 체계적으로 적절히 활용되고 있으나 시간이 지남에 따라 효용성에 변화가 있을 수 있으므로, 자질에 대한 꾸준한 검증이 필요할 것이라 밝혔다.
총체적으로 검토위는 네이버의 뉴스 서비스 자동화는 공정성과 신뢰성 문제의 해결을 위한 효율적인 대안으로 평가된다고 밝혔다. 또한 뉴스 서비스 전반에 걸친 알고리즘의 공정성 및 투명성과 관련해 발전 방안을 논의한 것은 세계 최초의 시도이며 매우 고무적이라는 의견을 전했다.
그 외, 학습 데이터 구축 주기를 더욱 단축시키고 다양한 연령층을 포괄하며, 알고리즘 개선을 위한 연구개발에 힘쓸 것과 ‘좋은 기사’에 대한 공통 기준을 확립하고 기사 품질 평가 방법 을 개발해 주기적으로 실행하고, 그 결과를 문서화해 전체 서비스에 공유하는 업무 관리체계 를 갖출 것을 권고했다.
네이버 뉴스 알고리즘 검토 위원회 맹성현 위원장은, “전세계적으로도 전례를 찾아볼 수 없는 네이버 뉴스 알고리즘 검토 위원회를 진행하며 전달한 위원회의 의견들이 공적 가치와 기업적 가치를 동시에 추구해야 하는 뉴스포털로서의 네이버가 더욱 신뢰받고 국제적 경쟁력에서도 밀리지 않는 플랫폼으로 진화하는데 소중한 밑거름이 될 수 있기를 바란다”고 전했다"
