해커뉴스 메인 1위의 비밀: 사실 20%는 '보이지 않는 감점' 먹고 떨어진다

요약 전 세계 개발자와 테크 마니아들이 모이는 미국 대표 커뮤니티 '해커뉴스(Hacker News)'의 메인 랭킹 시스템 이면에 숨겨진 페널티와 보정 알고리즘이 분석을 통해 드러났습니다. 해커뉴스의 랭킹 기본 공식(추천 수와 시간 경과에 따른 감쇠 함수)은 이미 널리 알려져 있었지만, 실제 메인 페이지 상위권 노출은 단순히 유저들의 순수 투표 점수만으로 결정되지 않았습니다. 며칠간 상위 60개 게시글을 정밀 추적한 결과, 메인 페이지 글의 약 20%가 다양한 감점(페널티)을 받고 있는 것으로 확인됐습니다. 해커뉴스는 서버 부하를 줄이기 위해 유저가 방문할 때마다 전체 글의 순위를 재계산하지 않고, 추천이 발생할 때만 해당 글의 순위를 갱신하거나 30초마다 상위 50개 글 중 하나를 무작위로 골라 재산정하는 방식을 씁니다. 하지만 더 결정적인 것은 시스템이 가하는 인위적 감점이었습니다. 논쟁(controversy)이 붙은 글은 댓글이 40개를 넘어서면 순위가 폭락하도록 강한 페널티를 받으며, 실제로 1위를 차지했던 인기 글들이 이 논쟁 페널티를 맞고 단숨에 순위권 밖으로 밀려나는 현상이 포착됐습니다. 특정 키워드나 출처 도메인에 대한 자동 감점도 확인됐습니다. 당시 제목에 'NSA'가 포함된 글은 기본적으로 0.4의 감점을 받아 순위가 급격히 떨어졌으며(이후 해당 NSA 자동 페널티는 폐지됨), 아르스테크니카, 레딧, 유튜브, 깃허브, 비즈니스 인사이더 등 대형 인기 사이트 링크 역시 0.25~0.8 수준의 자동 감점을 받는 것으로 나타났습니다. 이는 대형 언론사 뉴스가 여러 유저에 의해 중복 투표되어 과도하게 추천을 독점하는 것을 방지하려는 조치로 풀이됩니다. 결국 해커뉴스의 1위 자리는 완전한 자연 발생적 결과물이 아니라 보이지 않는 페널티 조정을 거친 결과였습니다.