매트 커츠 구글 검색그룹 총괄 엔지니어는 1월30일 열린 ‘2012 웹마스터 컨퍼런스’에서 한국의 웹마스터에게 검색 최적화 비법과 중요성을 알리며, 구글의 검색 서비스 개발에 대한 뒷이야기를 공개했다.

매트 커츠는 “매년 2만건을 실험하고 그 실험 내용을 반영해 매주마다 검색 어떤 아이디어를 실행할 것인지를 평가해 결정한다”라며 “매일 적어도 한 번은 변경이 이루어진다”라고 밝혔다. 그는 구글의 검색은 “하나의 아이디어에서 출발한다”라며 구글이 검색 알고리즘을 변경하는 과정을 소개했다.

2010년 자료를 토대로 매트 커츠가 소개한 구글 검색 알고리즘 변경 과정을 살펴보자. 2010년 구글은 검색 서비스를 개선하기 위해 나온 2만개 아이디어 중 그럴듯한 9735개를 추렸다. 구글은 이 아이디어를 추릴 때 외부와 격리된 환경(sandbox)에서 철저한 평가를 했다. 이게 1차 테스트이다.

1차 테스트를 거친 1만여개의 아이디어 중 ‘좋은 결과가 나왔다’ 싶은 8549개는 사용자에게 적용하는 실험을 거쳤다. 이 2차 테스트는 일부 사용자를 대상으로 검색 결과에 해당 아이디어를 적용하고 기존의 방법으로도 검색 결과를 교차해 보여주는 방식으로 진행된다. 이렇게 사용자의 반응이 좋은 아이디어를 골라보니 2688개가 남았다. 실제 이용자에게 적용했지만, 그렇다고 해서 이 아이디어가 검색 결과에 곧장 반영되진 않았다.

마지막 관문, ‘클릭 평가’가 남았다. 이 단계에서 구글은 사용자가 새로운 아이디어를 적용한 검색 결과에 얼마나 만족하는지를 클릭률로 판단한다. 검색 결과를 테스트할 때 이용자는 달라진 점을 못 느낄 수도 있다고 매트 커츠는 설명했다. 매트 커츠는 “새로운 검색 방법을 적용했을 때 검색 결과에 대한 클릭이 기존의 검색 결과보다 더 많이 나왔다면, 이 아이디어는 검색 품질을 개선하는 아이디어로 평가받는다”라고 최종 선정 기준에 대해 말했다.

2만개 중 이렇게 총 4개의 관문을 통과한 아이디어만이 구글 검색에 공식적으로 반영된다. 2010년에는 이 과정을 거쳐 검색 알고리즘에 최종 반영된 아이디어가 585개였다.

매트 커츠는 검색 방법에 변화를 줄 때마다 “이렇게 변경했을 때 사용자를 위해 검색 결과가 개선됐는가”라는 질문을 던진다며 “구글은 이런 과정을 절대 멈추지 않을 것”이라고 말했다.