지난 수년간 Google을 사용하는 사람들의 요구 및 기대치가 변화함에 따라 Google 검색도 이에 맞게 바뀌어 왔습니다. Google은 지식 정보와 같은 혁신적인 기능을 도입했을 뿐 아니라, 계속해서 관련성 높은 콘텐츠를 제공하기 위해 시스템을 개선하고 있습니다. Google의 목표는 언제나 사용자에게 더욱 유용한 검색결과를 제공하는 것이기 때문입니다.
Google은 측정항목을 분석하여 제안된 변경사항의 적용 여부를 결정하는 엄격한 평가 절차를 통해 가능한 모든 변경사항을 Google 검색에 적용하고 있습니다.
이러한 평가와 실험을 통해 얻은 데이터는 숙련된 엔지니어와 검색 분석가는 물론 기타 법률 및 개인 정보 보호 전문가의 철저한 검토를 거치며, 이후에 변경사항 적용 여부가 결정됩니다. 2022년에는 60만 건이 넘는 실험을 진행하여 4,000건 이상의 개선사항을 Google 검색에 적용했습니다.
제안된 모든 Google 검색 관련 변경사항은 Google의 가장 숙련된 엔지니어와 데이터 전문가의 검토를 거칩니다. 이들은 다양한 실험 데이터를 전부 신중히 검토하여 변경사항의 출시를 승인할지 결정합니다. 작년에 제안된 변경사항 가운데 다수가 출시되지 못했습니다. Google은 변경사항이 실제로 사용자에게 개선된 검색결과를 제공할 수 있다고 검증되지 않으면 출시하지 않기 때문입니다.
Google은 실시간 트래픽 실험을 하여 모든 사용자를 대상으로 기능을 출시하기 전에 실제 사용자가 기능과 어떻게 상호작용하는지 미리 확인합니다. 이때 해당 기능을 소수의 사용자에게만 제공하는데, 보통 사용자의 0.1%부터 시작합니다. 이후에는 실험 그룹과 기능이 활성화되지 않은 통제 그룹을 비교합니다. 이를 통해 사용자가 클릭하는 항목, 검색한 검색어 수, 검색 취소 여부, 사용자가 검색결과를 클릭할 때까지 걸린 시간 등 수많은 측정항목을 살펴봅니다. 이러한 결과를 활용하여 새 기능에 관한 참여가 긍정적인지 측정하며, 변경사항을 적용하여 모든 사용자에게 표시되는 검색결과의 관련성과 유용성이 개선되도록 합니다.
Google은 외부 검색 품질 평가자와 협력하여 검색결과의 품질을 지속적으로 측정합니다. 평가자는 콘텐츠가 검색 요청에 얼마나 부합하는지를 평가하고 콘텐츠의 전문성, 권위, 신뢰성을 기준으로 검색결과의 품질을 판단합니다. 이러한 평가가 순위에 직접 영향을 주지는 않지만, Google이 검색결과의 품질을 벤치마킹하고 전 세계적으로 검색결과의 높은 수준을 유지하는 데 도움이 됩니다.
평가자는 웹사이트가 해당 웹사이트를 클릭하는 사용자에게 원하는 검색결과를 얼마나 잘 제공하는지 측정하고 콘텐츠의 전문성, 권위성, 신뢰성을 바탕으로 결과의 품질을 평가합니다.
일관성을 보장하기 위해 Google은 검색 품질 평가자 가이드라인을 마련하여 평가자들에게 적절한 평가 가이드와 예시를 제공합니다. 검색결과 품질 평가는 간단한 일처럼 보일 수 있지만 신중한 판단이 필요한 까다로운 사례가 많습니다. Google이 사용자를 위해 검색결과의 우수한 품질을 유지하기 위해서는 이러한 의견이 반드시 필요합니다.
검색은 정적이지 않습니다. Google은 더 나은 검색결과를 제공하기 위해 끊임없이 시스템을 개선하며, Google 검색 품질 평가자들은 출시 과정에서 중요한 역할을 합니다. Google의 비교 실험에서는 평가자들에게 서로 다른 두 가지 검색결과 집합을 제시합니다. 하나는 제안된 변경사항이 이미 구현된 것이고, 다른 하나는 구현되지 않은 것입니다. 그리고 평가자들에게 어떤 결과를 왜 선호하는지 묻습니다.
