Vyhledávání se v průběhu let změnilo, aby odpovídalo potřebám a očekáváním lidí, kteří Google používají. Ať už se jedná o velké inovace, jako je Diagram znalostí, nebo o pouhé aktualizace našich systémů pro výběr relevantního obsahu, cíl změn je vždy stejný – zvýšit užitečnost výsledků.

Všechny možné změny Vyhledávání procházejí důkladným procesem hodnocení, při kterém analyzujeme metriky a posuzujeme, zda navrhovanou změnu implementujeme.

Údaje získané při těchto hodnoceních a experimentech procházejí pečlivou kontrolou, kterou provádějí zkušení inženýři a analytici vyhledávání i odborníci na právo a ochranu soukromí, kteří poté určí, zda bude změna schválena ke spuštění. V roce 2022 jsme provedli více než 800 000 experimentů, které vedly k více než 4 000 vylepšením Vyhledávání.

Každou navrhovanou změnu Vyhledávání kontrolují naši nejzkušenější inženýři a datoví vědci, kteří na základě pečlivého posouzení dat ze všech různých experimentů rozhodují, zda bude změna schválena ke spuštění. Velká část navrhovaných úprav se do živého provozu vůbec nedostane, protože spouštíme pouze ty změny, u kterých dokážeme prokázat, že jsou pro uživatele přínosné.

Před spuštěním funkce pro všechny uživatele provádíme experimenty v živém provozu, při nichž testujeme, jak uživatelé na funkci reagují. Funkci aktivujeme pouze malému procentu uživatelů – obvykle začínáme podílem 0,1 %. Experimentální skupinu pak porovnáme s kontrolní skupinou, u které funkce aktivována nebyla. Vyhodnocujeme širokou škálu metrik, například na co lidé klikali, kolik dotazů odeslali, které dotazy opustili bez kliknutí, jak dlouho jim trvalo, než na výsledek klikli, apod. Na základě těchto výsledků posuzujeme, zda je nová funkce pro uživatele přínosná, aby prováděné změny zvyšovaly relevanci a užitečnost výsledků pro uživatele.

Vyhledávání není statické. Naše systémy neustále vylepšujeme, aby nabízely lepší výsledky, přičemž při procesu zavádění nových funkcí hrají důležitou roli hodnotitelé kvality vyhledávání. Ve srovnávacím experimentu hodnotitelům ukazujeme dvě různé sady výsledků Vyhledávání: jednu s implementovanou navrhovanou změnou a druhou bez ní. Ptáme se jich, která sada se jim zdá lepší a proč.