Yıllar içinde, Google'ı kullananların yeni ihtiyaçlarını ve beklentilerini karşılamak amacıyla Arama işlevinde çeşitli değişiklikler yapılmıştır. Bilgi Grafiği gibi yeniliklerden, alakalı içerikleri öne çıkarmaya devam etmemizi sağlayan sistemlerimizde yaptığımız güncellemelere kadar, hedefimiz her zaman size daha faydalı sonuçlar sunmaktır.

Arama'da yapılacak olası değişiklikler önce titizlikle yürütülen bir değerlendirme sürecinden geçer. Bu süreçte metrikler analiz edilir ve önerilen bir değişikliğin uygulanıp uygulanmayacağına karar verilir.

Bu değerlendirmelerden ve denemelerden elde edilen veriler, deneyimli mühendislerin ve arama analistlerinin yanı sıra değişiklik lansmanının onaylanıp onaylanmadığına karar veren diğer hukuk ve gizlilik uzmanlarının ayrıntılı bir incelemesinden geçer. 2022'de 800.000'den fazla deneme gerçekleştirdik ve bunun sonucunda Arama'da 4.000'ü aşkın iyileştirme yaptık.

Son olarak, Arama'da yapılması teklif edilen tüm değişiklikler, kullanıma sunulup sunulmayacağının belirlenmesi için en deneyimli mühendislerimiz ve veri bilimcilerimiz tarafından incelenir. Bu inceleme sırasında tüm farklı denemelerden elde edilen veriler dikkatli bir şekilde gözden geçirilir. Kullanıcılar için gerçekten faydalı olduğunu görmediğimiz değişiklikleri uygulamadığımızdan, geçtiğimiz yıllar içinde önerilen pek çok değişiklik kullanıma sunulmamıştır.

Bir özelliği herkesin kullanımına sunmadan önce gerçek kişilerin özellikle nasıl etkileşimde bulunduklarını görmek için canlı trafik denemeleri yürütürüz. Söz konusu özelliği, genellikle %0,1'den başlayarak kullanıcıların sadece küçük bir yüzdesi için etkinleştiririz. Daha sonra, deneme amaçlı grubu, özelliğin etkinleştirilmediği bir kontrol grubuyla karşılaştırırız. Kullanıcıların neleri tıkladıkları, kaç sorgunun yapıldığı, sorguların terk edilip edilmediği, kullanıcıların bir sonucu tıklamalarının ne kadar sürdüğü gibi çok uzun bir metrik listesine bakarız. Bu sonuçları, kullanıcıların yeni özellikle olumlu etkileşimde bulunup bulunmadığını ölçmek ve yaptığımız değişikliklerin herkes için arama sonuçlarının alaka ve fayda düzeylerini artırdığından emin olmak amacıyla kullanırız.

Arama statik bir yapıya sahip değildir. Daha iyi sonuçlar döndürmek için sistemlerimizi sürekli olarak iyileştiriyoruz ve Arama Kalitesi Değerlendiricileri, kullanıma sunum sürecinde önemli bir rol oynuyor. Yapılan yan yana bir denemede Değerlendiricilere, teklif edilen değişikliğin uygulandığı ve uygulanmadığı iki farklı arama sonucu grubu gösteririz. Kendilerine hangi sonuçları tercih ettiklerini ve bunun nedenini sorarız.