İndeksleme

Google özelinde süreç, sayfanın taranmasının ardından metin, görsel, video ve önemli HTML ögelerinin analiz edilmesini; benzer veya yinelenen sayfalar arasında canonical URL'nin belirlenmesini ve elde edilen bilgilerin Google indeksinde saklanabilmesini kapsar.[1]

Tarama ile indeksleme aynı şey değildir. Bir arama motorunun bir URL'yi keşfetmesi veya sayfayı taraması, o sayfanın mutlaka indekse alınacağı anlamına gelmez. Google açıkça her işlediği sayfanın indekslenmediğini ve indekslemenin garanti olmadığını belirtir.[1]

İndekslenmek ile sıralama da farklı aşamalardır. Bir sayfanın indekste bulunması, belirli bir sorguda üst sıralarda ya da herhangi bir görünür pozisyonda yer alacağı anlamına gelmez. Arama sonucu sunumu, indeks içindeki uygun sayfaların sorguya göre değerlendirilmesiyle gerçekleşir.[1]

Robots.txt de indekslemeyi doğrudan kapatan bir mekanizma değildir. Google, robots.txt ile taraması engellenen bir URL'yi başka yerlerden keşfederse URL'nin kendisini bazı durumlarda sonuçlarda gösterebilir; indekslenmesini engellemek için erişilebilir bir noindex kuralı veya uygun erişim kontrolü gerekir.[2]

“Google sayfayı gördü” ile “sayfa indekslendi” ve “sayfa aramada görünür” ifadelerini aynı anlamda kullanmak teknik teşhisi zorlaştırır. İndeksleme, bu zincirin ayrı bir aşamasıdır ve içerik kalitesi, teknik erişim, meta kuralları ve canonical kararlarıyla birlikte değerlendirilmelidir.