Noindex

noindex, bir HTML sayfasında robots meta etiketiyle veya HTTP X-Robots-Tag başlığıyla uygulanabilir. Google, desteklediği bu kuralı gördüğünde ilgili sayfa veya kaynağı Google Search sonuçlarında göstermemeyi amaçlar.[1][2]

Noindex ile robots.txt aynı şey değildir. Robots.txt crawler'ın URL'yi taramasını sınırlar; noindex ise crawler'ın sayfaya erişip kuralı görmesinden sonra indeksleme davranışını etkiler. Google, noindex'in çalışabilmesi için URL'nin robots.txt tarafından engellenmemesi gerektiğini özellikle belirtir.[1]

Bu nedenle bir URL'yi hem robots.txt ile engelleyip hem de içine noindex koymak istenen sonucu garanti etmez. Google sayfayı tarayamazsa noindex direktifini de göremez. Sayfa başka bağlantılardan biliniyorsa URL bazı koşullarda içerik bilgisi olmadan sonuçlarda görünebilir.[1]

Noindex ile nofollow da aynı şey değildir. noindex, sayfanın sonuçlarda gösterilmemesini ister. nofollow ise sayfadaki bağlantıların takip edilmesiyle ilgili ayrı bir robots kuralıdır. Google'ın güncel robots meta dokümantasyonunda none değeri noindex, nofollow kombinasyonuna eşdeğerdir.[2]

Noindex gizlilik veya erişim kontrolü mekanizması değildir. Şifreli, özel veya yetkisiz içeriklerin yalnız noindex ile korunması doğru değildir; içerik erişimi kimlik doğrulama veya başka güvenlik mekanizmalarıyla sınırlandırılmalıdır.

Noindex ayrıca canonical etiketinin alternatifi değildir. İki URL'nin aynı içeriği temsil ettiği durumda canonicalization gerekebilir; bir içeriğin arama sonuçlarında hiç yer almaması isteniyorsa noindex farklı bir karar ifade eder.

MedyaBudur'da launch öncesi indexing kapısı ile sayfa bazlı noindex kararını birbirine karıştırmamak gerekir. Proje genelindeki pre-launch gate, sitenin hazır olmadan indekslenmesini önleyen teknik yayın politikasıdır. Noindex ise gerektiğinde belirli URL'ler için kullanılan sayfa/kaynak düzeyi direktiftir. Launch sırasında yanlışlıkla kalan noindex etiketleri önemli sayfaların görünürlüğünü engelleyebileceği için QA'nın kritik parçasıdır.