Noindex

noindex, bir HTML sayfasında robots meta etiketiyle veya HTTP X-Robots-Tag başlığıyla uygulanabilir. Google, desteklediği bu kuralı gördüğünde ilgili sayfa veya kaynağı Google Search sonuçlarında göstermemeyi amaçlar.[1][2]

Noindex ile robots.txt aynı şey değildir. Robots.txt crawler'ın URL'yi taramasını sınırlar; noindex ise crawler'ın sayfaya erişip kuralı görmesinden sonra indeksleme davranışını etkiler. Google, noindex'in çalışabilmesi için URL'nin robots.txt tarafından engellenmemesi gerektiğini özellikle belirtir.[1]

Bu nedenle bir URL'yi hem robots.txt ile engelleyip hem de içine noindex koymak istenen sonucu garanti etmez. Google sayfayı tarayamazsa noindex direktifini de göremez. Sayfa başka bağlantılardan biliniyorsa URL bazı koşullarda içerik bilgisi olmadan sonuçlarda görünebilir.[1]

Noindex ile nofollow da aynı şey değildir. noindex, sayfanın sonuçlarda gösterilmemesini ister. nofollow ise sayfadaki bağlantıların takip edilmesiyle ilgili ayrı bir robots kuralıdır. Google'ın güncel robots meta dokümantasyonunda none değeri noindex, nofollow kombinasyonuna eşdeğerdir.[2]

Noindex gizlilik veya erişim kontrolü mekanizması değildir. Şifreli, özel veya yetkisiz içeriklerin yalnız noindex ile korunması doğru değildir; içerik erişimi kimlik doğrulama veya başka güvenlik mekanizmalarıyla sınırlandırılmalıdır.

Noindex ayrıca canonical etiketinin alternatifi değildir. İki URL'nin aynı içeriği temsil ettiği durumda canonicalization gerekebilir; bir içeriğin arama sonuçlarında hiç yer almaması isteniyorsa noindex farklı bir karar ifade eder.

Bir sayfanın taranabilir olması, arama sonuçlarında yer alması gerektiği anlamına gelmez. Noindex, belirli bir URL'nin indekslenmesini istemediğiniz durumlarda önemlidir; yanlışlıkla önemli bir sayfada bırakıldığında ise o sayfanın arama görünürlüğünü engelleyebilir. Bu nedenle geçici, yardımcı veya indekslenmemesi gereken içeriklerde bilinçli kullanılmalı ve kritik sayfalarda yayın öncesi ayrıca kontrol edilmelidir.