MedyaBudur

Dijital Görünürlük, Web & AI

Robots Meta Etiketi

Diğer kullanımlar
Robots meta tag · Meta robots

Hızlı Tanım

Robots meta etiketi, arama motorlarının bir sayfayı indeksleme ve arama sonuçlarında sunma biçimini yöneten `meta name="robots"` direktiflerini içerir.

Kavramın Açıklaması

noindex, nofollow, nosnippet, max-snippet ve benzeri kurallar robots meta üzerinden belirtilebilir. Desteklenen direktifler arama motoruna göre değişebilir.

Google'ın noindex kuralını görebilmesi için sayfayı tarayabilmesi gerekir. URL robots.txt ile tamamen engellenmişse crawler sayfadaki meta noindex'i okuyamayabilir.

Robots meta etiketi ile robots.txt farklı katmanlardır. Robots.txt tarama erişimini, robots meta ise taranabilen sayfanın indeksleme ve sunum davranışını daha doğrudan yönetir.

Neden Önemli?

Desteklenen direktifler arama motoruna göre değişebilir. Google'ın `noindex` kuralını görebilmesi için sayfayı tarayabilmesi gerekir.

Kaynaklar

  1. Google Search Central: Robots meta tag, data-nosnippet, and X-Robots-Tag specifications