Meta robots tag
Meta robots etiketleri, bir web sayfasının HTML kodu içinde yer alan ve arama motoru tarayıcılarına söz konusu sayfayı nasıl indeksleyecekleri ve tarayacakları konusunda talimatlar sağlayan öğelerdir . Bu etiketler, arama motorlarının sayfadaki bağlantıları takip edip etmeyeceğini veya sayfayı arama sonuçlarında gösterip göstermeyeceğini belirtebilir. Meta robots etiketleri için yaygın değerler arasında indekslemeyi kontrol etmek için index veya noindex ve bağlantı takibini kontrol etmek için follow veya nofollow bulunur.