Ne anlama gelir?
Meta Robots Etiketi, bir sayfanın <head> bölümünde yer alan ve arama motorlarına o sayfayı nasıl ele alacaklarını söyleyen komuttur. Sayfa düzeyinde indeksleme kontrolü sağlar.
Yaygın değerleri
- index/noindex: Sayfa indekslensin mi?
- follow/nofollow: Sayfadaki linkler takip edilsin mi?
- noarchive, nosnippet: Önbellek/snippet davranışı
robots.txt'ten farkı
robots.txt taramayı, meta robots ise indekslemeyi kontrol eder. Bir sayfayı robots.txt ile engellerseniz, meta robots'taki noindex komutu görülemeyebilir; bu ikisi karıştırılırsa sorun çıkar.
Ne yapmalı?
İndekslenmesini istemediğiniz sayfalarda (teşekkür sayfası, filtre sonuçları vb.) noindex kullanın; ama bu sayfaları aynı anda robots.txt ile taramaya kapatmayın, yoksa komut okunamaz.
Ne anlama gelir?
Meta robots etiketi (meta robots tag), bir web sayfasının <head> bölümüne yerleştirilen ve arama motoru botlarına o sayfayla ilgili talimatlar veren bir HTML etiketidir. En yaygın talimatlar; sayfanın arama sonuçlarında indekslenip indekslenmeyeceği (index / noindex) ve sayfadaki linklerin takip edilip edilmeyeceği (follow / nofollow) ile ilgilidir. Meta robots etiketi, hangi sayfaların arama sonuçlarında görünüp görünmeyeceğini sayfa düzeyinde kontrol etmenin temel bir teknik SEO aracıdır.
Yaygın meta robots değerleri
index, follow— indeksle ve linkleri takip et (varsayılan)noindex, follow— indeksleme ama linkleri takip etnoindex, nofollow— ne indeksle ne takip etnoindex— bu sayfayı arama sonuçlarında gösterme
Neden önemli?
Meta robots etiketi, teknik SEO'nun temel bir kontrol aracıdır; çünkü hangi sayfaların arama sonuçlarında görünmesi gerektiğine sayfa düzeyinde karar vermenizi sağlar. Her sitede, arama sonuçlarında görünmesi istenmeyen sayfalar vardır: teşekkür sayfaları, iç arama sonuç sayfaları, filtreli/parametreli sayfalar, yönetim sayfaları, düşük değerli veya yinelenen içerik sayfaları, kullanıcıya özel sayfalar gibi. Bu tür sayfaların arama sonuçlarında görünmesi ya değersizdir ya zararlıdır (örneğin ince içerikli veya yinelenen sayfalar, sitenin genel kalite algısını düşürebilir). Meta robots etiketindeki noindex talimatı, tam da bu sayfaları arama sonuçlarından hariç tutmak için kullanılır; bir sayfaya noindex eklendiğinde, arama motorları o sayfayı tarasa bile arama sonuçlarında göstermez. Bu, sitenin arama sonuçlarında sadece değerli, kaliteli sayfalarla temsil edilmesini sağlar. Meta robots etiketinin ikinci önemli talimatı, follow / nofollow'dur; bu, sayfadaki linklerin arama motoru tarafından takip edilip edilmeyeceğini ve link değeri aktarıp aktarmayacağını belirler. Genellikle follow (varsayılan) kullanılır; noindex, follow kombinasyonu yaygındır ve "bu sayfayı indeksleme ama üzerindeki linkleri takip et" anlamına gelir, bu da noindex'li bir sayfanın link değerini yine de diğer sayfalara aktarmasını sağlar. Meta robots etiketini doğru kullanmak, önemli bir teknik SEO becerisidir; yanlış kullanım ciddi sorunlara yol açabilir. Örneğin, yanlışlıkla önemli sayfalara veya tüm siteye noindex eklemek, o sayfaların arama sonuçlarından tamamen kaybolmasına ve trafik kaybına neden olur; bu, sık karşılaşılan ve ciddi bir hatadır (özellikle bir sitenin geliştirme ortamındaki noindex ayarının yanlışlıkla canlı siteye taşınması). Bu yüzden meta robots etiketleri dikkatle yönetilmeli ve düzenli denetlenmelidir. Meta robots etiketi ayrıca, noarchive (önbelleğe alma), nosnippet (açıklama parçacığı gösterme) gibi ek talimatlar da içerebilir. Meta robots etiketi, hangi sayfaların arama sonuçlarında görüneceğini ve linklerin nasıl değerlendirileceğini sayfa düzeyinde kontrol etmenin temel bir teknik SEO aracıdır; doğru kullanıldığında sitenin arama görünürlüğünü optimize eder, yanlış kullanıldığında ciddi trafik kayıplarına yol açabilir.
Gerçek örnek
Bir e-ticaret sitesi, sayısız filtreli ve iç arama sonuç sayfasının Google'da indekslendiğini ve bunların düşük değerli, yinelenen içerik olarak sitenin kalite algısını düşürdüğünü fark etti. Bu değersiz sayfalara noindex meta robots etiketi eklendiğinde, arama sonuçları sadece değerli sayfalarla temsil edilmeye başladı ve sitenin genel arama performansı iyileşti.
Özet
Meta robots etiketi, sayfanın <head>'ine yerleştirilen ve botlara indeksleme (index/noindex) ve link takibi (follow/nofollow) talimatı veren HTML etiketidir. Değersiz sayfaları (noindex) arama sonuçlarından hariç tutmayı sağlar. Güçlü bir teknik SEO aracıdır; yanlış noindex kullanımı ciddi trafik kaybına yol açabilir.