SEO'da Tarama Bütçesi: Google Sitenizi Ne Kadar Tarıyor?

Tarama Bütçesi Nedir?

Tarama bütçesi, arama motorlarının bir siteyi ne sıklıkla tarayacağını belirleyen limittir. Arama motoru botları bir siteye sınırsız şekilde gidip tüm sayfaları sürekli taramaz. Bunun sebebi olarak arama motoru botlarının siteleri tararken elektrik harcaması, sunucularını soğutmak için su harcaması kısaca bir maliyetinin olmasıdır. Arama motorları hem kendi maliyetlerini azaltmak hem de milyonlarca siteyi tarayabilmek için sitelere tarama bütçesi belirler ve bu bütçe doğrultusunda taramaları gerçekleştirir.

Arama motorları tarama bütçesini belirlerken sunucu yanıt süresi, sayfa değeri, içerik kalitesi gibi kriterleri baz alır. Bu bütçeyi bizlerle paylaşmaz, bu sebeple gerekli tüm optimizasyonların yapılması ve botların siteyi kolayca tarayabilmesi için bir zemin hazırlanması gerekir.

Tarama Bütçesi Yönetimi

• Tarama Hataları: Sitenin taranmasını engelleyen hatalar varsa tespit edilip düzeltilmelidir. (3xx, 4xx, 5xx, robots.txt, noindex, canonical, IP engellemeleri vb.)
• Sitemap (Site Haritası) Optimizasyonu: Arama motoru botları siteyi taramaya başlamadan önce bu dosyayı kontrol eder ve sitede hangi linklerin bulunduğunu anlar. Sitemap’e eklenmeyen linkleri de tespit edebilir (iç link ağı ile) fakat arama motoru botlarının işini kolaylaştırmak için sitede bulunan tüm linklerin (200 statü kodu döndüren) site haritasına eklenmesi gerekmektedir.
• Gereksiz Sayfaların Engellenmesi veya Kaldırılması: Robots.txt dosyası, site haritasında olduğu gibi arama motoru botları tarafından site taranmaya başlamadan önce kontrol edilen bir dosyadır. Bu dosya içerisinde arama motoru botlarının hangi linkleri taraması/taramaması gerektiği belirtilmelidir. Gereksiz sayfaların engellenmesi veya kaldırılması, arama motoru botlarının vakit kaybetmesini önleyerek önemli sayfaları taraması için zaman tanır.
  
  Bu konuda en çok gözden kaçan konulardan birisi kopya sayfalardır. Yazılımsal hatalar sebebiyle farklı linklerde aynı içeriğe sahip içeriklerin olup olmadığı mutlaka kontrol edilmelidir.
  
  Örnek
  /tarama-butcesi-nedir
  /index.php/tarama-butcesi-nedir
• Site Hızı ve Sunucu Performansı: Yavaş yanıt veren, uptime süresi düşük siteler arama motoru botlarının hızını düşürür. Siteye erişilememesi veya yavaş erişilmesi, hem bir güven sorunu hem de zaman kaybıdır. Bu sebeple site hızı ve sunucu performansı kontrol edilmelidir.

Kaynak

• İçerik Kalitesi: Bu noktada kendinizi Google’ın yerine koyun. Siz olsanız kötü/kopya içeriğe sahip siteleri mi daha çok tararsınız yoksa kaliteli ve özgün siteleri mi?
  
  Verilecek cevap tabiki de özgün ve kaliteli siteler. Google’da aynısını yapıyor. Kaliteli, özgün, farklı bir bakış açısı sunan içeriklere sahip sitelere daha fazla zaman ayırıyor.

Kaynak