Örümcek veya bot olarak da bilinen tarayıcı, Google'ın web sayfalarının içeriğini işlemek ve dizine eklemek üzere kullandığı yazılımdır. Mediapartners-Google adı verilen AdSense tarayıcısı, alakalı reklamları sunmak için içeriğini belirlemek üzere sitenizi ziyaret eder.
AdSense tarayıcısı ile ilgili olarak bilmeniz gereken bazı önemli noktalar aşağıda açıklanmıştır:
- Tarayıcı raporu haftalık olarak güncellenir.
Tarama otomatik olarak gerçekleştirilir. Daha sık tarama yapılmasına yönelik istekleri kabul edemiyoruz.
- AdSense tarayıcısı, Google tarayıcısından farklıdır.
Bu iki tarayıcı birbirinden ayrıdır, ancak bir önbelleği paylaşırlar. Bunun nedeni, her iki tarayıcının aynı sayfaları istemesini önleyerek yayıncıların bant genişliklerini korumalarına yardımcı olmaktır. Benzer şekilde, Search Console tarayıcısı da ayrıdır.
Not: AdSense, AdSense'e site eklediğinizde sitenizi doğrulamak için Google-Display-Ads-Bot adlı bir tarayıcıyı kullanır. - AdSense tarama sorunlarının giderilmesi, Google taramasıyla ilgili sorunları ortadan kaldırmaz.
Tarayıcı erişimi sayfanızda listelenen sorunları gidermek, Google arama sonuçlarındaki yerleşiminizi etkilemez. Sitenizin Google'daki sıralamasıyla ilgili daha fazla bilgi edinmek için Sitenizi Google'ın arama sonuçlarına dahil etme başlıklı makalemizi inceleyebilirsiniz.
- Tarayıcı, içeriği URL'ye göre dizine ekler.
Tarayıcımız, site.com ve www.site.com adreslerine ayrı ayrı erişir. Bununla birlikte, tarayıcımız site.com ve site.com/#anchor adreslerini, ayrı adresler olarak kabul etmez.
- Tarayıcı, bir robots.txt dosyası tarafından yasaklanan sayfalara veya dizinlere erişmez.
Google, AdSense Mediapartners-Google ve Google-Display-Ads-Bot tarayıcıları robots.txt dosyanızı dikkate alır. robots.txt dosyanız belirli sayfalara veya dizinlere erişimi yasaklıyorsa söz konusu sayfa ve dizinler taranmaz.
Not:User-agent: *
satırıyla robot dışında bırakılan sayfalarda reklam yayınlıyorsanız AdSense tarayıcısının bu sayfaları taramaya devam edeceğini unutmayın. AdSense tarayıcısının sayfalarınıza erişmesini engellemek için robots.txt dosyanıza aşağıdakileri eklemeniz gerekir:User-agent: Mediapartners-Google
User-agent: Google-Display-Ads-Bot
- Tarayıcı, yalnızca reklam etiketlerimizin uygulandığı URL'lere erişmeye çalışır.
Yalnızca Google reklamlarını yayınlayan sayfalar sistemlerimize istek gönderebilir ve taranır.
- Tarayıcı, yönlendirme yapan sayfalara erişmeye çalışır.
Başka sayfalara yönlendiren "orijinal sayfalarınız" olduğunda, tarayıcımızın yeniden yönlendirmenin y��rürlükte olup olmadığını saptamak için orijinal sayfalara erişmesi gerekir. Bu nedenle, tarayıcımızın orijinal sayfalara yaptığı ziyaret, erişim günlüklerinizde görüntülenir.
- Tarayıcının site içeriğinizi ne sıklıkta dizine ekleyeceği kontrol edilemez.
Şu an için sitelerin yeniden taranmasını kontrol etmemiz mümkün değildir. Tarama işlemi, botlarımız tarafından otomatik olarak yapılır. Bir sayfada değişiklik yaparsanız değişikliklerin dizinimize yansıtılması 1 veya 2 hafta sürebilir.