Yeni bir site yayına alındıktan sonra Google'ın ne zaman tarama başlatacağı, birbiriyle ilişkili birkaç değişkene bağlıdır. Alan adı yaşı, ilk harici bağlantı, sitemap gönderimi ve Search Console doğrulaması bu süreci farklı ağırlıklarla etkiler; ancak hiçbiri tek başına kesin bir tarama garantisi vermez.
Googlebot yeni bir siteyi bulmak için iki temel mekanizmaya dayanır: başka sitelerdeki bağlantıları takip etmek ve URL'lerin doğrudan iletildiği araçları kullanmak. Hiçbir dış bağlantı almamış, sitemap gönderilmemiş ve Google'a tanıtılmamış bir site Googlebot'un radarına girmeyebilir. Bu durumda tarama başlaması günler değil haftalar alabilir; kimi zaman daha uzun.
Tarama başladıktan sonra indekslemenin ayrı bir adım olduğunu akılda tutmak gerekir. Bir URL taranmış olabilir ama indekslenmemiş olabilir; tarama kuyruğu bekleyişte olabilir ya da teknik bir engel işlemi duraksatıyor olabilir. İzleme yöntemini bu ayrıma göre kurmak, önce ne kontrol edeceğinizi netleştirir.
Alan adı yaşının tarama sırasındaki rolü
Taze kayıt edilmiş bir alan adı Googlebot için başlı başına bir engel değildir. Google'ın yayımladığı teknik belgelerde alan adı yaşının doğrudan bir tarama öncelik sinyali olduğuna dair bilgi yer almaz. Belirleyici olan, sitenin herhangi bir kaynaktan keşfedilip keşfedilemeyeceğidir.
Dolaylı etki şu şekilde işler: uzun süredir aktif olan alan adlarının genellikle mevcut bir bağlantı profili bulunur. Googlebot bu bağlantıları takip ederek siteye ulaşır. Yeni kayıt edilmiş bir domain ise hiçbir harici kaynakta henüz yer almadığından keşif tamamen sitemap veya Search Console araçlarına bağımlı hale gelir. Bu dolaylı bir dezavantajdır; doğrudan bir algoritma cezası değil.
Daha önce aktif olmuş ve ardından terk edilmiş alan adları - expired domain olarak bilinen kategori - bazen daha hızlı tarama başlangıcı sağlayabilir. Bu domainlere işaret eden eski bağlantılar hâlâ çalışıyor olabilir ve Googlebot bu bağlantıları takip edebilir. Ama bu avantaj, domain geçmişinin temiz olduğu durumlarda geçerlidir. Kötüye kullanılmış veya ceza almış eski bir domain kullanmak tarama hızı yerine kalıcı sorunlara yol açabilir.
Search Console doğrulaması taramayı başlatır mı?
GSC doğrulaması Googlebot'un siteyi taramasını doğrudan tetiklemez. Doğrulama işlevi yalnızca site sahibinin bu mülkün yetkili yöneticisi olduğunu kanıtlamaktır. Tarama, GSC doğrulamasından önce de başlayabilir; doğrulama yapıldıktan sonra da başlamayabilir. İkisi arasında nedensellik yoktur.
Pratik fayda başka bir noktada ortaya çıkar. Doğrulama tamamlandıktan sonra URL İnceleme Aracı'nı kullanabilir, bireysel URL'ler için indeksleme isteği gönderebilir, Kapsam ve Tarama İstatistikleri raporlarına erişebilirsiniz. GSC doğrulaması olmadan bu verilerin hiçbirine ulaşamazsınız; yayına alır almaz doğrulama yapılması izleme açısından zorunludur.
Sitemapı GSC üzerinden göndermek farklı bir etki yaratır. Google sitemap URL'lerini işleme koyarak bunları tarama kuyruğuna ekler. Bu işlem anlık değildir; saatler veya birkaç gün sürebilir. Ama sitemap gönderilmemiş ve bağlantı kaynağı da bulunmayan bir siteyle kıyaslandığında keşif süresi belirgin biçimde kısalabilir. Doğrulama ve sitemap gönderimi birlikte yapıldığında birbirini tamamlayan bir etki oluşturur.
Sitemap gönderimi ne zaman fark yaratır, ne zaman yaratmaz?
Sitemap Googlebot'a hangi URL'lerin mevcut olduğunu bildirir; ama bu URL'lerin taranacağını garanti etmez. Google, sitemap'teki URL'leri tarama kuyruğuna alır; sıra ve öncelik kendi tarama bütçesi kararlarına göre şekillenir.
Yeni bir site için sitemap gönderiminin en somut faydası keşif hızıdır. Harici bağlantı almamış bir sitede Googlebot'un URL'leri bağımsız olarak bulması için başka bir giriş noktası gerekir; bu nokta çoğunlukla yoktur. Sitemap bu boşluğu doldurur ve Googlebot'a bir adres listesi sunar.
Sitemap fark yaratmadığı durumlar da vardır. Erişilemeyen URL'ler, kırık iç bağlantılar veya sunucu hataları varsa sitemap gönderimi bu sorunları çözmez. Googlebot URL'ye ulaşmaya çalışır, art arda 5xx yanıtı alırsa taramayı erteler. Robots.txt ile engellenen URL'ler sitemap'te listelenmiş olsa bile taranmaz. Sitemap bir URL'yi kuyruğa sunar; Googlebot erişebiliyorsa tarar, erişemiyorsa taramaz.
Sitemap'in teknik doğruluğu da önemlidir. XML sözdizimi hatalıysa veya <loc> etiketleri canonical URL'lerle uyuşmuyorsa Google sitemap'i kısmen ya da hiç işleme almayabilir. <lastmod> değerleri doğru ve güncel tutulduğunda Google'ın öncelik kararına küçük bir girdi sağlar; sabit veya uydurulmuş tarihler kullanılmasının bu anlamda herhangi bir faydası yoktur.
İlk harici bağlantı ve Googlebot'un keşif mekanizması
Googlebot'un birincil keşif yöntemi bağlantı takibidir. Zaten taranmış bir sayfada yeni bir bağlantı bulunduğunda bu bağlantı kuyruğa eklenir. Yeni bir site için ilk harici bağlantı bu açıdan kritik bir işlev görür: Googlebot'a daha önce taradığı bir noktadan sitenize giden bir yol açar.
Bağlantının nereden geldiği keşif hızını etkiler. Sık taranan, yüksek öncelikli bir kaynaktan gelen bağlantı ile seyrek ziyaret edilen küçük bir blogdan gelen bağlantının keşif hızları birbirinden farklıdır. Bir haber sitesi veya sık güncellenen içerik platformu Googlebot tarafından daha sık ziyaret edilir; bu kaynaklarda yer alan bağlantılar çok daha kısa sürede takip edilir.
nofollow veya ugc etiketli bağlantılar Googlebot'un siteyi keşfetmesini engellemez. Google bu işaretleri tavsiye olarak değerlendirir; mutlak engel olarak değil. Keşif amaçlı bağlantılarda bu etiketlerin varlığı büyük fark yaratmayabilir; otorite aktarımı söz konusu olduğunda durum değişir.
Sosyal medya paylaşımları da Googlebot'un siteyi bulmasına katkı sağlayabilir, çünkü bazı sosyal platformlar Googlebot tarafından taranır. Bu yol güvenilir değildir ve garantisi yoktur; ama bağlantı profiliniz henüz sıfırken ek bir keşif kanalı olarak düşünülebilir.
robots.txt ve teknik engeller taramayı nasıl geciktirir?
Yeni sitelerde en yaygın sorunlardan biri geliştirme aşamasından kalan robots.txt yapılandırmasıdır. Geliştirme ortamında tüm ajanları engelleyen Disallow: / kuralı yayına geçişte silinmediyse Googlebot siteye ulaşır ama içine giremez. URL İnceleme Aracı'nda "Robots.txt tarafından engellendi" hatası görünür; URL indekslenemez.
Sunucu kararlılığı da tarama sıklığını doğrudan etkiler. Googlebot yeni bir siteyi yavaş yükleniyor veya aralıklı 503/504 hataları veriyor olarak algılarsa tarama hızını kendiliğinden düşürür. Yayın öncesinde sunucu yanıt sürelerini ve hata oranlarını kontrol etmek bu yüzden pratik bir adımdır; sorun başladıktan sonra düzeltmek daha uzun bir gecikmeye yol açabilir.
HTTP yönlendirme tutarsızlıkları da tarama bütçesini tüketir. www ve non-www arasında çözüme kavuşturulmamış yönlendirme, http ile https arasında çelişkili canonical veya uzun yönlendirme zincirleri Googlebot'un gereksiz yere zaman harcamasına neden olur. Yeni bir sitede tarama bütçesi zaten kısıtlıdır; bu hatalar bütçeyi asıl sayfalara ulaşmadan bitirebilir.
Tarama başlangıcını Search Console'dan nasıl izlersiniz?
Tekil URL'lerin durumunu izlemek için URL İnceleme Aracı doğrudan bir yöntem sunar. Herhangi bir URL'yi bu araçla sorguladığınızda son tarama tarihini, indeksleme durumunu ve varsa engelleme nedenini görebilirsiniz. Tarama henüz başlamamışsa araç "URL Google tarafından bulunamadı" veya benzer bir durum gösterir.
Genel tablo için Kapsam raporu kullanışlıdır. Yeni bir sitede başlangıçta çok az URL görünür; tarama ilerledikçe sayı artar. "Keşfedildi - şu anda indekslenmedi" kategorisi, Googlebot'un URL'leri kuyruğa aldığını ama henüz işlemediğini gösterir. Normal bir bekleme durumudur; tüm URL'ler aynı anda işlenemez.
Tarama İstatistikleri raporu Googlebot faaliyetini daha teknik düzeyde gösterir. Günlük istek sayısı, ortalama yanıt süresi ve indirilen içerik miktarı bu raporda yer alır. Tarama başlamışsa birkaç gün içinde veri görünmeye başlar. Bir hafta geçmesine rağmen Tarama İstatistikleri raporu boşsa ve URL İnceleme Aracı da hiçbir tarama kaydı göstermiyorsa teknik engelleri yeniden kontrol etmek gerekir: robots.txt, sunucu hataları, yönlendirme sorunları.
URL İnceleme Aracı üzerinden bireysel indeksleme isteği göndermek taramayı hızlandırabilir. Bu işlem siteyi doğrudan kuyruğa alır; ancak Google bu isteği yerine getirme konusunda herhangi bir süre taahhüdü vermez. Deneyimler isteğin birkaç saat ile birkaç gün arasında işlendiğini gösterse de bu süre sitenin teknik durumuna, Google'ın mevcut iş yüküne ve içeriğin kalitesine göre değişir.
Kapsam raporundaki veri gecikmesine dikkat etmek gerekir. GSC raporları çoğunlukla birkaç günlük gecikmeyle güncellenir. Bugün indekslenen bir URL üç ya da dört gün sonra raporda görünebilir. Raporun gerçek zamanlı olmadığını bilerek yorumlamak, erken panikle sonuçlanacak hatalı kararların önüne geçer.
Tarama başladıktan sonraki ilk günler sitenin teknik temelini test eden bir süreç gibi işler. Googlebot sitemap URL'lerini teker teker ziyaret eder, yanıt sürelerine bakar, yönlendirmeleri takip eder ve canonical etiketleri kontrol eder. Bu aşamada herhangi bir tutarsızlık varsa tarama bütçesinin bir kısmı sorunlu URL'lere harcanır; asıl içeriklere ulaşan bütçe azalır.
Yeni bir site için gerçekçi beklenti şudur: teknik altyapı eksiksizse, sitemap gönderilmişse ve en az bir harici bağlantı mevcutsa ilk tarama çoğu durumda birkaç gün ile iki hafta arasında gerçekleşir. İndeksleme ise taramadan sonra başlar ve kademeli olarak ilerler. Bu süreci kısaltmanın en doğrudan yolu teknik engelleri sıfıra indirmek, GSC'yi yapılandırmak ve başka sitelerde gerçek içerik değeri taşıyan bağlantılar elde etmektir; bunların dışında bir kısayol yoktur.