Google (ve bazen Bing) hakkında son günlerde burada ve orada elde edilen bazı bilgiler, bu hafta şu sorulara yanıtlar sunuyor: Bir TLD'yi tamamen reddetmek mümkün mü ve nasıl? Google'ın crawl sınırı kesin midir?

Goossip #1

Bir TLD'yi Nasıl Reddederiz

John Mueller (Google), bir TLD'yi (örneğin .xyz) bağlantı reddetme dosyasında domain:abc direktifi aracılığıyla reddetmenin mümkün olduğunu açıkladı. Bunun için, bu TLD'den gelen tüm bağlantıları engellemek amacıyla reddetme dosyasına domain:xyz eklemek yeterlidir. Ancak, reddedilen TLD içinde belirli alan adları için istisna yapmak mümkün değildir.

Neden faydalı: Uygun kullanım şartlarına sahip ucuz TLD'ler, spamcılar tarafından yoğun bir şekilde kullanılmaktadır. Bu özellik, yüzlerce alan adını tek tek reddetmek yerine zaman kazandırır.

John Mueller, bunun resmi olarak belgelenmediğini kabul ediyor çünkü bu çok güçlü bir araçtır ("büyük bir çekiç"). Ancak, tüm TLD'lerde yine de bazı iyi siteler bulunduğundan, Google bunu açıkça önermekte tereddüt ediyor.

Güvenilirlik oranı: ⭐⭐⭐ Katılıyoruz!

Bir sivrisineği öldürmek için bir yıkım topu kullanmayı hiç düşündünüz mü? Bu teknik biraz buna benziyor. Prosedür yeni olmasa da, radikal ve biraz riskli olması nedeniyle pek bilinmiyor.

Goossip #2

Googlebot'un Crawl Sınırları Esnektir

Search Off The Record'ın son bölümünde, Gary Illyes ve Martin Splitt, Googlebot'un crawl sınırlarının düşündüğümüzden çok daha esnek olduğunu ortaya koydu. 15 MB'lik sınır, Google'ın sunucularını korumak için altyapı seviyesinde belirlenen varsayılan bir sınırdır. Kesin değildir: Her iç ekip bunu değiştirebilir. Örneğin, Google Search bunu 2 MB'a düşürürken, PDF'ler için bu sınır 64 MB'a kadar çıkabilir.

Bu sınırların neden var olduğu: Bu sadece bant genişliği meselesi değil, aynı zamanda altyapının korunmasıyla ilgilidir. Aşırı büyük bir belgenin işlenmesi (dönüşüm, indeksleme vb.) Google sistemlerini aşırı yükleyebilir.

Martin Splitt, Googlebot'un sabit ve tek tip bir sistem olmadığını, daha çok ayarları değiştirilebilen bir hizmet gibi çalıştığını vurguladı. Parametreler, içerik türüne (HTML, PDF, resimler), projeye ve hatta istenen indeksleme hızına göre değişebilir.

Güvenilirlik oranı: ⭐⭐⭐ Katılıyoruz!

Bu, profesyonelleri biraz rahatlatacak ilginç (ve faydalı) bir ayrıntı, son zamanlarda Google'ın bu konudaki açıklamalarından etkilenenleri yeniden güvence altına alabilir.