Robots.txt AI Erişim Kontrolü
ChatGPT, Claude, Perplexity ve Gemini botları sitenize gerçekten erişebiliyor mu? Hem robots.txt hem sunucu/CDN katmanı — iki katman birden.
~10 saniyede biter
Üyelik gerekmez
GPTBot, Claude, Perplexity, Gemini
robots.txt + gerçek istek
Bir sitenin AI motorlarında görünmesinin ilk şartı, o motorların botlarının siteye erişebilmesidir. Ama izin tek katmanlı değildir: robots.txt'de izin verirken Cloudflare gibi bir sunucu/CDN katmanında aynı botu farkında olmadan engelliyor olabilirsiniz — ve bu, dışarıdan bakınca aylarca fark edilmez.
Bu araç ikisini birden kontrol eder: önce robots.txt'nizi her AI botu için ayrı ayrı okur, sonra her botun kendi resmi kimliğiyle sitenize gerçek bir istek gönderir. Bir bot ancak her iki katmandan da geçerse "erişebiliyor" sayılır.
İki katman birden test edilir
-
robots.txt okunur
Sitenizin robots.txt dosyası çekilip her AI botu için ayrı ayrı "User-agent" bloğu değerlendirilir.
-
Gerçek istek atılır
Her botun resmi kimliğiyle (User-Agent) sitenize gerçek bir istek gönderilir — robots.txt izin verse bile CDN/güvenlik duvarı engelliyorsa bu ortaya çıkar.
-
İkisi birleştirilir
Bir bot ancak HER İKİ katmandan da geçerse "erişebiliyor" sayılır — yanıltıcı bir "izin var" sonucu verilmez.
Tek bir kontrolün ötesine geçin
Bu araç sitenizin tek bir yönünü ölçer. Pro, sitenizi bütün olarak izler — ne değiştiğini, rakiplerinize göre nerede olduğunuzu ve yapay zekanın sizden gerçekte nasıl bahsettiğini gösterir.
Siteniz her hafta yeniden taranır, skorunuz düştüğünde e-posta ile haber verilir.
ChatGPT, Claude, Perplexity ve Gemini'ye gerçek sorular sorulur; markanız anılıyor mu, hangi cümlede — alıntısıyla görürsünüz.
Kendi skorunuzu rakiplerinizinkiyle yan yana görün; hangi maddede geride kaldığınızı madde madde çıkarın.
Tüm maddeler, düzeltme önerileri ve yapay zekaya sorulan sorular tek raporda; yazdırıp müşterinize sunun.