Araç 01·Ücretsiz
21 AI botu · robots.txt · llms.txtSiteniz AI ve Arama Botlarına Açık mı?
ChatGPT, Perplexity ve Gemini gibi araçların web'den kaynak gösterebilmesi için önce sitenize erişebilmeleri gerekir. Bu araç, robots.txt kurallarınızın ve meta etiketlerinizin 21 AI ve arama botuna ne söylediğini gösterir. Erişimi doğrulamak ilk adımdır; sitenizin bir cevapta kaynak gösterilip gösterilmeyeceğini ölçmez.
Erişim Olmadan Kaynak Gösterilmek Mümkün Değil
Klasik SEO'da hedef sıralamadır. AI destekli aramada ise hedef cevaplarda kaynak gösterilmek. İkisinin de ön koşulu aynı: botların sayfanıza erişebilmesi ve içeriğin kullanıcının sorusunu gerçekten cevaplaması.
Yanlışlıkla engellenmiş bir arama botu, o sistemin sitenizi hiç görmemesi demektir. Bu araç yalnız bu erişim katmanını kontrol eder; kaynak gösterilme, sıralama veya trafik vaat etmez.
AI Crawler Checker Ne Yapar?
Bu araç, sitenizin bot erişim kurallarını kontrol eder ve düzenlemenize yardımcı olur. Sonuç bir erişim kontrol listesidir; görünürlük veya sıralama ölçümü değildir.
🔍 Erişim Kontrolü
robots.txt kurallarınızın ChatGPT, Perplexity ve diğer sistemlerin botlarına ne söylediğini gösterir.
🤖 21 AI Bot Kontrolü
GPTBot, ClaudeBot, PerplexityBot ve 18 diğer AI botunun erişim durumunu kontrol eder.
📄 robots.txt Analizi
robots.txt dosyanızı AI botları açısından satır satır analiz eder.
🏷️ Meta Tag Tespiti
Sayfa içi noai, noimageai gibi gizli engelleri tespit eder.
📋 llms.txt Kontrolü
Yeni nesil AI SEO standardı olan llms.txt dosyanızın varlığını kontrol eder.
🛠️ Dosya Oluşturucu
AI uyumlu robots.txt ve llms.txt dosyalarınızı otomatik oluşturur.
3 Katmanlı Akıllı Analiz
Çoğu araç sadece robots.txt dosyasına bakar. Ama gerçek durum çok daha karmaşıktır.
1. robots.txt AI Analizi
robots.txt kurallarınıza göre 21 farklı botun sitenize erişip erişemeyeceği değerlendirilir. Her bot için "Erişebilir", "Engelli" veya "Kısmi" durumu raporlanır. Bu, dosyadaki kuralların basitleştirilmiş bir okumasıdır; gerçek botun davranışının ölçümü değildir.
2. Meta Tag Kontrolü
robots.txt izin verse bile, sayfa içindeki HTML meta tag'leri AI botlarını engelleyebilir. Özellikle noai ve noimageai gibi etiketler bazı CDN'ler tarafından otomatik eklenebilir — siz farkında bile olmayabilirsiniz.
3. llms.txt Kontrolü
llms.txt, siteniz hakkında kısa ve yapılandırılmış bir özet sunan isteğe bağlı bir dosyadır. Bakımı kolay bir özet olarak yararlı olabilir; ancak Google, bu dosyayı arama görünürlüğü için kullanmadığını açıkça belirtiyor. Varlığı görünürlüğü artırmaz; araç yalnız dosyanın olup olmadığını kontrol eder.
AI Stratejinizi Seçin
Dengeli (Önerilen)
Arama ve kullanıcı isteği botlarına izin verir, eğitim amaçlı veri çeken botları engeller. Birçok site için makul bir başlangıç; eğitim botlarına izin vermek puanı etkilemez.
Açık
Listedeki tüm botlara izin verilir; içeriğiniz model eğitimi için de kullanılabilir.
Katı
Listedeki tüm botlar engellenir — Googlebot ve Bingbot dahil. Bu seçenek sitenizi klasik aramadan da çıkarır; yalnız gerçekten bunu istiyorsanız kullanın.
Arama Botları vs Eğitim Botları
Bu ayrımı doğru yapmak önemli. Araç, botları amaçlarına göre ayırır: arama indeksleme, kullanıcı isteğiyle sayfa getirme ve model eğitimi.
🔍 Arama Botları
OAI-SearchBot, Claude-SearchBot, PerplexityBot ve Bingbot arama indeksi için tarar. ChatGPT-User ve Claude-User ise bir kullanıcı sorduğunda sayfayı o an getirir; otomatik indeksleme botu değildir.
📚 Eğitim Botları
İçeriğinizi AI model eğitimi için toplar. GPTBot, ClaudeBot, CCBot, Bytespider gibi botlar veri çeker; bunlara izin vermek arama görünürlüğü sağlamaz, engellemek de onu azaltmaz.
Nasıl Çalışır?
Domain girin
Analiz edin
Sorunları görün
Dosya oluşturun
Erişimi doğrulayın
Yapay Zeka SEO (GEO) Nedir?
Klasik SEO, Google'da üst sıraya çıkmayı hedefler. AI SEO — ya da GEO (Generative Engine Optimization) — ise yapay zeka cevaplarında yer almayı hedefler.
Artık link almak değil, cevabın kendisi olmak önemli. Kullanıcı bir soru sorduğunda AI'nın sizi referans göstermesi, yeni nesil organik trafiğin kaynağı.
Web Sitem Neden ChatGPT'te Çıkmıyor?
En yaygın nedenler:
Güvenlik
Siteniz Yapay Zekaya Hazır mı?
robots.txt ve meta etiketlerinizin botlara ne söylediğini görün; gerekiyorsa dosyaları düzenleyin.
Sık Sorulan Sorular
ChatGPT siteleri tarıyor mu?
Evet, OpenAI'ın botları (GPTBot, ChatGPT-User, OAI-SearchBot) web sitelerini tarayarak içerik erişimi sağlar. robots.txt dosyanız bu botları engellemiyorsa, siteniz ChatGPT tarafından taranabilir.
robots.txt AI için neden önemli?
robots.txt, GPTBot, ClaudeBot, PerplexityBot gibi botların sitenize erişip erişemeyeceğini belirler. Bir arama botunu yanlışlıkla engellemek, o sistemin sitenizi tarayamaması demektir; erişime izin vermek ise tek başına görünürlük sağlamaz.
llms.txt nedir?
Siteniz hakkında kısa, yapılandırılmış bir özet sunan isteğe bağlı bir dosyadır. Google bu dosyayı arama görünürlüğü için kullanmıyor; hiçbir sistemde sıralama veya önerilme garantisi yoktur.
Bu araç neyi ölçer?
Üç şeyi kontrol eder: robots.txt kurallarının 21 bota ne söylediği, sayfa meta etiketlerindeki noai/noindex engelleri ve llms.txt dosyasının var olup olmadığı. İndekslenmeyi, sıralamayı veya bir AI cevabında kaynak gösterilmeyi ölçmez; puan deneysel bir kontrol listesidir.
AI SEO ile klasik SEO'nun farkı ne?
Klasik SEO sıralama odaklıdır. AI SEO (GEO) ise cevaplarda kaynak gösterilmeyi hedefler. İkisinin de temeli aynıdır: erişilebilir sayfalar ve kullanıcının sorusunu gerçekten cevaplayan içerik. Bu araç yalnız erişim tarafına bakar.
Kimler kullanmalı?
robots.txt ve meta etiketlerinin botlara ne söylediğini hızlıca görmek isteyen SEO uzmanları, ajanslar, içerik üreticileri ve web geliştiriciler.