Birçok sitenin robots.txt dosyası, farkında olmadan yapay zeka botlarını engelliyor. Bu durumda ChatGPT, Claude veya Perplexity sitenizi okuyamaz ve cevaplarında sizi kaynak gösteremez.
Bilmeniz gereken yapay zeka botları
- GPTBot ve OAI-SearchBot: OpenAI (ChatGPT)
- ClaudeBot: Anthropic (Claude)
- PerplexityBot: Perplexity
- Google-Extended: Google'ın yapay zeka modelleri
Örnek robots.txt
User-agent: GPTBot
Allow: /
User-agent: ClaudeBot
Allow: /
User-agent: PerplexityBot
Allow: /
User-agent: *
Disallow: /yonetim/
Sitemap: https://ornek.com/sitemap.xml
Değişiklikten sonra GEO analiz aracımızla botların erişimini kontrol edebilirsiniz.