KI-Such-Crawler
KI-Such-Crawler
Diese Bots crawlen Websites, um KI-generierte Suchergebnisse zu ermöglichen. Sie rufen Ihre Inhalte ab, damit KI sie in Antworten zitieren kann.
- erfasste Bots
- 5
- beachten robots.txt
- 4
- veröffentlichen eine IP-Prüfung
- 2
Bots in dieser Kategorie
- Applebot Apple Beachtet robots.txt
- Bravebot Brave Software, Inc. Keine robots.txt-Zusage
- OAI-SearchBot OpenAI Beachtet robots.txt
- AutoRAG Cloudflare Keine Aktivitätsdaten Beachtet robots.txt
- PerplexityBot Perplexity AI Keine Aktivitätsdaten Beachtet robots.txt
Crawl-Aktivität, 25. Okt. - 21. Nov. 2026 · Aktivitätstrend: Cloudflare Radar
Über diese Kategorie
KI-Such-Crawler rufen Webseiten in Echtzeit ab, um KI-gestützte Suchergebnisse zu erstellen. Wenn diese Bots auf Ihre Inhalte zugreifen, können diese als Quelle in KI-generierten Antworten erscheinen - manchmal mit einem Link zu Ihrer Website, manchmal ohne.
Die ganze Kategorie blockieren: KI-Such-Crawler
Regeln für die 4 Bots dieser Kategorie, die ein robots.txt-Token dokumentieren. Bots ohne Token lassen sich so nicht ansprechen.
# KI-Such-Crawler
User-agent: Applebot
User-agent: OAI-SearchBot
User-agent: Cloudflare-AutoRAG
User-agent: PerplexityBot
Disallow: / Warteliste offen
Sehen Sie, welche dieser Bots Sie besuchen
Can AI See It zeigt, welche Bots aus diesem Katalog Ihre Website besuchen, welche gefälscht sind und was jede Plattform zurückgibt.