User-Agent-Identifikation
Die folgenden User-Agent-Strings identifizieren Meta-ExternalFetcher in Ihren Live-Traffic-Daten:
-
meta-externalfetcher/1.1 (+https://developers.facebook.com/docs/sharing/webmasters/crawler)
robots.txt-Regeln für Meta-ExternalFetcher
Respektiert robots.txt: Nein
robots.txt hat bei nutzer-initiierten Bots eingeschränkte Wirkung
Meta-ExternalFetcher wird durch Nutzeraktionen innerhalb der Produkte von Meta ausgelöst. Obwohl Meta angibt, robots.txt zu respektieren, arbeitet der Bot anders als autonome Crawler - er ruft bestimmte URLs auf Anfrage ab, anstatt Ihre Website systematisch zu durchsuchen. Traffic-Monitoring ist die einzige zuverlässige Methode, um das tatsächliche Verhalten zu überprüfen.
Benötigen Sie kontinuierliche Verifizierung für 487 Bots? Can AI See It automatisiert dies.
Crawl-Verhalten
Häufigkeit: On-Demand
Anfragemuster: Receives Individual Links At User'S Initiative
Crawl-Aktivitätsindex
Relative Crawl-Aktivität von Meta-ExternalFetcher der letzten 28 Tage. Höhere Werte zeigen eine erhöhte Crawl-Intensität im Vergleich zum Basiszeitraum an.
Aktuelle Aktivitätsdaten anzeigen (letzte 7 Tage)
| Datum | Aktivitätsindex |
|---|---|
| 21. Nov. 2026 | 100 |
| 20. Nov. 2026 | 48,4 |
| 19. Nov. 2026 | 24,6 |
| 18. Nov. 2026 | 19,2 |
| 17. Nov. 2026 | 18,6 |
| 16. Nov. 2026 | 21,8 |
| 15. Nov. 2026 | 52,8 |
Quelle: Cloudflare Radar
Warum Meta-ExternalFetcher-Traffic überwachen?
Messen Sie, was Meta zurückgibt. Meta-ExternalFetcher ruft Ihre Seiten für KI-gestützte Antworten ab - aber klicken Nutzer tatsächlich zu Ihrer Website durch? Verfolgen Sie Referral-Besuche vom KI-Assistenten von Meta im Verhältnis zu den abgerufenen Seiten.
Verfolgen Sie die Echtzeit-Nutzung Ihrer Inhalte durch KI-Assistenten. Meta-ExternalFetcher ruft Ihre Seiten ab, wenn ein Nutzer den KI-Assistenten von Meta ausdrücklich bittet, etwas nachzuschlagen. Jede Anfrage repräsentiert einen echten Nutzer, der Ihre Inhalte über einen KI-Vermittler sucht.
Ordnen Sie KI-gesteuerte Sitzungen zu. Wenn jemand auf einen vom Assistenten von Meta bereitgestellten Link klickt, kann dieser Besuch in Ihren Analytics nachverfolgt werden. Verbinden Sie Meta-ExternalFetcher-Crawls mit Referral-Sitzungen, um den vollständigen Pfad zu messen: KI-Abruf → Nutzerklick → Conversion.
Verstehen Sie Content-Autoritätssignale. Die von Meta-ExternalFetcher am häufigsten abgerufenen Seiten zeigen, was die KI von Meta als maßgeblich auf Ihrer Website betrachtet.
Erkennen Sie 4XX- und 5XX-Fehler, bevor Nutzer es tun. Wenn Meta-ExternalFetcher auf eine fehlerhafte oder nicht verfügbare Seite stößt, kann er Ihren Content nicht an Nutzer ausliefern, die danach fragen. Das frühzeitige Erkennen dieser Fehler in Ihren Traffic-Daten verhindert verlorene Sichtbarkeit in KI-gestützten Antworten.
Jede Meta-ExternalFetcher-Anfrage = eine echte Person, die Ihren Content sucht
Anders als autonome Crawler ruft Meta-ExternalFetcher Ihre Seite nur ab, wenn ein echter Nutzer danach fragt. Jede Anfrage in Ihren Traffic-Daten repräsentiert jemanden, der gezielt Informationen von Ihrer Website über den KI-Assistenten von Meta gesucht hat.
"Finde mir Informationen von [Ihrer Domain]"
Protokolliert in Ihren Server-Zugriffsprotokollen mit Zeitstempel und URL
Der Nutzer sieht Ihre Informationen mit einem Quellenverweis-Link
Nachverfolgbar als Referral-Sitzung in Ihren Analytics
Das macht Meta-ExternalFetcher zur am direktesten messbaren KI-Traffic-Quelle. Can AI See It verbindet diese Zusammenhänge mit dem Crawl-to-Referral Ratio (CRR) - der zeigt, welcher Prozentsatz der KI-abgerufenen Anfragen sich in tatsächliche Website-Besuche und Conversions umwandelt.
Was Can AI See It für Meta-ExternalFetcher misst
Wie viele echte Nutzer die KI gebeten haben, Ihre Inhalte abzurufen
Welcher Prozentsatz der KI-abgerufenen Besucher tatsächlich auf Ihrer Website landet
Welche Inhalte KI-Nutzer am häufigsten nachfragen
Conversions aus KI-Assistenten-Referrals
Das Blockieren von Meta-ExternalFetcher bedeutet, einen Kanal abzuschneiden, über den echte Nutzer aktiv Ihre Inhalte suchen. Bevor Sie entscheiden, messen Sie, wie viele dieser Anfragen konvertieren.
Wie unterscheidet sich das von Prompt-Testing-Tools? Prompt-Testing prüft, ob KI Ihre Marke in simulierten Anfragen erwähnt. Can AI See It misst, was tatsächlich passiert: echte Crawls, echte Referrals, echte Conversions - aus Ihren Live-Traffic-Daten.
Lesen: Warum Live-Traffic-Monitoring Prompt-Testing überlegen ist →Log-Verifizierung
So verifizieren Sie Meta-ExternalFetcher-Traffic in Ihren Live-Traffic-Daten:
- Durchsuchen Sie Zugriffsprotokolle nach den oben aufgeführten User-Agent-Strings
- Prüfen Sie, ob die IP-Adressen mit dokumentierten Bereichen übereinstimmen (falls von Meta bereitgestellt)
- Verifizieren Sie, ob das Crawl-Muster dem dokumentierten Verhalten entspricht
- Verwenden Sie Reverse-DNS-Lookup zur zusätzlichen Verifizierung, falls verfügbar
Hinweis: Das beobachtete Verhalten in Produktionsumgebungen kann von der offiziellen Dokumentation abweichen. Live-Traffic-Monitoring bietet die einzige zuverlässige Verifizierung des tatsächlichen Bot-Verhaltens.
Undokumentierte Informationen
Die folgenden Informationen sind für Meta-ExternalFetcher nicht offiziell dokumentiert:
- crawl frequency details
- IP verification method
- JavaScript rendering details
Live-Traffic-Monitoring vs. Prompt-Testing
| Prompt-Testing-Tools | Can AI See It | |
|---|---|---|
| Was gemessen wird | Erwähnt KI Ihre Marke in Test-Prompts? | Führt KI-Bot-Aktivität zu echten Besuchen und Conversions? |
| Datenquelle | Simulierte KI-Anfragen | Ihre Live-Traffic-Daten + Analytics |
| Abgedeckte Bots | ChatGPT, Perplexity, Gemini (nur Chat-Oberflächen) | 487 Bots inkl. Crawler, Assistenten und Trainings-Bots |
| Geschäftsmetrik | Häufigkeit der Markenerwähnung | Crawl-to-Referral Ratio, Umsatzzuordnung |
| Sagt Ihnen | "KI erwähnt Sie in 34 % der Fälle für Keyword X" | "Meta-ExternalFetcher hat 8.200 Seiten gecrawlt und Meta hat 290 Besucher gesendet, die 4.100 € Umsatz generiert haben" |
Messen Sie Ihr Crawl-to-Referral Ratio für Meta-ExternalFetcher
Sehen Sie, wie viel Traffic Meta tatsächlich an Ihre Website zurücksendet im Verhältnis zu den Inhalten, die Meta-ExternalFetcher abruft.
- Meta-ExternalFetcher-Crawls in Ihren Traffic-Daten mit Referral-Sitzungen in Analytics verknüpfen
- Berechnen Sie Ihren CRR - die Metrik, die Prompt-Testing-Tools nicht liefern können
- Datenbasierte Blockieren-/Erlauben-Entscheidungen für jeden KI-Bot treffen
Geschäftlichen Einfluss von Meta-ExternalFetcher messen
Die eigentliche Frage lautet: Führt die Aktivität von Meta-ExternalFetcher zu Referrals, Sitzungen und Conversions auf Ihrer Website?
- Crawls: von Meta-ExternalFetcher abgerufene Seiten
- Referral-Tracking: Meta-ExternalFetcher nimmt - messen Sie, was Meta zurückgibt. Verfolgen Sie tatsächliche Besuche, die von den Produkten von Meta auf Ihre Website gelangen.
- CRR: Ihr Crawl-to-Referral Ratio - Referrals pro 1.000 Crawls
Basierend auf Ihren Live-Traffic-Daten und Analytics - nicht auf synthetischen Prompt-Tests.
Offizielle Dokumentation
Offizielle Meta-ExternalFetcher-Dokumentation anzeigen developers.facebook.comInformationen stammen aus der offiziellen Dokumentation. Inhalt mit KI-Unterstützung erstellt.