User-Agent-Identifikation
Die folgenden User-Agent-Strings identifizieren AdsTxtCrawler in Ihren Live-Traffic-Daten:
-
AdsTxtCrawler/1.0; +https://github.com/InteractiveAdvertisingBureau/adstxtcrawler
robots.txt-Regeln für AdsTxtCrawler
Respektiert robots.txt: Nein
Dieser Bot verpflichtet sich nicht, robots.txt zu befolgen
AdsTxtCrawler befolgt robots.txt-Anweisungen nicht offiziell. Die einzige zuverlässige Methode zur Zugriffskontrolle ist serverseitiges Blockieren (IP-Filterung, User-Agent-Regeln in Ihrer Webserver-Konfiguration) in Kombination mit Log-Monitoring zur Wirksamkeitsüberprüfung.
Benötigen Sie kontinuierliche Verifizierung für 487 Bots? Can AI See It automatisiert dies.
Crawl-Verhalten
Häufigkeit: Not Documented
Anfragemuster: Not Documented
Zitate aus der offiziellen Dokumentation
OneTag is required to crawl ads.txt files from our publishers to verify the presence of the onetag.com line
Crawl-Aktivitätsindex
Relative Crawl-Aktivität von AdsTxtCrawler der letzten 28 Tage. Höhere Werte zeigen eine erhöhte Crawl-Intensität im Vergleich zum Basiszeitraum an.
Aktuelle Aktivitätsdaten anzeigen (letzte 7 Tage)
| Datum | Aktivitätsindex |
|---|---|
| 21. Nov. 2026 | 61,4 |
| 20. Nov. 2026 | 68,1 |
| 19. Nov. 2026 | 58,2 |
| 18. Nov. 2026 | 60,8 |
| 17. Nov. 2026 | 65,4 |
| 16. Nov. 2026 | 56,1 |
| 15. Nov. 2026 | 58,7 |
Quelle: Cloudflare Radar
Warum AdsTxtCrawler-Traffic überwachen?
Überprüfen Sie das Crawl-Verhalten des Werbesystems. AdsTxtCrawler bewertet Ihre Seiten für Anzeigen-Targeting, Qualitätsbewertung und Richtlinien-Compliance.
Optimieren Sie die Anzeigenauslieferung. Wenn AdsTxtCrawler bestimmte Seiten nicht korrekt aufrufen kann, können Anzeigen-Targeting und Einnahmen beeinträchtigt werden. Traffic-Monitoring bestätigt die Erreichbarkeit.
Log-Verifizierung
So verifizieren Sie AdsTxtCrawler-Traffic in Ihren Live-Traffic-Daten:
- Durchsuchen Sie Zugriffsprotokolle nach den oben aufgeführten User-Agent-Strings
- Prüfen Sie, ob die IP-Adressen mit dokumentierten Bereichen übereinstimmen (falls von OneTag Limited bereitgestellt)
- Verifizieren Sie, ob das Crawl-Muster dem dokumentierten Verhalten entspricht
- Verwenden Sie Reverse-DNS-Lookup zur zusätzlichen Verifizierung, falls verfügbar
Hinweis: Das beobachtete Verhalten in Produktionsumgebungen kann von der offiziellen Dokumentation abweichen. Live-Traffic-Monitoring bietet die einzige zuverlässige Verifizierung des tatsächlichen Bot-Verhaltens.
Undokumentierte Informationen
Die folgenden Informationen sind für AdsTxtCrawler nicht offiziell dokumentiert:
- crawl frequency
- request pattern
- IP verification method
- JavaScript rendering details
Offizielle Dokumentation
Offizielle AdsTxtCrawler-Dokumentation anzeigen onetag.comInformationen stammen aus der offiziellen Dokumentation. Inhalt mit KI-Unterstützung erstellt.