Czym jest AdsTxtCrawler?

Krótka odpowiedź

AdsTxtCrawler firmy OneTag Limited przeszukuje pliki ads.txt, aby zweryfikować obecność wpisu onetag.com.

User-Agent
AdsTxtCrawler/1.0; +https://github.com/InteractiveAdvertisingBureau/adstxtcrawler

AdsTxtCrawler jest obsługiwany przez OneTag Limited w celu przeszukiwania plików ads.txt od wydawców. Robi to, aby zweryfikować obecność wpisu onetag.com. Zachowanie bota jest specjalnie zaprojektowane do tego zadania.

Identyfikacja User-Agent

Następujące ciągi user-agent identyfikują AdsTxtCrawler w ruchu na Twojej stronie:

  • AdsTxtCrawler/1.0; +https://github.com/InteractiveAdvertisingBureau/adstxtcrawler

Reguły robots.txt dla AdsTxtCrawler

Respektuje robots.txt: Nie

Ten bot nie zobowiązuje się do przestrzegania robots.txt

AdsTxtCrawler oficjalnie nie przestrzega dyrektyw robots.txt. Jedynym niezawodnym sposobem kontroli dostępu jest blokowanie po stronie serwera (filtrowanie IP, reguły user-agent w konfiguracji serwera) w połączeniu z monitoringiem logów.

Potrzebujesz ciągłej weryfikacji 487 botów? Can AI See It automatyzuje ten proces.

Zachowanie crawlera

Częstotliwość: Not Documented

Wzorzec żądań: Not Documented

Cytaty z oficjalnej dokumentacji

OneTag is required to crawl ads.txt files from our publishers to verify the presence of the onetag.com line

Źródło:Oficjalna dokumentacja

Indeks aktywności crawlera

Względna aktywność crawlera AdsTxtCrawler w ciągu ostatnich 28 dni. Wyższe wartości oznaczają zwiększoną intensywność crawlowania w porównaniu z bazą okresu.

Pokaż dane aktywności (ostatnie 7 dni)
DataIndeks aktywności
21 lis 202661,4
20 lis 202668,1
19 lis 202658,2
18 lis 202660,8
17 lis 202665,4
16 lis 202656,1
15 lis 202658,7

Źródło: Cloudflare Radar

Dlaczego warto śledzić ruch AdsTxtCrawler?

Weryfikuj zachowanie crawlera systemu reklamowego. AdsTxtCrawler ocenia Twoje strony pod kątem targetowania reklam, oceny jakości i zgodności z polityką.

Optymalizuj dostarczanie reklam. Jeśli AdsTxtCrawler nie ma właściwego dostępu do pewnych stron, targetowanie i przychody z reklam mogą ucierpieć. Monitoring ruchu potwierdza dostępność.

Weryfikacja w logach

Aby zweryfikować ruch AdsTxtCrawler w logach serwera:

  1. Szukaj w logach dostępu ciągów user-agent wymienionych powyżej
  2. Sprawdź, czy adresy IP pasują do udokumentowanych zakresów (jeśli podane przez OneTag Limited)
  3. Zweryfikuj, czy wzorzec crawlowania odpowiada udokumentowanemu zachowaniu
  4. Użyj odwrotnego wyszukiwania DNS do dodatkowej weryfikacji, jeśli dostępne

Uwaga: Obserwowane zachowanie w środowiskach produkcyjnych może różnić się od oficjalnej dokumentacji. Monitoring ruchu zapewnia jedyną niezawodną weryfikację rzeczywistego zachowania botów.

Nieudokumentowane informacje

Następujące informacje nie są oficjalnie udokumentowane dla AdsTxtCrawler:

  • crawl frequency
  • request pattern
  • IP verification method
  • JavaScript rendering details

Oficjalna dokumentacja

Zobacz oficjalną dokumentację AdsTxtCrawler onetag.com

Informacje pochodzą z oficjalnej dokumentacji. Treść wygenerowana z pomocą AI.

Lista oczekujących otwarta

Zobacz AdsTxtCrawler we własnym ruchu

Can AI See It pokazuje, kiedy AdsTxtCrawler odwiedza Twoją stronę, czy żądania są prawdziwe i co OneTag Limited daje w zamian.

Bez spamu. Tylko informacje o premierze.