Identyfikacja User-Agent
Następujące ciągi user-agent identyfikują Automaton w ruchu na Twojej stronie:
-
AutomatonHeadlessChrome
Reguły robots.txt dla Automaton
Respektuje robots.txt: Nie
Ten bot nie zobowiązuje się do przestrzegania robots.txt
Automaton oficjalnie nie przestrzega dyrektyw robots.txt. Jedynym niezawodnym sposobem kontroli dostępu jest blokowanie po stronie serwera (filtrowanie IP, reguły user-agent w konfiguracji serwera) w połączeniu z monitoringiem logów.
Potrzebujesz ciągłej weryfikacji 487 botów? Can AI See It automatyzuje ten proces.
Zachowanie crawlera
Częstotliwość: Not Documented
Wzorzec żądań: Not Documented
Renderowanie JavaScript: Tak - ten bot wykonuje JavaScript i renderuje strony.
Dlaczego warto śledzić ruch Automaton?
Odróżniaj ruch monitorujący od rzeczywistej aktywności crawlerów. Automaton sprawdza dostępność Twojej strony w regularnych interwałach. Bez właściwej identyfikacji te żądania mogą zawyżać metryki ruchu botów.
Weryfikuj pokrycie monitoringu. Śledź, które strony Automaton sprawdza i jak często, aby konfiguracja monitoringu odpowiadała wymaganiom infrastruktury.
Weryfikacja w logach
Aby zweryfikować ruch Automaton w logach serwera:
- Szukaj w logach dostępu ciągów user-agent wymienionych powyżej
- Sprawdź, czy adresy IP pasują do udokumentowanych zakresów (jeśli podane przez Automaton)
- Zweryfikuj, czy wzorzec crawlowania odpowiada udokumentowanemu zachowaniu
- Użyj odwrotnego wyszukiwania DNS do dodatkowej weryfikacji, jeśli dostępne
Uwaga: Obserwowane zachowanie w środowiskach produkcyjnych może różnić się od oficjalnej dokumentacji. Monitoring ruchu zapewnia jedyną niezawodną weryfikację rzeczywistego zachowania botów.
Nieudokumentowane informacje
Następujące informacje nie są oficjalnie udokumentowane dla Automaton:
- crawl frequency
- IP verification
- JavaScript rendering details
Oficjalna dokumentacja
Zobacz oficjalną dokumentację Automaton automatoninc.comInformacje pochodzą z oficjalnej dokumentacji. Treść wygenerowana z pomocą AI.