Czym jest Toutiao?

Krótka odpowiedź

Toutiao to automatyczny bot agregujący wiadomości ByteDance, zbierający treści z różnych platform internetowych.

User-Agent
Mozilla/5.0 (compatible; Bytespider; https://zhanzhang.toutiao.com/) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.0.0 Safari/537.36

Toutiao, obsługiwany przez ByteDance, to bot wyszukiwarki zaprojektowany do zbierania treści z różnych platform internetowych. Podczas crawlów używa określonych user-agentów do identyfikacji.

Identyfikacja User-Agent

Następujące ciągi user-agent identyfikują Toutiao w ruchu na Twojej stronie:

  • Mozilla/5.0 (compatible; Bytespider; https://zhanzhang.toutiao.com/) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.0.0 Safari/537.36
  • Mozilla/5.0 (Linux; Android 5.0) AppleWebKit/537.36 (KHTML, like Gecko) Mobile Safari/537.36 (compatible; Bytespider; https://zhanzhang.toutiao.com/)
  • Mozilla/5.0 (iPhone; CPU iPhone OS 7_1_2 like Mac OS X) AppleWebKit/537.36 (KHTML, like Gecko) Version/7.0 Mobile Safari/537.36 (compatible; Bytespider; https://zhanzhang.toutiao.com/)

Reguły robots.txt dla Toutiao

Respektuje robots.txt: Nie

Ten bot nie zobowiązuje się do przestrzegania robots.txt

Toutiao oficjalnie nie przestrzega dyrektyw robots.txt. Jedynym niezawodnym sposobem kontroli dostępu jest blokowanie po stronie serwera (filtrowanie IP, reguły user-agent w konfiguracji serwera) w połączeniu z monitoringiem logów.

Potrzebujesz ciągłej weryfikacji 487 botów? Can AI See It automatyzuje ten proces.

Zachowanie crawlera

Częstotliwość: Not Documented

Wzorzec żądań: Not Documented

Indeks aktywności crawlera

Względna aktywność crawlera Toutiao w ciągu ostatnich 28 dni. Wyższe wartości oznaczają zwiększoną intensywność crawlowania w porównaniu z bazą okresu.

Pokaż dane aktywności (ostatnie 7 dni)
DataIndeks aktywności
21 lis 202658,8
20 lis 202655,5
19 lis 202657,3
18 lis 202656,3
17 lis 202657,2
16 lis 202658,2
15 lis 202659,9

Źródło: Cloudflare Radar

Dlaczego warto śledzić ruch Toutiao?

Zmierz, co Bytedance daje w zamian. Toutiao crawluje tysiące Twoich stron - ale ile ruchu Bytedance faktycznie odsyła? Śledź wizyty polecające z produktów wyszukiwania Bytedance w stosunku do wolumenu crawlowania.

Monitoruj budżet crawlowania i stan indeksacji. Toutiao decyduje, które Twoje strony pojawiają się w wynikach wyszukiwania Bytedance. Śledzenie wzorców crawlowania ujawnia, jak często kluczowe strony są odwiedzane i gdzie budżet crawlowania jest marnowany.

Wykrywaj anomalie crawlowania wcześnie. Nagły spadek aktywności Toutiao może sygnalizować problemy z indeksacją - zanim pojawią się jako straty w ruchu organicznym.

Wykrywaj błędy 4XX i 5XX zanim zaszkodzą pozycjom. Jeśli Toutiao trafia na uszkodzone strony podczas crawlowania, te URL-e mogą zostać usunięte z indeksu. Wczesne wykrycie pozwala naprawić problem, zanim wpłynie na widoczność organiczną.

Weryfikuj, czy Twoje reguły robots.txt są egzekwowane. Skonfigurowanie robots.txt to jedno - potwierdzenie, że Toutiao faktycznie respektuje Twoje dyrektywy, to drugie. Weryfikacja na podstawie ruchu to jedyny sposób.

Dlaczego weryfikacja ruchu zamiast Search Console? Search Console pokazuje to, co Bytedance Ci mówi. Weryfikacja ruchu pokazuje, co naprawdę się wydarzyło - w tym crawlowanie związane z AI, którego Search Console nie raportuje.

Czytaj: Weryfikacja w logach vs Search Console do monitoringu crawlowania →

Weryfikacja w logach

Aby zweryfikować ruch Toutiao w logach serwera:

  1. Szukaj w logach dostępu ciągów user-agent wymienionych powyżej
  2. Sprawdź, czy adresy IP pasują do udokumentowanych zakresów (jeśli podane przez Bytedance)
  3. Zweryfikuj, czy wzorzec crawlowania odpowiada udokumentowanemu zachowaniu
  4. Użyj odwrotnego wyszukiwania DNS do dodatkowej weryfikacji, jeśli dostępne

Uwaga: Obserwowane zachowanie w środowiskach produkcyjnych może różnić się od oficjalnej dokumentacji. Monitoring ruchu zapewnia jedyną niezawodną weryfikację rzeczywistego zachowania botów.

Nieudokumentowane informacje

Następujące informacje nie są oficjalnie udokumentowane dla Toutiao:

  • crawl frequency
  • IP verification
  • JavaScript rendering

Monitoruj Toutiao wraz z 487 innymi botami

Śledź kondycję crawlowania, wykrywaj anomalie i mierz, jak funkcje AI zmieniają Twój ruch polecający - wszystko z logów serwera.

  • Częstotliwość crawlowania, zasięg i monitoring błędów dla Toutiao
  • Porównuj tradycyjne polecenia organiczne z poleceniami z AI
  • Wykrywaj fałszywy ruch Toutiao (spoofing user-agent)

Zmierz wpływ biznesowy Toutiao

Aktywność crawlera bezpośrednio wpływa na widoczność organiczną. Pytanie brzmi: czy Toutiao crawluje właściwe strony z odpowiednią częstotliwością?

  • Zasięg crawlowania: które ścieżki i typy stron Toutiao faktycznie crawluje
  • Świeżość crawlowania: jak niedawno Toutiao odwiedził kluczowe URL-e
  • Kondycja: rozkład kodów odpowiedzi (2xx, 3xx, 4xx, 5xx) z alertami, gdy nieudane crawle gwałtownie rosną
  • Śledzenie poleceń: Toutiao pobiera - zmierz, co Bytedance daje w zamian. Śledź rzeczywiste wizyty z produktów Bytedance na Twojej stronie.
Monitoruj kondycję crawlowania Toutiao →

Na podstawie danych o ruchu i analityki - nie syntetycznych testów promptów.

Oficjalna dokumentacja

Zobacz oficjalną dokumentację Toutiao zhanzhang.toutiao.com

Informacje pochodzą z oficjalnej dokumentacji. Treść wygenerowana z pomocą AI.

Lista oczekujących otwarta

Zobacz Toutiao we własnym ruchu

Can AI See It pokazuje, kiedy Toutiao odwiedza Twoją stronę, czy żądania są prawdziwe i co Bytedance daje w zamian.

Bez spamu. Tylko informacje o premierze.