Czym jest DuckDuckBot?

Krótka odpowiedź

DuckDuckBot to web crawler dla DuckDuckGo. Zadaniem DuckDuckBot jest ciągłe przeszukiwanie sieci i znajdowanie stron internetowych do dodania do indeksu wyszukiwania DuckDuckGo.

User-Agent
DuckDuckBot

Identyfikacja User-Agent

Następujące ciągi user-agent identyfikują DuckDuckBot w ruchu na Twojej stronie:

  • DuckDuckBot

Reguły robots.txt dla DuckDuckBot

Respektuje robots.txt: Tak

Użyj poniższych reguł robots.txt, aby kontrolować dostęp DuckDuckBot:

robots.txt
# Block DuckDuckBot
User-agent: DuckDuckBot
Disallow: /

# Allow DuckDuckBot
User-agent: DuckDuckBot
Allow: /

Robots.txt to dyrektywa, nie bariera

DuckDuckGo deklaruje, że DuckDuckBot respektuje robots.txt. Jednak błędy konfiguracji, opóźnienia cache i przypadki brzegowe oznaczają, że Twoje dyrektywy nie zawsze mogą być przestrzegane. Weryfikacja na podstawie ruchu potwierdza, czy DuckDuckBot faktycznie stosuje się do Twoich reguł.

Potrzebujesz ciągłej weryfikacji 487 botów? Can AI See It automatyzuje ten proces.

Zachowanie crawlera

Wzorzec żądań: Brak dokumentacji

Indeks aktywności crawlera

Względna aktywność crawlera DuckDuckBot w ciągu ostatnich 28 dni. Wyższe wartości oznaczają zwiększoną intensywność crawlowania w porównaniu z bazą okresu.

Pokaż dane aktywności (ostatnie 7 dni)
DataIndeks aktywności
21 lis 202651,9
20 lis 202646,6
19 lis 202637,4
18 lis 202639
17 lis 202636,4
16 lis 202640,5
15 lis 202636,6

Źródło: Cloudflare Radar

Dlaczego warto śledzić ruch DuckDuckBot?

Zmierz, co DuckDuckGo daje w zamian. DuckDuckBot crawluje tysiące Twoich stron - ale ile ruchu DuckDuckGo faktycznie odsyła? Śledź wizyty polecające z produktów wyszukiwania DuckDuckGo w stosunku do wolumenu crawlowania.

Monitoruj budżet crawlowania i stan indeksacji. DuckDuckBot decyduje, które Twoje strony pojawiają się w wynikach wyszukiwania DuckDuckGo. Śledzenie wzorców crawlowania ujawnia, jak często kluczowe strony są odwiedzane i gdzie budżet crawlowania jest marnowany.

Wykrywaj anomalie crawlowania wcześnie. Nagły spadek aktywności DuckDuckBot może sygnalizować problemy z indeksacją - zanim pojawią się jako straty w ruchu organicznym.

Wykrywaj błędy 4XX i 5XX zanim zaszkodzą pozycjom. Jeśli DuckDuckBot trafia na uszkodzone strony podczas crawlowania, te URL-e mogą zostać usunięte z indeksu. Wczesne wykrycie pozwala naprawić problem, zanim wpłynie na widoczność organiczną.

Weryfikuj, czy Twoje reguły robots.txt są egzekwowane. Skonfigurowanie robots.txt to jedno - potwierdzenie, że DuckDuckBot faktycznie respektuje Twoje dyrektywy, to drugie. Weryfikacja na podstawie ruchu to jedyny sposób.

Dlaczego weryfikacja ruchu zamiast Search Console? Search Console pokazuje to, co DuckDuckGo Ci mówi. Weryfikacja ruchu pokazuje, co naprawdę się wydarzyło - w tym crawlowanie związane z AI, którego Search Console nie raportuje.

Czytaj: Weryfikacja w logach vs Search Console do monitoringu crawlowania →

Weryfikacja w logach

Aby zweryfikować ruch DuckDuckBot w logach serwera:

  1. Szukaj w logach dostępu ciągów user-agent wymienionych powyżej
  2. Sprawdź, czy adresy IP pasują do udokumentowanych zakresów (jeśli podane przez DuckDuckGo)
  3. Zweryfikuj, czy wzorzec crawlowania odpowiada udokumentowanemu zachowaniu
  4. Użyj odwrotnego wyszukiwania DNS do dodatkowej weryfikacji, jeśli dostępne

Uwaga: Obserwowane zachowanie w środowiskach produkcyjnych może różnić się od oficjalnej dokumentacji. Monitoring ruchu zapewnia jedyną niezawodną weryfikację rzeczywistego zachowania botów.

Monitoruj DuckDuckBot wraz z 487 innymi botami

Śledź kondycję crawlowania, wykrywaj anomalie i mierz, jak funkcje AI zmieniają Twój ruch polecający - wszystko z logów serwera.

  • Częstotliwość crawlowania, zasięg i monitoring błędów dla DuckDuckBot
  • Porównuj tradycyjne polecenia organiczne z poleceniami z AI
  • Wykrywaj fałszywy ruch DuckDuckBot (spoofing user-agent)

Zmierz wpływ biznesowy DuckDuckBot

Aktywność crawlera bezpośrednio wpływa na widoczność organiczną. Pytanie brzmi: czy DuckDuckBot crawluje właściwe strony z odpowiednią częstotliwością?

  • Zasięg crawlowania: które ścieżki i typy stron DuckDuckBot faktycznie crawluje
  • Świeżość crawlowania: jak niedawno DuckDuckBot odwiedził kluczowe URL-e
  • Kondycja: rozkład kodów odpowiedzi (2xx, 3xx, 4xx, 5xx) z alertami, gdy nieudane crawle gwałtownie rosną
  • Śledzenie poleceń: DuckDuckBot pobiera - zmierz, co DuckDuckGo daje w zamian. Śledź rzeczywiste wizyty z produktów DuckDuckGo na Twojej stronie.
Monitoruj kondycję crawlowania DuckDuckBot →

Na podstawie danych o ruchu i analityki - nie syntetycznych testów promptów.

Oficjalna dokumentacja

Zobacz oficjalną dokumentację DuckDuckBot duckduckgo.com

Informacje pochodzą z oficjalnej dokumentacji. Treść wygenerowana z pomocą AI.

Lista oczekujących otwarta

Zobacz DuckDuckBot we własnym ruchu

Can AI See It pokazuje, kiedy DuckDuckBot odwiedza Twoją stronę, czy żądania są prawdziwe i co DuckDuckGo daje w zamian.

Bez spamu. Tylko informacje o premierze.