Czym jest Google Feed Fetcher?

Krótka odpowiedź

Google Feed Fetcher to bot obsługiwany przez Google do pobierania kanałów RSS.

User-Agent
Feedfetcher-Google; (+http://www.google.com/feedfetcher.html)

Google Feed Fetcher, obsługiwany przez Google, został zaprojektowany do pobierania kanałów RSS dla usług Google. Działa jako fetcher uruchamiany przez użytkownika, wykonując żądania w imieniu użytkowników. Bot obsługuje różne protokoły i kodowania treści.

Identyfikacja User-Agent

Następujące ciągi user-agent identyfikują Google Feed Fetcher w ruchu na Twojej stronie:

  • Feedfetcher-Google; (+http://www.google.com/feedfetcher.html)
  • FeedFetcher-Google; (+http://www.google.com/feedfetcher.html)

Reguły robots.txt dla Google Feed Fetcher

Respektuje robots.txt: Nie

Robots.txt ma ograniczony wpływ na boty inicjowane przez użytkowników

Google Feed Fetcher jest uruchamiany przez działania użytkowników w produktach Google. Mimo że Google deklaruje respektowanie robots.txt, bot działa inaczej niż autonomiczne crawlery - pobiera konkretne URL-e na żądanie zamiast systematycznie crawlować stronę. Monitoring ruchu to jedyny niezawodny sposób weryfikacji.

Potrzebujesz ciągłej weryfikacji 487 botów? Can AI See It automatyzuje ten proces.

Zachowanie crawlera

Częstotliwość: On-Demand

Wzorzec żądań: Makes Requests For RSS Feeds

Indeks aktywności crawlera

Względna aktywność crawlera Google Feed Fetcher w ciągu ostatnich 28 dni. Wyższe wartości oznaczają zwiększoną intensywność crawlowania w porównaniu z bazą okresu.

Pokaż dane aktywności (ostatnie 7 dni)
DataIndeks aktywności
21 lis 202677,8
20 lis 202697,4
19 lis 202681,1
18 lis 202677,3
17 lis 202686,5
16 lis 202684,2
15 lis 202678,5

Źródło: Cloudflare Radar

Dlaczego warto śledzić ruch Google Feed Fetcher?

Identyfikuj i klasyfikuj nieznaną aktywność crawlerów. Google Feed Fetcher może pojawiać się w logach serwera z różną częstotliwością. Śledzenie zachowania pomaga zdecydować, czy zezwolić, ograniczyć czy zablokować na podstawie danych.

Chroń budżet crawlowania. Każde żądanie bota pochłania zasoby serwera. Zrozumienie, co Google Feed Fetcher crawluje, pomaga priorytetyzować crawlery, które mają znaczenie.

Weryfikacja w logach

Aby zweryfikować ruch Google Feed Fetcher w logach serwera:

  1. Szukaj w logach dostępu ciągów user-agent wymienionych powyżej
  2. Sprawdź, czy adresy IP pasują do udokumentowanych zakresów (jeśli podane przez Google)
  3. Zweryfikuj, czy wzorzec crawlowania odpowiada udokumentowanemu zachowaniu
  4. Użyj odwrotnego wyszukiwania DNS do dodatkowej weryfikacji, jeśli dostępne

Uwaga: Obserwowane zachowanie w środowiskach produkcyjnych może różnić się od oficjalnej dokumentacji. Monitoring ruchu zapewnia jedyną niezawodną weryfikację rzeczywistego zachowania botów.

Nieudokumentowane informacje

Następujące informacje nie są oficjalnie udokumentowane dla Google Feed Fetcher:

  • crawl frequency details
  • IP verification method
  • JavaScript rendering details

Oficjalna dokumentacja

Zobacz oficjalną dokumentację Google Feed Fetcher support.google.com

Informacje pochodzą z oficjalnej dokumentacji. Treść wygenerowana z pomocą AI.

Lista oczekujących otwarta

Zobacz Google Feed Fetcher we własnym ruchu

Can AI See It pokazuje, kiedy Google Feed Fetcher odwiedza Twoją stronę, czy żądania są prawdziwe i co Google daje w zamian.

Bez spamu. Tylko informacje o premierze.