Offener Bot-Katalog
Verzeichnis für KI-Bots und Webcrawler
487 Bots von 392 Betreibern, mit User-Agent-Strings, robots.txt-Regeln und Prüfschritten. Kostenlos, ohne Anmeldung.
- erfasste Bots
- 487
- Betreiber
- 392
- KI-Bots
- 40
- beachten robots.txt
- 70
KI-Crawler, die Sie kennen sollten
- GPTBot OpenAI KI-Training Beachtet robots.txt
- OAI-SearchBot OpenAI KI-Suche Beachtet robots.txt
- ChatGPT-User OpenAI KI-Assistent robots.txt nicht dokumentiert
- Meta-ExternalAgent Meta KI-Training Beachtet robots.txt
- Applebot Apple KI-Suche Beachtet robots.txt
- Googlebot Google Suche Beachtet robots.txt
Crawl-Aktivität, 25. Okt. - 21. Nov. 2026 · Aktivitätstrend: Cloudflare Radar
KI-Trainings-Crawler 26
Training von KI-Modellen
- Amazon Kendra Amazon Amazon Kendra ist ein intelligenter Suchdienst von Amazon, der Natural Language Processing für präzise Suchergebnisse nutzt. robots.txt: Nein
- Amazonbot Amazon Amazonbot ist Amazons Webcrawler, der zur Verbesserung von Produkten und Diensten verwendet wird, etwa zum Trainieren von KI-Modellen. robots.txt: Ja
- Anchor Browser Anchor Der Anchor Browser ist ein Webbrowser für KI-Agenten, betrieben von Anchor, und wird zur Automatisierung von Workflows und Webinteraktionen verwendet. robots.txt: Nein
- AwarioSmartBot Awario AwarioSmartBot ist ein von Awario betriebener Webcrawler, der zum Sammeln neuer und aktualisierter Webdaten für Internet-Marketer verwendet wird. robots.txt: Ja
- Big Sur AI Big Sur AI Big Sur AI Crawler, betrieben von Big Sur AI, crawlt Nutzer-Websites für AI-infused experiences. robots.txt: Nein
- Brandwatch Brandwatch Der Magpie Crawler von Brandwatch indexiert Webseiten für Social-Media-Monitoring und Analyse. robots.txt: Ja
- Ceramic TerraCotta Ceramic Ceramic TerraCotta ist ein Web-Crawler, betrieben von Ceramic, einem Unternehmen für KI-Trainingsinfrastruktur. Er crawlt Websites, um Ceramics Plattform zur Optimierung des KI-Modelltrainings zu unterstützen. robots.txt: Ja
- ClaudeBot Anthropic ClaudeBot ist der Web-Crawler von Anthropic, der Webinhalte für das Training von Claude-AI-Modellen sammelt. Er beachtet robots.txt-Anweisungen und unterstützt Crawl-delay. robots.txt: Ja
- Cotoyogi Research Organization of Information and Systems Cotoyogi ist ein von der Research Organization of Information and Systems betriebener Bot für KI-Trainingszwecke. robots.txt: Ja
- Echobot Bot Echobox Echobot ist ein Web-Scraping-bot von Echobox für KI-Trainingszwecke, insbesondere zur Automatisierung der Inhaltsverteilung für digitale Publisher. robots.txt: Nein
- Factset_spyderbot Factset Factset Spyderbot ist ein Web-Scraping-Bot von Factset zur Bereitstellung zuverlässiger Finanzdaten. robots.txt: Nein
- Google NotebookLM Google Google NotebookLM bot, betrieben von Google, für KI-Training. robots.txt: Nein
- Google-CloudVertexBot Google Google-CloudVertexBot ist ein von Google betriebener Crawler für gezieltes KI-Training auf den eigenen Websites der Websitebetreiber. robots.txt: Nein
- GoogleOther Google GoogleOther ist ein generischer Crawler, der von Google zum Abrufen öffentlich zugänglicher Inhalte von Websites betrieben wird und für interne Forschung und Entwicklung verwendet wird. robots.txt: Nein
- GPTBot OpenAI GPTBot wird verwendet, um Inhalte zu crawlen, die für das Training der generativen KI-Foundation-Modelle von OpenAI verwendet werden können. robots.txt: Ja
- ICC Crawler NICT ICC Crawler ist ein von NICT betriebener Webcrawler, der Webseiten für das KI-Training sammelt. robots.txt: Ja
- LINER Bot Liner Bot LINER Bot ist ein von Liner Bot betriebener Webcrawler, der für KI-Training verwendet wird, indem Daten aus dem Internet gesammelt werden. robots.txt: Nein
- Meta-ExternalAgent Meta Meta-ExternalAgent ist ein von Meta betriebener Bot für KI-Trainingszwecke, insbesondere zum Trainieren von KI-Modellen oder zur Produktverbesserung durch direktes Indexieren von Inhalten. robots.txt: Ja
- netEstate Imprint Crawler netEstate Der NetEstate Imprint crawler durchsucht Websites nach öffentlichen Kontaktinformationen. robots.txt: Nein
- Novellum AI Crawl Novellum Novellum.ai baut Werkzeuge zum Erstellen von Agents auf. Dieses MCP-Tool wird von Agents verwendet, um Sites zu crawlen. robots.txt: Nein
- PetalBot Huawei PetalBot ist ein Suchmaschinen-Crawler von Huawei, der zum Indexieren von Websites und zur Bereitstellung von Inhaltsempfehlungen in den Diensten Petal Search engine, Huawei Assistant und AI Search verwendet wird. robots.txt: Ja
- QualifiedBot Qualified.com, Inc. QualifiedBot ist ein Crawler von Qualified.com, Inc., der KI-Produkte durch das Crawlen von Kundenwebsites unterstützt. robots.txt: Nein
- SemrushBot-OCOB Semrush SemrushBot-OCOB ist ein von Semrush betriebener Bot für ai-training, speziell für Content Toolkit. robots.txt: Nein
- SemrushBotSwa SEMrush SEMrushBotSwa ist ein von SEMrush betriebener Bot für ai-training-Zwecke, der Daten für das SEO Writing Assistant-Tool sammelt. robots.txt: Nein
- ShapBot Parallel Nicht offiziell dokumentiert robots.txt: Nein
- WARDBot WEBSPARK WARDBot ist ein von WEBSPARK betriebener Monitoring-Bot, der URL-Statuscodes für Nutzer verfolgt. robots.txt: Ja
KI-Such-Crawler 5
KI-gestützte Suche
- Applebot Apple Applebot-Daten werden verwendet, um verschiedene Funktionen zu unterstützen, etwa die Suchtechnologie, die in viele Nutzererlebnisse im Apple-Ökosystem integriert ist, einschließlich Spotlight, Siri und Safari. robots.txt: Ja
- AutoRAG Cloudflare AutoRAG ist Cloudflares KI-Suchlösung zum Indexieren und Abfragen von Daten. robots.txt: Ja
- Bravebot Brave Software, Inc. Bravebot ist ein Such-Crawler, betrieben von Brave Software, Inc., der zum Auffinden neuer Seiten und zum Indexieren ihrer Inhalte verwendet wird. robots.txt: Nein
- OAI-SearchBot OpenAI OAI-SearchBot wird verwendet, um Websites in den Suchergebnissen von OpenAI's SearchGPT und ChatGPT-Suchfunktionen zu verlinken und anzuzeigen. robots.txt: Ja
- PerplexityBot Perplexity AI PerplexityBot ist der Suchcrawler von Perplexity AI. Er wird eingesetzt, um Websites in Perplexity-Suchergebnissen sichtbar zu machen und zu verlinken. Perplexity betont ausdrücklich, dass PerplexityBot nicht zum Trainieren von KI-Modellen verwendet wird. robots.txt: Ja
KI-Assistenten 9
Inhaltsabruf für KI-Assistenten
- Amazon Buy For Me Amazon Der Buy For Me-Agent platziert im Auftrag von Kunden Bestellungen auf E-Commerce-Websites. robots.txt: Nein
- ChatGPT Agent OpenAI ChatGPT Agent ist der Agentenmodus von OpenAI, der einen visuellen Browser verwendet, um Websites zu navigieren und Aufgaben im Auftrag von Nutzern auszuführen. robots.txt: Nein
- ChatGPT-User OpenAI ChatGPT-User ist für Nutzeraktionen in ChatGPT und Custom GPTs gedacht. Wenn Nutzer ChatGPT oder einem Custom GPT eine Frage stellen, kann es eine Webseite besuchen, um bei der Antwort zu helfen. robots.txt: Nicht dokumentiert
- Devin Devin AI Devin ist ein autonomer KI-Softwareingenieur von Devin AI, der Entwicklungsteams bei Coding-Aufgaben unterstützt. robots.txt: Nein
- DuckAssistbot DuckDuckGo DuckAssistBot ist ein Webcrawler von DuckDuckGo für KI-gestützte Suchantworten. robots.txt: Ja
- Meta-ExternalFetcher Meta Meta-ExternalFetcher ist ein von Meta betriebener Crawler, der auf Initiative des Nutzers einzelne Links empfängt, um Produktfunktionen zu unterstützen. robots.txt: Nein
- MistralAI-User Mistral AI MistralAI-User bot, betrieben von Mistral AI, für Benutzeraktionen in le Chat. robots.txt: Nein
- Perplexity-User Perplexity AI Perplexity-User ist ein nutzerinitiierter Fetcher, der Webseiten in Echtzeit abruft, wenn ein Perplexity-Nutzer eine Frage stellt, für deren präzise Beantwortung eine bestimmte Seite gelesen werden muss. robots.txt: Nein
- TwinAgent Twin TwinAgent ist ein von Twin betriebener Bot, der komplexe Abläufe End-to-End mithilfe von KI automatisiert. robots.txt: Nein
Suchmaschinen 47
Suchindexierung
- Algolia Algolia Indexiert Inhalte für die Algolia-Suchmaschine robots.txt: Nein
- All Africa Crawler AllAfrica Global Media All Africa Crawler, betrieben von AllAfrica Global Media, aggregiert Nachrichten aus Afrika. robots.txt: Nein
- Baidu ADS Server Proxy Baidu Baidus DDoS-Scrubbing-Proxy. robots.txt: Nein
- Baiduspider Baidu Baiduspider ist der Suchmaschinen-Crawler für die Suchmaschine Baidu. robots.txt: Ja
- Bingbot Microsoft Bingbot ist ein Crawler von Microsoft, der die Bing-Suche unterstützt. robots.txt: Ja
- Cốc Cốc Coccoc Der Cốc Cốc-Bot, betrieben von Coccoc, ist ein Suchmaschinen-Bot, der von der vietnamesischen Suchmaschine Coc Coc angeforderte Websites durchsucht. robots.txt: Nein
- Coveo Bot Coveo Coveo Bot ist ein von Coveo betriebener Suchmaschinen-Bot, der Websites crawlt, um Endnutzern relevante Erlebnisse zu bieten. robots.txt: Nein
- Crawlson Crawlson Crawlson ist ein Suchmaschinen-Crawler für die Suchmaschine crawlson.com. robots.txt: Ja
- Dataprovider.com Dataprovider.com Dataprovider.com indexiert das Web und strukturiert die Daten. robots.txt: Nein
- Daum Daum Daum ist ein koreanischer Suchmaschinen-Crawler, betrieben von Daum. robots.txt: Nein
- DuckDuckBot DuckDuckGo DuckDuckBot ist ein Webcrawler für DuckDuckGo. Die Aufgabe von DuckDuckBot besteht darin, das Web kontinuierlich zu durchsuchen und Webseiten zu finden, die in den DuckDuckGo-Suchindex aufgenommen werden. robots.txt: Ja
- Freespoke Freespoke Freespoke ist eine Suchmaschine, die an freie Meinungsäußerung glaubt und Ihnen alle Standpunkte zeigt. robots.txt: Nein
- Funnelback Squiz - FunnelBack Funnelback ist eine Enterprise-Search-Plattform, betrieben von Squiz, die zum Indexieren von Inhalten aus den Websites und Datenrepositories einer Organisation verwendet wird, um interne Suchfunktionen zu unterstützen. robots.txt: Nein
- Gigabot Gigablast Gigablast ist die einzige Suchmaschine in den USA außerhalb der Big Tech, die ihren eigenen Suchindex und eigene Algorithmen verwendet. robots.txt: Nein
- Google Images Google Google Images bot ist ein von Google betriebener Suchmaschinen-Crawler für Google Images Search. robots.txt: Ja
- Google Scholar Google Google Scholar bot crawlt und indexiert wissenschaftliche Literatur von akademischen Verlagen, Repositorien und Universitätswebsites. robots.txt: Nein
- Google Videos Google Der Google Videos bot ist ein von Google betriebener Suchmaschinen-Crawler für Google Video Search. robots.txt: Nein
- Googlebot Google Google verwendet Crawler und Fetcher, um Aktionen für seine Produkte auszuführen, entweder automatisch oder durch Benutzeranfrage ausgelöst. robots.txt: Ja
- Hype Machine Hype Machine Hype Machine ist ein von Hype Machine betriebener Suchmaschinen-Bot, der Musikpublikationen/Blogs nach neuen Künstlern überwacht. robots.txt: Nein
- IbouBot Babbar IbouBot ist ein von Babbar betriebener Suchmaschinen-Crawler, der die Graphdarstellung des World Wide Web speist und aktualisiert. robots.txt: Nein
- jobswithgptcom-bot jobswithgptcom jobswithgptcom-bot ist ein von jobswithgptcom betriebener Crawler, der sich auf Stellenanzeigen für jobswithgpt.com konzentriert. robots.txt: Nein
- Kagi Bot Kagi Kagi Bot ist ein Webcrawler für die Kagi-Suchmaschine, betrieben von Kagi, und wird verwendet, um den eigenen Suchindex für das werbefreie Suchprodukt aufzubauen. robots.txt: Nein
- Level9SearchBot Level 9 Level9SearchBot ist ein Suchmaschinen-Bot, betrieben von Level 9. robots.txt: Nein
- Linespider LINE Corporation Linespider ist ein von LINE Corporation betriebener Webcrawler, der Suchergebnisse für LINE-Dienste bereitstellt. robots.txt: Ja
- MagiBot Peak Labs MagiBot gehört Peak Labs, das sich auf Forschung und Entwicklung von Technologien zur Informationsgewinnung und -abfrage konzentriert, um Wissen in natürlicher Sprache in immensen Wert zu verwandeln. robots.txt: Nein
- Marginalia Search Marginalia Marginalia Search ist eine nichtkommerzielle Nischensuchmaschine mit Fokus auf alte Websites, persönliche Websites und Blogs. robots.txt: Nein
- Mars Finder Mars Flag Mars Finder ist ein von Mars Flag betriebener Website-Suchdienst, der darauf ausgelegt ist, das maximale Potenzial einer Website zu nutzen. robots.txt: Ja
- Mojeek Mojeek MojeekBot ist ein Webcrawler für die Mojeek-Suchmaschine, betrieben von Mojeek. robots.txt: Ja
- MRGbot MRG Web Services srl MRGbot ist ein Suchmaschinen-Bot, betrieben von MRG Web Services srl, mit dem Ziel, einen Datenkorpus zu erzeugen. robots.txt: Ja
- MSN Microsoft MSNBot ist ein web crawler, der von Microsoft betrieben wird, um Webseiten für MSN Search zu indexieren. robots.txt: Nein
- Neevabot Neeva Neevabot ist der web crawler für die Suchmaschine neeva.com. robots.txt: Nein
- NewsNow NewsNowUK Der NewsNow-Bot ist ein web crawler für den News-Aggregator-Dienst NewsNow, betrieben von NewsNowUK. robots.txt: Nein
- Notabot Helpfeel Notabot ist ein von Helpfeel betriebener crawler zur Integration einer externen Suchmaschine. robots.txt: Nein
- Potions Potions Der Potions bot, betrieben von Potions, ruft Produkt-Feeds ab und crawlt E-Commerce-Daten. robots.txt: Nein
- Qwantbot Qwant Qwantbot ist ein Webcrawler, betrieben von Qwant, einer europäischen Suchmaschine, die den Datenschutz der Nutzer priorisiert, und wird für Suchindexierung und Webinhaltsentdeckung verwendet. robots.txt: Ja
- Seekport SISTRIX Seekport ist ein Suchmaschinen-Bot, der von SISTRIX betrieben wird und eine öffentliche, kostenlose und unabhängige Alternative zu Google bietet. robots.txt: Nein
- Seznam Seznam SeznamBot ist ein von Seznam betriebener Suchmaschinen-Crawler für die Suchindexierung. robots.txt: Nein
- SiteSearch360 SEMKNOX GmbH SiteSearch360 ist ein von SEMKNOX GmbH betriebener Suchmaschinen-bot, der zum Indexieren von Inhalten auf Kundenseiten für die Suche verwendet wird. robots.txt: Nein
- SMTnet PM Bot SMTnet SMTnet PM Bot ist ein von SMTnet betriebener Suchmaschinen-Crawler, der Websites von Partnerunternehmen crawlt, damit sie in die On-Site-Suchmaschine aufgenommen werden können. robots.txt: Ja
- Sogou Sogou Sogou spider ist ein Suchmaschinen-Crawler, betrieben von Sogou, der zur Indexierung von Webinhalten verwendet wird. robots.txt: Nein
- Toutiao Bytedance Toutiao ist der automatisierte Nachrichten-Aggregationsbot von ByteDance, der Inhalte über Webplattformen hinweg sammelt. robots.txt: Nein
- Yahoo Slurp Yahoo Yahoo Slurp ist ein von Yahoo betriebener Suchmaschinen-Crawler, der zum Indexieren von Webseiten und zum Sammeln von Inhalten verwendet wird. robots.txt: Ja
- Yahoo! JAPAN Yahoo! JAPAN Yahoo! JAPAN verwaltet und betreibt ein System, das auf im Internet veröffentlichte Webseiten zugreift, um Dienste, Forschung, Entwicklung, Wartung usw. bereitzustellen. robots.txt: Ja
- YandexBot Yandex Der Haupt-Indexierungsroboter für die Yandex-Suche. robots.txt: Ja
- Yeti Naver Yeti ist ein von Naver betriebener Web-Crawler, einer südkoreanischen Suchmaschine, der zum Indexieren von Websites verwendet wird, um Suchergebnisse bereitzustellen. robots.txt: Nein
- ZoomInfo ZoomInfo Zoominfobot ist ein Indexierungsroboter für eine Websuchmaschine, ähnlich wie Google. Erstellt von Zoom Information Inc.(www.zoominfo.com), scannt Zoominfobots patentierte Technologie kontinuierlich Millionen von Unternehmenswebsites, Pressemitteilungen, elektronische Nachrichtendienste, SEC filings und andere Online-Quellen. Verwend... robots.txt: Nein
- ZumBot Zum Internet Corp ZumBot ist ein Webcrawler, der von Zum Internet Corp betrieben wird, um Webseiten für die Zum Open Internet Search zu indexieren. robots.txt: Nein
SEO-Tools 58
SEO-Analyse
- AddSearchBot Addsearch AddSearchBot ist ein Suchindexierungsbot, betrieben von Addsearch, der Inhalte von Websites zu den Suchergebnissen hinzufügt. robots.txt: Nein
- AddThis AddThis Der AddThis-Bot, betrieben von AddThis, durchsucht Websites, um Inhalte für seine Website-Marketing-Tools zu sammeln und zu aktualisieren. robots.txt: Nein
- Agency Analytics Crawler Agency Analytics Agency Analytics Crawler ist ein Web-Crawler, betrieben von Agency Analytics, für SEO-Site-Prüfungen. robots.txt: Nein
- Ahrefs Site Audit Ahrefs Ahrefs Site Audit Bot, betrieben von Ahrefs, für SEO-Site-Audits. robots.txt: Nein
- AhrefsBot Ahrefs AhrefsBot ist ein Web-Crawler, betrieben von Ahrefs für das SEO-Toolset, der das Web durchsucht, um seine 12-Billionen-Link-Datenbank zu füllen. robots.txt: Nein
- Attracta Attracta Der Attracta-Bot analysiert Website-Inhalte für SEO-Dienste, betrieben von Attracta. robots.txt: Nein
- Barkrowler Babbar Barkrowler ist ein SEO-Webcrawler, betrieben von Babbar, der verwendet wird, um die Popularität und Thematik von Webseiten zu identifizieren. robots.txt: Ja
- BLEXBot WebMeUp BLexBot ist ein Tool zur Backlink-Analyse, betrieben von WebMeUp, das umfassende Backlink-Daten für SEO-Zwecke bereitstellt. robots.txt: Nein
- Botify Botify Botify ist ein SEO-Tool, betrieben von Botify, das für Website-Crawling und Analysen verwendet wird. robots.txt: Nein
- CaliberBot Conductor CaliberBot ist ein Web-Crawler, betrieben von Conductor, für SEO-Tool-Zwecke, der HTML-Features für Content Analytics extrahiert. robots.txt: Nein
- Chrome-Lighthouse Google Chrome-Lighthouse ist ein Open-Source-Tool von Google zur Prüfung der Qualität von Webseiten, kein traditioneller Web-Crawler. robots.txt: Nein
- ClearscopeBot Mushi Labs ClearscopeBot ist ein Web-Scraper, betrieben von Mushi Labs, für SEO-Inhaltsoptimierung, der öffentlich verfügbare Inhalte von Websites abruft. robots.txt: Ja
- Cloudflare Custom Error Page Crawler Cloudflare Interner Dienst von Cloulflare, der Fehlerseiten von Kunden crawlt, um sie direkt über unser Edge-Netzwerk bereitzustellen. robots.txt: Nein
- Cloudflare Digicert DCV Cloudflare Cloudflare Digicert DCV-Dienst, betrieben von Cloudflare für die Domain-Control-Validierung. robots.txt: Nein
- Cloudflare Healthchecks Cloudflare Cloudflare Healthchecks-Dienst robots.txt: Nein
- Cloudflare Prefetch Cloudflare Cloudflare Prefetch ist ein von Cloudflare betriebener Bot für das Vorab-Abrufen von URLs, um Cache-Trefferraten und die Benutzererfahrung zu verbessern. robots.txt: Nein
- Cloudflare Purge Cloudflare Cloudflare Purge-Dienst. robots.txt: Nein
- Cloudflare SpeedTest Cloudflare Cloudflare SpeedTest-Dienst, betrieben von Cloudflare für Zwecke von SEO-Tools. robots.txt: Nein
- Cloudflare SSLDetector Cloudflare Cloudflare SSLDetector-Dienst. robots.txt: Nein
- Cloudflare Stream Webhook Cloudflare Cloudflare Stream Webhook-Dienst. robots.txt: Nein
- Cloudflare-Traffic-Manager Cloudflare Cloudflare-Traffic-Manager-Dienst. robots.txt: Nein
- cognitiveSEO Crawler cognitive SEO Internet Marketing Tools. CognitiveSEO ist ein SEO-Toolset, das das Web crawlt und Links analysiert. robots.txt: Nein
- Cxense Cxense Cxensebot ist ein von Cxense betriebener Bot für SEO-Überwachung und -Analyse. robots.txt: Nein
- DataForSEO DataForSEO DataForSEO-Bot, betrieben von DataForSEO, für SEO- und Digital-Marketing-Datenlösungen. robots.txt: Nein
- DataForSEO Bot DataForSEO DataForSEO Bot ist ein von DataForSEO betriebenes SEO-Tool, das für Backlink-Analysen verwendet wird und Website-Betreibern, Webmastern und SEO-Profis Backlink-Analysen bereitstellt. robots.txt: Nein
- DigiCert DCV DigiCert DigiCert DCV bot von DigiCert für SEO-Tool-Zwecke betrieben. robots.txt: Nein
- EzoicBot Ezoic Inc EzoicBot ist ein Webcrawler von Ezoic Inc, der Informationen über das Internet, Suchmaschinen und Websites extrahiert, um Publishern zu helfen, die Website-Performance und das Suchmaschinen-Ranking zu verstehen. robots.txt: Ja
- Google Digital Asset Links Google Der Digital Asset Links bot überprüft von Website-Betreibern erstellte Statements-Listen. robots.txt: Nein
- Google StoreBot Google Google StoreBot ist ein suchmaschinenbasiertes Programm, das Webseiten automatisch crawlt, um Daten zu sammeln und zu analysieren, betrieben von Google. robots.txt: Nein
- Google-AdWords-Express Google Google-AdWords-Express ist ein Google bot für das AdWords-Produkt für kleine Unternehmen, der Werbetreibenden-Websites für Anzeigenerstellung und Site-Verifizierung crawlt. robots.txt: Nein
- Google-Adwords-Instant Google Google-Adwords-Instant ist ein Google-Bot, der Landingpages von Werbetreibenden zur Verifizierung und Qualitätsprüfung besucht. robots.txt: Nein
- Huckabuy Bot Huckabuy Huckabuy Bot ist ein von Huckabuy betriebener Webcrawler für SEO-Tool-Zwecke, der Websites zum Zweck der Optimierung crawlt und indexiert. robots.txt: Nein
- LinkCheck SiteImprove Der LinkCheck-Crawler von Siteimprove analysiert Websites zu Zwecken der Qualitätssicherung, SEO und Barrierefreiheit. robots.txt: Nein
- LinkChecker Bot LinkChecker LinkChecker Bot ist ein von LinkChecker betriebener Webcrawler, der Backlink-Profile überwacht. robots.txt: Ja
- marketgoo marketgoo marketgoo ist ein von marketgoo betriebenes SEO-Tool und bietet White-Label-SEO-Tools an. robots.txt: Ja
- MJ12Bot Majestic MJ12bot ist ein von Majestic betriebener Webcrawler für SEO-Backlink-Analyse und Suchmaschinendaten-Mapping. robots.txt: Nein
- Moz dotbot Moz Moz Dotbot ist ein von Moz betriebener Webcrawler für SEO-Backlink-Analyse und Website-Auditing. robots.txt: Nein
- Moz rogerbot Moz Moz' Site-Audit-Crawler für Moz Pro Campaigns, betrieben von Moz. robots.txt: Ja
- NitroBot NitroPack Ltd NitroBot ist ein Bot zur Optimierung der Website-Geschwindigkeit, betrieben von NitroPack Ltd, der Anfragen an die Websites von Kunden sendet, um Inhalte für die Optimierung abzurufen. robots.txt: Nein
- OnCrawl Oncrawl OnCrawl ist eine Enterprise-SEO-Plattform, die von einem branchenführenden SEO-Crawler und Log Analyzer unterstützt wird und von Oncrawl betrieben wird. robots.txt: Nein
- Online Webceo Bot Online Webceo Online Webceo Bot ist ein Bot von Online Webceo, der Websites für SEO-Analysen und technische Audits scannt. robots.txt: Nein
- prerender Prerender, LLC Es ist ein HTML-Pre-Rendering-Dienst für SEO von SPA(Single Page Application)-Websites. robots.txt: Nein
- Revvim Revvim Unser Bot crawlt die Websites unserer Kunden, um SEO-Möglichkeiten zu identifizieren robots.txt: Nein
- SearchAtlas Bot Search Atlas SearchAtlas Bot ist ein SEO-Tool, betrieben von Search Atlas, das verwendet wird, um Kundenwebsites zu bewerten und SEO-Optimierungsstrategien bereitzustellen. robots.txt: Nein
- SemrushBot Semrush SemrushBot ist die Suchbot-Software, die Semrush einsetzt, um Daten aus dem Web zu entdecken und zu sammeln für SEO-Analysen und Wettbewerbsrecherchen. robots.txt: Ja
- SemrushBotBacklinkAudit SEMrush SEMrushBotBacklinkAudit ist ein von SEMrush betriebener Bot für SEO-Backlink-Analyse und Website-Audits. robots.txt: Nein
- SemrushBotBacklinks Semrush SemrushBotBacklinks ist ein von Semrush betriebener Bot zum Sammeln von Daten für das Backlink Analytics-Tool von Semrush. robots.txt: Nein
- SemrushBotLinkBuilding SEMrush SEMrushBotLinkBuilding ist ein von SEMrush betriebener Bot für SEO-Backlink-Analyse. robots.txt: Nein
- SemrushBotSI Semrush SEMrushBotSI ist ein von Semrush betriebener Bot für SEO-Tool-Zwecke, insbesondere für die Datenerfassung. robots.txt: Nein
- SEO Audit Check Bot SEO Audit Check SEO Audit Check Bot ist ein automatisiertes Tool von SEO Audit Check, das umfassende SEO-Audits auf Websites durchführt. robots.txt: Nein
- seo4ajax Capsule Code Der seo4ajax-Bot, betrieben von Capsule Code, hilft dabei, Single-Page-Anwendungen (SPAs) für Suchmaschinen crawlbar zu machen. robots.txt: Nein
- SeobilityBot Seobility Der Seobility Bot ist ein von Seobility betriebener SEO-Tool-Bot, der Websites crawlt, um SEO-Informationen zu sammeln. robots.txt: Nein
- SerpstatBot Serpstat SerpstatBot ist ein von Serpstat betriebener Bot, der für SEO-Backlink-Analyse und Website-Audits verwendet wird, indem er Daten für das Backlink Analysis-Tool von Serpstat sammelt. robots.txt: Nein
- SiteAuditBot Semrush SiteAuditBot ist ein von Semrush betriebenes SEO-Tool, das häufige Website-Probleme prüft und Berichte zu Crawlability, Markups, interner Verlinkung, Geschwindigkeit, HTTPS und internationalem SEO bereitstellt. robots.txt: Nein
- Siteimprove Crawl Siteimprove Siteimprove Crawl bot, betrieben von Siteimprove, für die Analyse von SEO- und Content-Suite. robots.txt: Nein
- Trellis-Services Mediavine Trellis-Services bot, betrieben von Mediavine, generiert kritisches CSS zur Optimierung von Websites. robots.txt: Nein
- W3 Validator Services World Wide Web Consortium (W3C) W3C Validator Services ist ein von World Wide Web Consortium (W3C) betriebener Bot, der die Konformität von Websites mit offenen Standards prüft. robots.txt: Ja
- Yahoo Japan SEO Crawler Yahoo SEO-Crawler für Yahoo Japan. robots.txt: Nein
Monitoring-Bots 107
Website-Monitoring
- 360Monitoring 360Monitoring Der 360Monitoring-Bot prüft die Verfügbarkeit und Leistung von Websites von ausgewählten Standorten aus. robots.txt: Nein
- AccessStatus AccessStatus Der AccessStatus-Bot prüft HTTP-Statuscodes von Webseiten, um die Funktionsfähigkeit von Links sicherzustellen. robots.txt: Nein
- ActiveComply Bot ActiveComply ActiveComply Bot ist ein Crawler für Social-Media-Überwachung und regulatorische Compliance, betrieben von ActiveComply. robots.txt: Nein
- Adagio Bot Adagio Adagio Bot, betrieben von Adagio, für Monitoring- und Demand-Optimierungslösungen. robots.txt: Nein
- Alertsite by Smartbear Smartbear Alertsite von Smartbear ist eine HTTP-Monitoring-Sonde, betrieben von Smartbear, die Websites auf Verfügbarkeits- und Leistungsanomalien überwacht. robots.txt: Nein
- Area 360 Area360 Area 360 ist ein Bot für Immobiliensuche und Analysen, betrieben von Area360, und wird zur Überwachung von Immobilieninformationen verwendet. robots.txt: Nein
- Audisto Crawler Audisto Audisto Crawler ist ein Website-Monitoring-Bot, betrieben von Audisto, der alle zugänglichen URLs einer Website abruft. robots.txt: Nein
- Automaton Automaton Automaton ist ein End-to-End-Tool für Kampagnen- und Integrationstests, betrieben von Automaton, und wird zur Überwachung und Optimierung von Marketing-, Werbe- und Vertriebstechnologie-Stacks verwendet. robots.txt: Nein
- Better Uptime Better Stack Better Uptime ist ein Monitoring-Bot, betrieben von Better Stack, der für die Überwachung von Infrastrukturplattformen verwendet wird. robots.txt: Nein
- BinaryCanary Binary Canary BinaryCanary ist ein Website-Monitoring-Bot, betrieben von Binary Canary, der Verfügbarkeits- und Leistungsprobleme verfolgt. robots.txt: Nein
- BlogVault BlogVault BlogVault ist ein Monitoring-Bot, betrieben von BlogVault, der WordPress-Dienste wie Backup, Sicherheit und Monitoring bereitstellt. robots.txt: Nein
- BugsNag Bugs Nag BugsNag ist ein Monitoring-Bot, betrieben von Bugs Nag, für Fehler- und Performance-Monitoring von Webanwendungen. robots.txt: Nein
- catchpoint Catchpoint Catchpoint ist ein Monitoring-Bot, betrieben von Catchpoint, mit Fokus auf Internet-Performance-Monitoring aus Endnutzerperspektive. robots.txt: Nein
- Checkly Bot Checkly Checkly Bot ist ein Monitoring-Bot, betrieben von Checkly, der für proaktives Monitoring und Testing von Websites und APIs verwendet wird. robots.txt: Nein
- Cloudflare Diagnostics Cloudflare Diagnose- und Testdienste von Cloudflare. robots.txt: Nein
- Cloudtrellis Cloudtrellis Der Cloudtrellis Bot scannt Websites auf defekte Links, Barrierefreiheitsprobleme und SEO-Verbesserungen und wird von Cloudtrellis betrieben. robots.txt: Ja
- Cludo Cludo Cludo ist ein von Cludo betriebener Monitoring-Bot, der Such- und Analyselösungen unterstützt. robots.txt: Ja
- ContentKing ContentKing ContentKing ist ein cloudbasierter Dienst, der Websites auf technische Probleme und Inhaltsänderungen überwacht. robots.txt: Nein
- Crazy Egg Bot CrazyEgg Crazy Egg-Bot, der Screenshots von Seiten erstellt, Assets sammelt und die Skriptinstallation testet. robots.txt: Nein
- deadlinkchecker DLC Websites Der Dead Link Checker-Bot, betrieben von DLC Websites, crawlt Websites, um defekte Links zu identifizieren. robots.txt: Nein
- Deepcrawl Lumar Deepcrawl-Bot, betrieben von Lumar, crawlt Websites für Performance-Analysen und SEO-Optimierungen. robots.txt: Nein
- Doctom Monitor Dotcom-Monitor Der Doctom Monitor ist ein Website-Monitoring-bot von Dotcom-Monitor, der Websites auf Verfügbarkeit und Leistungsprobleme prüft. robots.txt: Nein
- Dr. Link Check Dr. Link Check Dr. Link Check ist ein Monitoring-bot von Dr. Link Check, der Websites durchsucht, um defekte Links zu identifizieren und zu beheben. robots.txt: Nein
- Easydns EasyDNS Easydns ist ein Monitoring-bot von EasyDNS, der für die Verfügbarkeitsüberwachung verwendet wird. robots.txt: Nein
- elmah.io Uptime Monitoring elmah.io Der elmah.io Uptime Monitoring bot überwacht die Verfügbarkeit von Websites für elmah.io-Nutzer. robots.txt: Nein
- eRepublik.tools Sebastian Foth - Software Solutions eRepublik.tools ist ein Monitoring-bot von Sebastian Foth - Software Solutions, der Spielstatistiken und Tools für das Browsergame 'eRepublik' bereitstellt. robots.txt: Nein
- EvoUptimeBot Evo Agency Ltd. EvoUptimeBot ist ein Monitoring-bot von Evo Agency Ltd. zur Verfügbarkeitsüberwachung der EvoCommerce-Plattform. robots.txt: Nein
- FDL Stats Bots FTW Entertainment LLC FDL Stats Bot, betrieben von FTW Entertainment LLC, erzeugt analytische Daten zu rocket league-Spielerinformationen. robots.txt: Nein
- Foregenix ThreatView/WebScan Foregenix Limited Foregenix ThreatView/WebScan ist ein Sicherheits- und Risikoscan-Bot, betrieben von Foregenix Limited, der Websites auf Malware und Schwachstellen überwacht. robots.txt: Nein
- FullStory Full Story FullStory ist Ihre Plattform für digitale Erlebnisanalysen mit On-the-fly-Funnels, pixelgenauer Wiedergabe, benutzerdefinierten Events, Heatmaps, erweiterter Suche, Dev Tools und mehr. FullStoryBot ruft Assets ab und speichert sie, die zum Wiederaufbau von Websites beim Anzeigen aufgezeichneter Sitzungen erforderlich sind. robots.txt: Nein
- Ghost Inspector Ghost Inspector Ghost Inspector ist ein Monitoring-Bot, betrieben von Ghost Inspector, für automatisierte Browser-Tests. robots.txt: Nein
- Google Schema Markup Testing Tool Google Google Schema Markup Testing Tool bot, betrieben von Google, validiert strukturierte Daten auf Webseiten. robots.txt: Nein
- Grafana's Synthetic Monitoring Grafana Labs Der Synthetic Monitoring-Agent von Grafana bietet Probe-Funktionalität und führt Netzwerkprüfungen zur Überwachung entfernter Ziele aus. robots.txt: Nein
- GTmetrix GTmetrix GTmetrix ist ein kostenloses Tool, das die Geschwindigkeit und Leistung einer Seite analysiert. Mithilfe von PageSpeed und YSlow erstellt GTmetrix Bewertungen für Seiten und bietet umsetzbare Empfehlungen zur Behebung. robots.txt: Nein
- GuestpostsBot Guest Posts GuestpostsBot ist ein Web-Crawler mit mehreren Funktionen, um Websitebetreibern zu helfen, die ihre Website auf der guestposts.com.br-Plattform registriert haben, ihre Website zu überwachen. Der Bot verfolgt ständig die auf der Plattform registrierten Websites, um zu prüfen, ob die geschlossenen Partnerschaften auf der guestpost p... robots.txt: Nein
- HetrixTools HetrixTools Inc HetrixTools Uptime Monitoring Bot prüft die Verfügbarkeit von Websites und Servern und wird von HetrixTools Inc. betrieben. robots.txt: Nein
- honeybadgerbot Honeybadger Industries HoneybadgerBot ist ein Monitoring-Bot, der von Honeybadger Industries für Fehler- und Uptime-Monitoring-Dienste betrieben wird. robots.txt: Nein
- HostTracker HostTracker HostTracker ist ein Monitoring-Bot von HostTracker, der die Verfügbarkeit und Leistung von Websites überwacht. robots.txt: Nein
- Hotjar Hotjar Hotjar ist ein Tool für Nutzeranalysen und Feedback, betrieben von Hotjar, jetzt Teil von Contentsquare. robots.txt: Nein
- InternetArchiveBot Internet Archive InternetArchiveBot ist ein von Internet Archive betriebener Überwachungsbot, der URL-Referenzen auf Wikipedia auf defekte Links überprüft. robots.txt: Nein
- IsDownBot IsDownBot IsDownBot überwacht Endpunkte, um sicherzustellen, dass sie laufen, betrieben von IsDownBot. robots.txt: Nein
- Jagged Pixel UptimeBot Jagged Pixel Inc. UptimeBot von Jagged Pixel Inc. überwacht die Verfügbarkeit von Shopify-Shops und warnt bei Ausfällen. robots.txt: Nein
- Jetpack Automattic Jetpack ist ein Monitoring-Bot, betrieben von Automattic, der die Verfügbarkeit für WordPress.com- und Jetpack-Nutzer überwacht. robots.txt: Nein
- KargoBot-Artemis Kargo KargoBot-Artemis ist Kargos autonomer Bot zur Inhaltsverifizierung. Es ist eine Simulation eines Nutzers auf einem iOS-Gerät. Der Bot wird verwendet, um Websites auf Inhalte zu prüfen, die für Kunden im Kargo-Werbenetzwerk ungeeignet sein könnten. robots.txt: Nein
- Kinsta Kinsta Kinsta-Bot zur Überwachung der Verfügbarkeit und zur Verifizierung der Domain-Zuordnung robots.txt: Nein
- Link Tiger LinkTiger, Inc. LinkTiger ist ein von LinkTiger, Inc. betriebener Monitoring-Bot, der Kundenseiten durchsucht und defekte Links meldet. robots.txt: Nein
- logicmonitor LogicMonitor LogicMonitor bot führt synthetische Monitoring-Prüfungen auf Websites und Online-Diensten durch. robots.txt: Nein
- Macrobondbot Macrobondbot Macrobondbot ist ein benutzerdefinierter Webcrawler, betrieben von Macrobondbot, um makroökonomische Daten aus offiziellen Quellen abzurufen. robots.txt: Nein
- Mavifinds Bot Mavifinds Der Mavifinds Bot ist Teil eines Sicherheitsdienstes, der Websites überwacht. Er kann automatisch Sicherheitsmaßnahmen wie einen Under-Attack-Modus als Reaktion auf Bedrohungen aktivieren. robots.txt: Nein
- Medialogia Bot Medialogia Medialogia Bot ist ein von Medialogia, einem russischen Medienüberwachungsunternehmen, betriebener Webcrawler, der Daten aus Online-Nachrichten und sozialen Medien sammelt. robots.txt: Nein
- Monitage Monitage Monitage ist ein Monitoring-Bot, betrieben von Monitage, der für das Uptime-Monitoring von Websites und Diensten verwendet wird. robots.txt: Nein
- Monitis Monitis Monitis bot für Premium-Monitoring-Dienst, betrieben von Monitis. robots.txt: Nein
- Monsidobot Acquia Monsidobot ist ein Monitoring-Bot, betrieben von Acquia, der zum Scannen und Verbessern von Inhalten und Webzugänglichkeit verwendet wird. robots.txt: Nein
- MonSpark MonSpark MonSpark ist ein von MonSpark betriebener Website-Monitoring-Dienst, der die Verfügbarkeit von Websites, Netzwerkbedingungen und die Gültigkeit von TLS-Zertifikaten prüft. robots.txt: Nein
- MontasticMonitor Montastic MontasticMonitor ist ein Bot zur Überwachung der Website-Verfügbarkeit, betrieben von Montastic. robots.txt: Nein
- Netumo Netumo Netumo ist ein Website-Uptime-Monitoring-Dienst, betrieben von Netumo, der Überwachung und Verifizierung der Online-Infrastruktur bereitstellt. robots.txt: Nein
- NETVIGIE Netvigie NETVIGIE ist ein Monitoring-Bot, betrieben von Netvigie, der die Verfügbarkeit und Leistung von Websites und mobilen Apps prüft. robots.txt: Nein
- New Relic New Relic Der New Relic-Bot, betrieben von New Relic, überwacht Kundenanwendungen auf Verfügbarkeits- und Leistungsprobleme. robots.txt: Nein
- NixStatsMonitoringBot NixStats NixStatsMonitoringBot ist ein Monitoring-Bot, betrieben von NixStats, um die Verfügbarkeit und Leistung von Websites zu verfolgen. robots.txt: Nein
- Nodeping Nodeping Nodeping ist ein Monitoring-Bot, betrieben von Nodeping, der Websites auf Uptime prüft. robots.txt: Nein
- Oh Dear Oh Dear Oh Dear ist ein Monitoring-Bot von Oh Dear, der zur Prüfung der Website-Verfügbarkeit und Performance verwendet wird. robots.txt: Nein
- Onetrust CMP Scanner OneTrust, LLC. Der Onetrust CMP Scanner ist ein Monitoring-Bot von OneTrust, LLC, der Cookies und Tracking-Technologien auf Kundenseiten identifiziert und kategorisiert. robots.txt: Nein
- OnlineOrNot Monitor OnlineOrNot OnlineOrNot Monitor ist ein Website-Monitoring-Bot von OnlineOrNot, der Uptime-Prüfungen und Page-Speed-Tests bereitstellt. robots.txt: Nein
- OutsellURLValidator Outsell Corporation Der OutsellURLValidator-Bot von Outsell Corporation überwacht URLs von Kunden-Websites auf Änderungen bei Hosting/Anbieter. robots.txt: Nein
- PaesslerCloudBot Paessler PaesslerCloudBot ist ein Monitoring-Bot von Paessler, der zur Überwachung von Website-Verfügbarkeit und Performance verwendet wird. robots.txt: Nein
- Panopta Panopta Panopta ist ein Uptime-Monitoring-Dienst, der von Fortinet übernommen wurde. robots.txt: Nein
- Parse.ly Parse.ly Parse.ly ist ein Content-Analytics-Tool von Parse.ly, das zur Überwachung der Content-Performance verwendet wird. robots.txt: Ja
- Pingdom Pingdom Pingdom bot ist eine HTTP-Überwachungsprobe für den Website-Überwachungsdienst von Pingdom, betrieben von Pingdom. robots.txt: Nein
- PingPing PingPing PingPing ist ein Website-Überwachungsdienst von PingPing, der die Verfügbarkeit von Websites und die Gültigkeit von TLS-Zertifikaten prüft. robots.txt: Nein
- PingPing Bot PingPing.io PingPing Bot ist ein Überwachungsbot von PingPing.io zur Prüfung der Website-Verfügbarkeit und SSL-Gültigkeit. robots.txt: Nein
- Pulsetic Pulsetic Pulsetic ist ein Website-Überwachungsdienst von Pulsetic, der Verfügbarkeitsüberwachung und Ausfallwarnungen bereitstellt. robots.txt: Nein
- Qualys SSL Scanner Qualys Qualys SSL Scanner ist ein Monitoring-Bot, betrieben von Qualys, der zum Testen und Überwachen von SSL-Bewertungen verwendet wird. robots.txt: Nein
- Rackspace Rackspace Der Rackspace HTTP Monitor überwacht Kundenwebsites auf Verfügbarkeit und andere Probleme. robots.txt: Nein
- RetroListeCOM Niclas Papst RetroListeCOM ist ein Monitoring-Bot, betrieben von Niclas Papst, der Nutzerzahlen auf gaming-bezogenen Websites verfolgt. robots.txt: Nein
- SE Ranking Bot SE Ranking Crawler zur Analyse von Websites von SE Ranking-Kunden auf potenzielle Probleme. robots.txt: Nein
- Sentry Uptime Monitoring Sentry Uptime Bot Der Sentry Uptime Monitoring-Bot prüft Websites und APIs auf Verfügbarkeit und wird von Sentry Uptime Bot betrieben. robots.txt: Nein
- SequelWP SequelWP Der SequelWP-Überwachungsbot prüft die Website-Verfügbarkeit alle 5 Minuten für verifizierte Kunden. robots.txt: Nein
- Server Density Stackpath Server Density-Bot von Stackpath für proaktive Infrastrukturüberwachung robots.txt: Nein
- Site24x7 Site24x7 Globale Website-Überwachungs-Sonde von Site24x7, betrieben von Site24x7 zu Überwachungszwecken. robots.txt: Nein
- SiteUpTimeBot SiteUpTime SiteUpTimeBot ist die HTTP-Überwachungs-Sonde für SiteUpTime.com. robots.txt: Nein
- SolarWinds Observability SolarWinds SolarWinds Observability ist ein Monitoring-Bot, betrieben von SolarWinds, der für das synthetische Monitoring von Websites und Diensten verwendet wird. robots.txt: Nein
- Spectate Spectate Spectate ist ein Uptime-Monitoring-Bot, betrieben von Spectate, der für healthchecks verwendet wird. robots.txt: Nein
- Splunk Splunk Splunk ist eine Monitoring-Plattform, betrieben von Splunk, die von Enterprise-Organisationen für synthetisches Monitoring verwendet wird. robots.txt: Nein
- Splunk Synthetics Splunk Synthetisches Monitoring-Tool mit globalen Agents, die in AWS laufen robots.txt: Nein
- Stape Scanner Stape Inc Stape Scanner ist ein Monitoring-Bot, betrieben von Stape Inc, der zur Bewertung von Tracking-Tag-Konfigurationen verwendet wird. robots.txt: Nein
- StatusCake StatusCake StatusCake ist ein Monitoring-Bot, betrieben von StatusCake, der zur Überwachung der Verfügbarkeit und Leistung von Webseiten verwendet wird. robots.txt: Nein
- Swifteq Link Checker Swfiteq Ltd Swifteq Link Checker Bot von Swifteq Ltd zur Überwachung und Erkennung defekter Links in Zendesk Help Centern. robots.txt: Nein
- Synthetic Bot DataDog Datadog Synthetic Bot, betrieben von DataDog, zur Überwachung von Anwendungen und API-Endpunkten über simulierte Nutzeranfragen. robots.txt: Nein
- TermlyBot Termly TermlyBot ist ein von Termly betriebener Web-Crawler zur Erkennung und Kategorisierung von Website-Cookies. robots.txt: Nein
- Thousand Eyes Cloud Agent Thousand Eyes ThousandEyes überwacht die Netzwerkinfrastruktur, behebt Probleme bei der Anwendungsbereitstellung und kartiert die Internet-Performance – alles über eine SaaS-basierte Plattform. robots.txt: Nein
- Trendiction Bot Trendiction S.A. Trendiction Bot ist ein von Trendiction S.A. betriebener Monitoring-Bot. robots.txt: Nein
- UpDownBot Updown UpDownBot ist die HTTP-Überwachungsprobe für updown.io, betrieben von Updown, zur Überwachung von Website-Verfügbarkeit und Performance. robots.txt: Nein
- Uptime LLC Uptime Uptime LLC bot, betrieben von Uptime, zur Überwachung von Website-Verfügbarkeit und Performance. robots.txt: Nein
- UptimeBot UptimeBot UptimeBot ist ein aktives Tool zur Website-Überwachung, das hervorragend mit Slack funktioniert. robots.txt: Nein
- uptimedoctor uptimedoctor UptimeDoctor ist ein Dienst zur Überwachung der Website-Verfügbarkeit. robots.txt: Nein
- UptimeRobot UptimeRobot UptimeRobot ist ein kostenloser Website-Uptime-Monitoring-Dienst, der in konfigurierbaren Intervallen prüft, ob Ihre Website erreichbar ist oder nicht. robots.txt: Nein
- Uptimia Uptimia Uptimia ist ein Website-Monitoring-Dienst von Uptimia, der Website-Performance und Verfügbarkeit überwacht. robots.txt: Nein
- UptrendsBot Uptrends GmbH UptrendsBot ist ein von Uptrends GmbH betriebener Monitoring-Bot für synthetisches Monitoring und Lasttests. robots.txt: Nein
- Watchbot WatchBot Watchbot ist ein von WatchBot betriebener Monitoring-Bot, der die Verfügbarkeit von Websites und das Ablaufdatum von SSL-Zertifikaten überwacht. robots.txt: Nein
- Watchful Watchful LLC Watchful ist ein von Watchful LLC betriebenes Überwachungssystem zur Prüfung der Uptime von Kunden-Websites. robots.txt: Nein
- webpagetest WebPageTest WebPageTest ist ein von Catchpoint betriebenes Tool für Web-Performance-Tests, das zur Messung der Webseiten-Performance von verschiedenen Standorten und Browsern aus verwendet wird. robots.txt: Nein
- WebsitePulseBot WebsitePulse WebsitePulseBot ist eine HTTP-Monitoring-Instanz von WebsitePulse für ihren Monitoring-Dienst. robots.txt: Nein
- WkndHealthCheckBot Wunderkind WkndHealthCheckBot ist ein von Wunderkind betriebener Monitoring-Bot, der für Health Checks auf den Domains von Kunden verwendet wird. robots.txt: Nein
- WormlyBot Wormly WormlyBot ist eine HTTP-Monitoring-Probe, die von Wormly für Uptime-Monitoring betrieben wird. robots.txt: Nein
- WP Umbrella WP Umbrella Der WP Umbrella Bot ruft Daten von WordPress-Seiten für Nutzer des Umbrella-Plugins ab und wird von WP Umbrella betrieben. robots.txt: Nein
- WPMU DEV Broken Link Checker WPMUDEV WPMU DEV Broken Link Checker ist ein von WPMUDEV betriebener Bot, der Seiten nach defekten Links durchsucht. robots.txt: Nein
- WPMUDEV Uptime Monitor 5.0 WPMUDEV WPMUDEV Uptime Monitor 5.0 ist ein von WPMUDEV betriebener Website-Monitoring-Bot, der die Verfügbarkeit und Leistung von Seiten überprüft. robots.txt: Nein
Web-Archive 3
Web-Archivierung
- Arquivo Web Crawler Arquivo Arquivo Web Crawler ist ein Webarchivierungs-Bot, betrieben von Arquivo, der das portugiesische Web erfasst. robots.txt: Ja
- Internet Archive - Archive-It Archive-It Der Archive-It-Bot von Internet Archive bewahrt Webseiten für historische Aufzeichnungen. robots.txt: Nein
- Internet Archive Bot Internet Archive Der Internet Archive-Bot crawlt und bewahrt öffentlich zugängliche Webseiten für den historischen Bestand der Wayback Machine von Internet Archive. robots.txt: Ja
Werbe-Bots 38
Werbeverifizierung
- AdsBot-Google Google Google AdsBot ist ein Sonderfall-Crawler, der Websites überwacht, auf denen Google Ads geschaltet werden, und die Qualität von Landingpages sowie die Anzeigenkonformität prüft. robots.txt: Nein
- AdsTxtCrawler OneTag Limited AdsTxtCrawler von OneTag Limited durchsucht ads.txt-Dateien, um das Vorhandensein der onetag.com-Zeile zu überprüfen. robots.txt: Nein
- Amazon AdBot Amazon Amazon AdBot ist ein Crawler, der von Amazons Werbediensten verwendet wird, um sicherzustellen, dass die Landingpages von Werbetreibenden den Werberichtlinien entsprechen. robots.txt: Ja
- Amazon Contxbot Amazon Amazon Contxbot ist ein von Amazon betriebener Crawler-Bot für Werbezwecke, der Websites besucht, um Inhalte für relevante Anzeigen zu ermitteln. robots.txt: Nein
- BigUpData Bot BigUpData BigUpData Bot, betrieben von BigUpData, automatisiert die Pipeline von Produktangeboten für Werbung. robots.txt: Nein
- Bing Ads Microsoft Bing Ads Bot, betrieben von Microsoft, zur Kontrolle der Anzeigenqualität. robots.txt: Nein
- BrightEdge Bot BrightEdge Autopilot ist ein SEO-Marketing-Automatisierungstool mit Funktionen für interne Verlinkung und Bildoptimierung. Wir crawlen Kundenseiten, damit wir die besten Links für die Website bestimmen und Bilder finden können, die optimiert werden müssen. robots.txt: Nein
- Channable Channable Channable ist ein Tool, das von einigen Cloudflare-Kunden verwendet wird. Das Tool lädt Daten aus den Systemen der Kunden für Marketing-Automatisierung und E-Commerce-Automatisierung herunter. robots.txt: Nein
- Clickagy Clickagy Der Clickagy Intelligence Bot ist ein Bot zur Anzeigenverifizierung für Clickagy. robots.txt: Nein
- ContextualBot Outcomes ContextualBot ist ein Web-Indexer, der von Outcomes betrieben wird und den Inhalt von Webseiten analysiert, um kontextuelle Segmente für das Targeting innerhalb von Werbeplattformen zu erstellen. robots.txt: Nein
- CriteoBot Criteo CriteoBot ist ein von Criteo betriebener Webcrawler zur Auslieferung relevanter Anzeigen. robots.txt: Nein
- Google Adsense: Mediapartners-Google Google Der Mediapartners-Google-Bot, betrieben von Google, überwacht Website-Inhalte für AdSense. robots.txt: Ja
- Google Firebase Google Google Firebase ist ein von Google betriebener Crawler für Werbezwecke. robots.txt: Nein
- Google-Display-Ads-Bot Google Google-Display-Ads-Bot ist ein von Google betriebener Crawler zur Verifizierung von Websites beim Hinzufügen zu AdSense. robots.txt: Ja
- Grapeshot Grapeshot Der Grapeshot-Bot, Teil von Oracle Advertising, crawlt Webseiten zur Inhaltsanalyse und Klassifizierung. robots.txt: Nein
- Groovinads Groovinads Der Groovinads-Bot sammelt E-Commerce-Daten für Werbedienste und wird von Groovinads betrieben. robots.txt: Nein
- IAS crawler Integral Ad Science IAS crawler ist ein von Integral Ad Science betriebener Bot für digitale Anzeigenverifizierung und Inhaltsbewertung. robots.txt: Nein
- klaviyo Klaviyo Klaviyo ist ein B2C-CRM-Bot, betrieben von Klaviyo, und wird für Werbung und Marketing-Automatisierung verwendet. robots.txt: Nein
- LeikiBot DoubleVerify LeikiBot, betrieben von DoubleVerify, durchsucht Webseiten für Werbetreibende. robots.txt: Nein
- Mediavine Medatada Parser Mediavine Unsere App heißt Grow und wir ermöglichen Publishern, Lesezeichen, Social Sharing und Suche auf ihren Websites zu aktivieren. robots.txt: Nein
- Meta-ExternalAds Meta Meta-ExternalAds ist ein von Meta betriebener Webcrawler, der zur Verbesserung von Werbe- und geschäftsbezogenen Produkten und Diensten verwendet wird. robots.txt: Ja
- MgidBot MGID MgidBot ist ein von MGID betriebener Bot zur Erkennung von Kontextkategorien von Inhalten für Werbeempfehlungen. robots.txt: Ja
- Missinglettr Bot Missinglettr Missinglettr Bot crawlt Blogbeiträge, um sie in Social-Media-Kampagnen umzuwandeln. robots.txt: Nein
- Noorobot Noor Digital Agency AB Noorobot ist ein SEO-Tool, betrieben von Noor Digital Agency AB, das Websites crawlt, um Empfehlungen zu geben und SEO-beeinflussende Probleme zu identifizieren. robots.txt: Nein
- NostoCrawlerBot Nosto NostoCrawlerBot ist ein von Nosto betriebener Bot für Werbezwecke, der zum Crawlen und Aufrufen von Webseiten verwendet wird. robots.txt: Nein
- Outbrain Outbrain Der Outbrain-Bot, betrieben von Outbrain, analysiert Inhalte für die Anzeigenauslieferung. robots.txt: Nein
- Proximic ComScore Der Proximic bot, betrieben von ComScore, crawlt Websites, um die Eignung für Werbung zu bestimmen. robots.txt: Ja
- Quantcastbot Quantcast Quantcastbot ist ein Webcrawler, der von Quantcast für die Qualitätssicherung von Werbung und zum Verständnis von Seiteninhalten für Interest-Based Audiences verwendet wird. robots.txt: Nein
- Reelevant Reelevant Reelevant ist ein Werbebot, betrieben von Reelevant, der es Kunden ermöglicht, Inhalte in ihren E-Mails dynamisch zu aktualisieren, indem er zur Laufzeit Bilder ihrer Produkte abruft. robots.txt: Nein
- Salesforce Salseforce Salesforce-Bot, betrieben von Salesforce, für Werbezwecke mit CRM- und Marketing-Funktionen. robots.txt: Nein
- SalesViewerBot SalesViewer GmbH SalesViewerBot ist ein Webcrawler, betrieben von SalesViewer GmbH, für Werbe- und Sales-Intelligence-Zwecke. robots.txt: Nein
- Slickstream Slickstream Slickstream ist ein von Slickstream betriebener SaaS-bot, der Engagement-Funktionen wie Site Search und Inhalts-Empfehlungen bereitstellt. robots.txt: Nein
- SmartologyBot Smartology SmartologyBot ist ein von Smartology betriebener bot, der semantische Vektoren aus Domain-Seiten erzeugt, um semantisch relevante Anzeigen auszuspielen. robots.txt: Nein
- Taboola Taboola Taboola bot, betrieben von Taboola, besucht Websites, um Inhalte zu prüfen und Metadaten für Werbekampagnen zu erfassen. robots.txt: Nein
- TTD Content The Trade Desk Der Content-Bot von The Trade Desk, betrieben von The Trade Desk, klassifiziert Webseiteninhalte für die Anzeigenplatzierung. robots.txt: Nein
- Yahoo Ad Monitoring Yahoo Yahoo Ad Monitoring bot, betrieben von Yahoo, überwacht Webseiten auf Yahoo-Anzeigen. robots.txt: Nein
- Yahoo Japan Yahoo Japan Corporation Yahoo Japan Advertising Bot, betrieben von Yahoo Japan Corporation für Werbezwecke. robots.txt: Nein
- Yext Inc Yext Der Yext Crawler ist ein von Yext betriebener Bot, der zum Abrufen von Daten von Websites für Yext-Kunden verwendet wird. robots.txt: Nein
Sicherheitsscanner 31
Sicherheitsscans
- Black Duck Fast Dynamic Black Duck Black Duck Fast Dynamic ist ein Sicherheits-Scanning-Bot, betrieben von Black Duck Software, der Fast Dynamic DAST-Sicherheitsprüfungen durchführt. robots.txt: Nein
- Blockaid Blockaid Durchsucht das Internet, um schädliche Websites zu finden, die Krypto-Nutzer dazu bringen, ihre Wallets zu leeren robots.txt: Nein
- Bushbaby Cloudflare Bushbaby ist ein Sicherheits-Bot, betrieben von Cloudflare, zur Verwaltung und Erneuerung von SSL-Zertifikaten. robots.txt: Nein
- Cert Chief Chief Tools Cert Chief ist ein Sicherheits-Bot, betrieben von Chief Tools, der HTTPS-Domains auf Zertifikatsprobleme und Konfigurationsfehler überwacht. robots.txt: Ja
- Cloudflare Security Scanner Cloudflare Der Cloudflare Radar URL Scanner scannt und analysiert URLs im Auftrag der Sicherheitsdienste von Cloudflare auf Sicherheitsbedrohungen, Phishing und Malware. robots.txt: Nein
- Cookie Hub CookieHub Der Cookie Hub-Bot erkennt von Websites gesetzte Cookies für CookieHub-Kunden und überprüft die Einwilligung der Nutzer. robots.txt: Nein
- cookie maestro Cookie Maestro Innerhalb der GDPR-Gesetzgebung ist es verpflichtend, einen Besucher um Erlaubnis zu bitten, bevor sogenannte Marketing- oder Tracking-Cookies gesetzt werden. Viele Websites enthalten einen Cookie-Hinweis, aber was nicht allen klar ist, ist, dass diese Cookies nicht gesetzt werden dürfen, bevor der Besucher ausdrücklich zugestimmt hat. Co... robots.txt: Ja
- Cookiebot Cybot A/S Cookiebot scannt Websites auf Cookies und Tracker und wird von Cybot A/S zu Sicherheitszwecken betrieben. robots.txt: Nein
- CookieYesBot CookieYes CookieYesbot ist ein Sicherheits- und Compliance-Scanner, betrieben von CookieYes, um die Implementierung von Cookie-Einwilligungs-Bannern und Compliance-Konfigurationen auf Websites zu überprüfen. robots.txt: Nein
- Detectify Detectify Detectify ist ein Sicherheitsbot von Detectify, der die Sicherheitsstufen von Webanwendungen analysiert. robots.txt: Nein
- Drata Autopilot Drata Der Drata Autopilot bot überwacht kontinuierlich die Sicherheitslage von Kundendomains. robots.txt: Nein
- Google Inspection Tool Google Google Inspection Tool ist ein von Google verwendeter Crawler für Search-Testtools, betrieben von Google. robots.txt: Nein
- Google Safety Google Google Safety bot crawlt für missbrauchsspezifische Zwecke wie das Auffinden von Malware auf Google-Eigenschaften. robots.txt: Nein
- Google Site Verification Google Google Site Verification bot überprüft den Website-Besitz für die Google Search Console, betrieben von Google zu Sicherheitszwecken. robots.txt: Nein
- Google Trust Services (DCV Check) Google Google Trust Services bot für DCV Check, betrieben von Google, zur Zertifikatsvalidierung. robots.txt: Nein
- Jumio Coinbase Digitales ID-Verifizierungs- und Scan-Tool, das vom Coinbase-Team verwendet wird. robots.txt: Nein
- LegalMonster Legal Monster ApS Überwacht Kundenseiten auf die Einhaltung von Cookie- und anderen datenschutzbezogenen Gesetzen robots.txt: Nein
- Let's Encrypt Let's Encrypt Let's Encrypt Bot zur Validierung der Domainkontrolle, betrieben von Let's Encrypt. robots.txt: Nein
- Netcraft Netcraft Der Netcraft-Bot analysiert Webserver-Technologiestacks für den Web Server Survey. robots.txt: Nein
- Project Honeypot Unspam Technologies, Inc Wir verwenden Project Honeypot für IP-Informationen. robots.txt: Nein
- ProjectShield Url Check Google ProjectShield Url Check bot von Google für Sicherheitszwecke, der Schutz vor DDoS-Angriffen bietet. robots.txt: Nein
- Qualys Qualys Qualys bot, betrieben von Qualys, crawlt und testet Webanwendungen auf Schwachstellen. robots.txt: Nein
- Reward Gateway Reward Gateway Mit der iboss Cloud Platform erhält jeder Kunde dedizierte Source-Cloud-IP-Adressen, die der Organisation zugeordnet sind. Dadurch verfügt jeder Datenverkehr, der die globalen, cloudbasierten containerisierten Gateways der Plattform durchläuft, über eine eindeutig zugeordnete IP-Adresse, die der Organisation zugeordnet werden kann... robots.txt: Nein
- Sansec Security Monitor Sansec Security Monitor Sansec Security Monitor ist ein Webcrawler, der die Sicherheit von ecommerce durch die Überwachung von Shops auf schädlichen Code verbessert und so Datenlecks sowie digitales Skimming verhindert. robots.txt: Ja
- SecurityHeaders Security Headers Bietet einen kostenlosen Sicherheits-Scan-Service unter https://securityheaders.com robots.txt: Nein
- Sentry Sentry Sentry ist ein Sicherheits-Bot, der von Sentry betrieben wird und Webseiten auf Verfügbarkeits- und Leistungsprobleme überwacht. robots.txt: Nein
- SiteLock SiteLock SiteLock ist ein von SiteLock betriebener Sicherheits-bot, der Websites auf Malware und schädlichen Code scannt. robots.txt: Nein
- SmarshBot https://central.smarsh.com/s/ SmarshBot ist ein von Smarsh betriebener Sicherheits-bot, der Archivierungslösungen für Compliance-Zwecke bereitstellt. robots.txt: Nein
- Splunk Attack Analyzer Splunk Splunk Attack Analyzer ist ein Sicherheits-Bot, betrieben von Splunk, der URLs mit einem headless Chrome-Browser auf schädliche Inhalte analysiert. robots.txt: Nein
- Sucuri Sucuri Der Sucuri-Bot ist ein Sicherheits-Bot, betrieben von Sucuri, der Websites durchsucht, um nach Malware, Sicherheitsrisiken und Blacklisting-Status zu scannen. robots.txt: Nein
- WebTotemBot WebTotem WebTotemBot ist ein Sicherheitsüberwachungs- und Verteidigungs-Bot von WebTotem, der Webanwendungen und deren Daten schützt. robots.txt: Nein
Sonstige Bots 128
Web-Crawling
- 2checkout 2checkout 2Checkout Payment Platforms Webhooks-Integrationsbot, betrieben von Verifone, zum Benachrichtigen von Websites über Zahlungsvorgänge. robots.txt: Nein
- Accessible Web Bot Accessible Web Accessible Web Bot durchsucht Websites, um Seiten zu entdecken und auf Barrierefreiheitsverstöße zu überwachen. robots.txt: Nein
- Adyen Adyen Adyen-Bot, betrieben von Adyen, sendet HTTP-Anfragen für zahlungsbezogene Ereignisse. robots.txt: Nein
- AfterShip Magento 2 Connector AfterShip AfterShip Magento 2 Connector Bot, betrieben von AfterShip, für Sendungsverfolgung und Lieferaktualisierungen. robots.txt: Nein
- Akismet Akismet Akismet ist ein Spam-Filterdienst, betrieben von Akismet, der Websites vor Kommentar-, Formular- und Textspam schützt. robots.txt: Nein
- Apple App Site Association Apple Der Apple App Site Association Bot, betrieben von Apple, unterstützt Universal Links in nativen iOS-Apps, indem er bestimmte Pfade für gegebene Hostnamen anfordert. robots.txt: Nein
- Artemis Web Reader capjamesg Artemis ist ein ruhiger, unabhängig betriebener, kostenloser Web-Reader. Der Reader stößt häufig auf Cloudflare-Zugriffsblockaden, was das Folgen vieler Websites erschwert. robots.txt: Nein
- Authory Authory Der Authory-Bot besucht Websites, um Artikel im Auftrag von Journalisten und anderen Autoren zu sichern, die den Dienst nutzen. robots.txt: Nein
- Bazqux Bazqux Bazqux Fetcher ist ein vom Nutzer initiierter Bot, betrieben von Bazqux, der RSS/Atom-Feeds und Kommentare für Nutzer sammelt und aktualisiert, die BazQux Reader abonniert haben. robots.txt: Nein
- BestChange Bot BestChange BestChange Bot, betrieben von BestChange, lädt alle 5 Sekunden Wechselkursinformationen von 600 Websites herunter. robots.txt: Nein
- Bibliotheque Nacional de France Crawler Bibliothèque nationale de France Der Bibliotheque Nacional de France Crawler ist ein Bot, betrieben von der Bibliothèque nationale de France, der mit der Erfassung und Bewahrung des nationalen dokumentarischen Erbes beauftragt ist. robots.txt: Nein
- Bitbucket Atlassian Bitbucket Bot, betrieben von Atlassian, für CI/CD und webhooks. robots.txt: Nein
- Bling ERP Bling Bling ERP ist ein Online-ERP-System, betrieben von Bling, das sich mit ecommerce-Plattformen integriert. robots.txt: Nein
- Blogtrottr Blogtrottr Blogtrottr ist ein von Blogtrottr betriebener Dienst, der Updates aus Nachrichten, Feeds und Blogs in die E-Mail-Postfächer der Nutzer liefert. robots.txt: Nein
- BoardGamePrices Bot KP Software Consult ApS BoardGamePrices Bot ist ein Preisvergleichs-Bot, betrieben von KP Software Consult ApS, der Shop-Seiten nach Brettspielpreisen durchsucht. robots.txt: Nein
- Buttondown RSS-Feed-Parser Buttondown Buttondown RSS-Feed-Parser-Bot ruft RSS-Feeds für Buttondown-Newsletter ab. robots.txt: Nein
- Capital One Bot Capital One Capital One Bot crawlt Händler-Websites, um Nutzungsinformationen zu sammeln. robots.txt: Nein
- Channel3Bot Channel3 Channel3Bot ist ein Web-Crawler, betrieben von Channel3, der Produktseiten indexiert, um Traffic zurück auf diese Websites zu lenken. robots.txt: Ja
- ChargeBee ChargeBee ChargeBee-Bot, betrieben von ChargeBee, für Benachrichtigungen zu Zahlungsereignissen via webhooks. robots.txt: Nein
- Cloudflare CSUP Cloudflare Cloudflare CSUP ist ein Bot, der vom Kundensupport von Cloudflare zu Diagnosezwecken verwendet wird. Er ist kein allgemeiner Webcrawler und wird zur Untersuchung technischer Probleme mit Kundenwebsites eingesetzt. robots.txt: Nein
- Cloudflare Validator Cloudflare Cloudflare Validator ist ein von Cloudflare betriebener Bot, der IPs für das Cloudflare Bots Directory überprüft. robots.txt: Nein
- Coinbase Webhooks Coinbase Coinbase Webhooks sind automatisierte Nachrichten, die von der Coinbase-Plattform an den Server eines Nutzers gesendet werden und zur Benachrichtigung über Ereignisse wie den Empfang von Krypto-Zahlungen verwendet werden. robots.txt: Nein
- ConvermaxBot Convermax Corp. ConvermaxBot ist ein Site-Search-Indexer, betrieben von Convermax Corp. robots.txt: Nein
- Critical CSS Bot Critical CSS Der Critical CSS Bot wird von Critical CSS betrieben, einem Dienst für Website-Optimierungen, der Critical CSS generiert, um die Website-Performance zu verbessern. robots.txt: Nein
- cron-job.org cron-job.org cron-job.org ist ein Dienst für die geplante Ausführung von Websites und Skripten, betrieben von cron-job.org. robots.txt: Nein
- EasyBill Import Manager easybill.de EasyBill Import Manager ist ein von easybill.de betriebenes Tool, das Bestelldaten aus externen Systemen mit EasyBill synchronisiert. robots.txt: Nein
- EasyCron EasyCron EasyCron ist ein von EasyCron betriebener Online-Cron-Job-Dienst, der es Nutzern ermöglicht, HTTP-Anfragen zu planen. robots.txt: Nein
- eMoney Advisor eMoney Advisor Der eMoney Advisor bot sammelt Finanzdaten für Planung und Analyse und wird von eMoney Advisor betrieben. robots.txt: Nein
- Epivoz Crawler Techmeme Epivoz Crawler ist ein News-Aggregator-bot von Techmeme, der Nachrichten- und Blogartikel durchsucht, um kurze Zusammenfassungen für Seitenvorschauen verlinkter Inhalte zu erzeugen. robots.txt: Nein
- Exodus Exodus Der Exodus bot, betrieben von Exodus, verwaltet Kryptowährungen wie Bitcoin, Ethereum und Ripple. robots.txt: Nein
- FedReporter Bot for FFIEC Fed Reporter, Inc. FedReporter Bot für FFIEC, betrieben von Fed Reporter, Inc., lädt öffentliche Daten von Bankinstituten herunter. robots.txt: Ja
- Feedbin Feedbin Feedbin ist ein webbasiertes RSS-Reader-Tool, betrieben von Feedbin. robots.txt: Nein
- Feeder Really Simple AB Feeder ist ein cloudbasierter RSS-Reader, betrieben von Really Simple AB, der zum Verfolgen von Online-Quellen und zum Bündeln von Inhalten in ein leicht konsumierbares Leseerlebnis verwendet wird. robots.txt: Ja
- Feedly Feedly Feedly RSS fetcher service, betrieben von Feedly, sammelt und aktualisiert vom Nutzer initiierte Feeds. robots.txt: Nein
- FeedWind Crawler Mikle FeedWind Crawler von Mikle greift auf Feed-Quellen zu, um das Feed-Widget zu aktualisieren. robots.txt: Nein
- FlipboardRSS Flipboard FlipboardRSS-Bot, betrieben von Flipboard, nutzt den RSS-Feed des Besuchers, um Artikel zu entdecken und Zusammenfassungen zu erstellen. robots.txt: Nein
- Freshping freshping Freshping ist ein Website-Monitoring-Bot, betrieben von freshping, der prüft, ob eine Website online ist, und Warnungen sendet, wenn sie ausfällt. robots.txt: Nein
- Google API Google Google API bot zur Zustellung von Push-Benachrichtigungsnachrichten. robots.txt: Nein
- Google Feed Fetcher Google Google Feed Fetcher ist ein von Google betriebener bot zum Abrufen von RSS-Feeds. robots.txt: Nein
- Google Publisher Center Google Google Publisher Center bot, betrieben von Google, ruft von Publishern bereitgestellte Feeds für Google News-Landingpages ab und verarbeitet sie. robots.txt: Nein
- Google Read Aloud Google Google Read Aloud ist ein Dienst von Google, der das Vorlesen von Webseiten mittels Text-to-Speech (TTS) ermöglicht. robots.txt: Nein
- GoPay GoPay.cz GoPay payment gateway http-Benachrichtigungsdienst, betrieben von GoPay.cz robots.txt: Nein
- Hatena Hatena Service-Bot von Hatena für automatische Webseitenbesuche zum Sammeln von Informationen. robots.txt: Ja
- HelloWork HelloWork Group Der HelloWork-Bot aggregiert Stellenangebote für die HelloWork-Plattform und wird von HelloWork Group betrieben. robots.txt: Nein
- HIFIBot HIFI HIFIBot ist ein von HIFI betriebener Bot, einem Finanzdienstleistungsunternehmen für Musiker und professionelle Creator, der zur Automatisierung des Abrufs und der Verarbeitung von Abrechnungen über Tantiemeneinnahmen verwendet wird. robots.txt: Nein
- HSTS preload bot Chromium Der HSTS preload bot, betrieben von Chromium, prüft, ob Links für Chromium vorab geladen werden können. robots.txt: Nein
- HubSpot Crawler Hubspot HubSpot Crawler ist ein von HubSpot betriebener Bot für die Marketing-, Vertriebs- und Kundenservice-Plattform. robots.txt: Nein
- HubSpot Feed Fetcher HubSpot HubSpot Feed Fetcher ist ein von HubSpot betriebener Bot zum Abrufen von Bildern beim Veröffentlichen auf LinkedIn. robots.txt: Nein
- IFTTT RSS Feed Service IFTTT RSS Feed Servuce IFTTT RSS Feed Service ruft RSS-Feeds ab, um benutzerkonfigurierte Automatisierungen zu ermöglichen. robots.txt: Nein
- IndeedJobBot Indeed Indeed's Job-Crawling-Bot, der Stellenanzeigen und stellenbezogene Informationen crawlt robots.txt: Ja
- Innguma Fetcher Innguma Innguma Fetcher ist ein vom Nutzer gesteuerter Feed-Abrufdienst von Innguma, der vom Nutzer initiierte RSS- oder Atom-Feeds sammelt und regelmäßig aktualisiert. robots.txt: Nein
- Innologica Innologica Inoreader ist ein von Innologica betriebener RSS-Feed-Reader, der für Inhaltsaggregation und Entdeckung verwendet wird. robots.txt: Nein
- Instapaper Instant Paper Instapaper ist eine von Instant Paper betriebene App, mit der Menschen Artikel zum späteren Lesen speichern können. robots.txt: Nein
- Integromat Make Über 50 aktive Cloudflare-Nutzer verwenden Integromat, um ihren Workflow zu automatisieren. robots.txt: Nein
- kb.dk_bot Netarkivet Der kb.dk_bot wird von Netarkivet betrieben, einem Teil der Königlichen Dänischen Bibliothek, um das dänische Internet zu Forschungszwecken zu erfassen und zu bewahren. robots.txt: Nein
- Library Of Congress Web Archiving United States Library of Congress Das Library of Congress Web Archive ist ein von der United States Library of Congress betriebener Bot, der archivierte Webinhalte verwaltet, bewahrt und zugänglich macht. robots.txt: Nein
- MagnetmeBot Magnet.me MagnetmeBot ist ein respektvoller Webcrawler, betrieben von Magnet.me, um karrierebezogene Inhalte zu entdecken und zu aktualisieren. robots.txt: Ja
- MainWP Direct Support / Website Managed MainWP bot zur Verwaltung von Websites über das MainWP Control Dashboard. robots.txt: Nein
- Make Platform Make Make ist eine No-Code-Plattform zur Unterstützung von Aufgaben- und Workflow-Automatisierung. robots.txt: Nein
- ManageWP ManageWP ManageWP ist ein Web-Management-Tool, betrieben von ManageWP, das zur Überwachung und Wartung mehrerer WordPress-Websites über ein einziges Dashboard verwendet wird. robots.txt: Nein
- MediaMonitoringBot MediaMonitoringBot MediaMonitoringBot ist ein von MediaMonitoringBot betriebener Webcrawler, der Websites von Nachrichten- und Medienverlagen indexiert. robots.txt: Ja
- Mediatoolkitbot Determ Mediatoolkitbot ist ein von Determ betriebenes Medienüberwachungstool, das das Internet nach benutzerdefinierten Phrasen durchsucht. robots.txt: Ja
- Metorik Metorik Metorik ist ein Analyse- und E-Mail-Automatisierungsdienst-Bot, betrieben von Metorik, der von E-Commerce-Unternehmen verwendet wird, um Daten von Kundenseiten über API-Anfragen zu synchronisieren. robots.txt: Nein
- MirrorWebCrawler MirrorWeb Ltd MirrorWebCrawler ist ein Webarchivierungs-Bot, betrieben von MirrorWeb Ltd, der Archivierungslösungen für den Finanz- und öffentlichen Sektor bereitstellt. robots.txt: Nein
- Modular DS Uniqoders Technologies SL Modular DS ist ein von Uniqoders Technologies SL betriebener Dienst zur Verwaltung von WordPress-Websites über die WP JSON API. robots.txt: Nein
- Mollie Bot Mollie B.V. Mollie Bot, betrieben von Mollie B.V., einem Zahlungsdienstleister, verwendet webhooks, um Händler über Zahlungsaktualisierungen zu informieren. robots.txt: Nein
- MonitoRSS MonitoRSS MonitoRSS ist ein von MonitoRSS betriebener Bot, der RSS-Feeds von durch Cloudflare geschützten Websites abruft, um Nachrichtenartikel an Discord-Server zu liefern. robots.txt: Ja
- MotoMinerBot Motominer MotoMinerBot ist ein Web-Crawling-Bot, betrieben von Motominer, der zum Indexieren von Fahrzeug-Detailseiten verwendet wird. robots.txt: Nein
- Muck Rack Scraper Muck Rack Muck Rack nutzt viele Ansätze zur Quellenerkennung, wie RSS-Feeds, Sitemaps und andere strukturierte Formate robots.txt: Nein
- New York Times Newsgathering The New York Times Der New York Times Newsgathering-Bot sammelt öffentliche, urheberrechtsfreie Daten für die Redaktion. robots.txt: Nein
- NewsBlur NewsBlur NewsBlur RSS News fetcher, betrieben von NewsBlur robots.txt: Nein
- Noibu JS Beautifier Noibu Noibu JS Beautifier ist ein von Noibu betriebener Microservice, der JavaScript-Dateien herunterlädt und formatiert, um Fehler zu beheben. robots.txt: Nein
- Nooshub Nooshub Nooshub ist ein RSS Reader-Bot, betrieben von Nooshub, der RSS/Atom-Feeds abruft. robots.txt: Nein
- Omnisend Omnisend Der Omnisend-Bot prüft die Integration in WooCommerce-Shops und Shopify und wird von Omnisend betrieben. robots.txt: Nein
- OpenRSS OpenRSS OpenRSS ist ein RSS-Feed-Anbieter und -Fetcher von OpenRSS und bietet eine gesündere Alternative zu algorithmischen Feeds. robots.txt: Nein
- OurFamilyWizard OurFamilyWizard Unser OurFamilyWizard-Bot synchronisiert externe iCalendars in Cozi-Kalender. robots.txt: Nein
- Overcast Overcast Radio Overcast ist eine Podcast-Player-Anwendung von Overcast Radio, die RSS-Feeds und Audiodateien von Podcast-Hosting-Servern abruft. robots.txt: Nein
- PayPal PayPal Die PayPal webhooks sind Teil von Paypal's Instant Payment Notification-Nachrichtendienst und benachrichtigen Händler automatisch über Ereignisse im Zusammenhang mit Paypal-Transaktionen. robots.txt: Nein
- PinterestBot Pinterest PinterestBot ist der Web-Crawler von Pinterest, der Inhalte indexiert und Pin-Details ausliest, um Traffic zu steigern und Genauigkeit sicherzustellen. robots.txt: Ja
- Pocket Casts Feed Parser Pocket Casts Ruft Podcast-Feeds zum Abspielen in den Pocket Casts-Apps ab robots.txt: Nein
- Polar Polar Polar ist ein webhook-Dienst von Polar, der HTTP-Anfragen sendet, um Webserver über Abrechnungsereignisse zu informieren. robots.txt: Nein
- PrintFriendly PrintFriendly.com Extrahiert Inhalte, um eine Print Friendly-Version anzuzeigen. Verlage binden typischerweise unseren Button ein - https://www.printfriendly.com/button - damit ihre Besucher eine Print Friendly-Seite ansehen und/oder ein PDF erstellen können robots.txt: Nein
- Pro Sitemaps PRO Sitemaps Pro Sitemaps ist ein Online-Sitemap-Generator-Dienst von PRO Sitemaps, der zum Erstellen und Verwalten von Sitemaps für Websites verwendet wird. robots.txt: Nein
- Protopage Protopage Ltd Protopage ist ein RSS-Reader-Bot von Protopage Ltd, der RSS-Nachrichtenüberschriften indexiert. robots.txt: Nein
- PWABuilder Microsoft PWABuilder ist ein kostenloses Open-Source-Tool von Microsoft, das Entwicklern beim Erstellen von progressive web apps hilft. robots.txt: Ja
- Rakuten Image extraction bot Rakuten Der Rakuten Image-Extraktionsbot, betrieben von Rakuten, ruft Produktbilder von Partnerwebsites ab. robots.txt: Nein
- Razorpay Webhook Razorpay Der von Razorpay betriebene Razorpay Webhook-Bot sendet webhooks an ecommerce-Websites. robots.txt: Nein
- Readable Added Bytes Ltd Readable ist ein Textanalyse-Tool, betrieben von Added Bytes Ltd, mit Fokus auf Klarheit und einfache Sprache. robots.txt: Nein
- Retool Retool Retool-Plattform user agent robots.txt: Nein
- RSS API RSS API (by Tibush GmbH) RSS API ist ein von Tibush GmbH betriebener Bot, der regelmäßig RSS-Feeds anfordert und parst, um Kunden bei der Überwachung von Änderungen zu unterstützen. robots.txt: Nein
- rss2tg_bot Yellow Rubber Duck Consulting rss2tg_bot ist ein Benachrichtigungs-RSS/Atom-Bot für Telegram, betrieben von Yellow Rubber Duck Consulting. robots.txt: Nein
- Scour RSS Bot Scour Scour RSS Bot ist ein personalisierter RSS-Feed-Reader, betrieben von Scour, der AI/ML verwendet, um Inhalte hervorzuheben, die den Interessen der Nutzer entsprechen. robots.txt: Nein
- SendGrid SendGrid SendGrid-Bot, betrieben von SendGrid, sendet E-Mail-Ereignisdaten an Kunden-APIs. robots.txt: Nein
- ServerHunterSpider Server Hunter ServerHunterSpider ist ein von Server Hunter betriebener Bot, der Preis, Spezifikationen und Bestand von Hosting-Tarifen indexiert. robots.txt: Ja
- Shopify-Captain-Hook Shopify Shopify-Captain-Hook ist ein von Shopify verwendetes System zur Zustellung von webhooks. Es sendet automatisierte Nachrichten an den Server eines Nutzers, wenn in dessen Shopify-Store bestimmte Ereignisse auftreten. robots.txt: Nein
- SilktideBot Silktide Scanner für Website-Barrierefreiheit, SEO und Inhaltsqualität robots.txt: Nein
- Skroutz ImageBot Skroutz S.A. Skroutz ImageBot zum Abrufen der einzelnen Produktbilder. robots.txt: Nein
- SkroutzBot Skroutz S.A. Skroutz verwendet den SkroutzBot Web-Crawler zum Herunterladen von XML-Feeds. robots.txt: Nein
- Slackbot Salesforce Slackbot ruft in Slack-Kanälen geteilte URLs ab, um Link-Vorschauen und Unfurls für die Teamkommunikation zu generieren. robots.txt: Nein
- Snipcart Snipcart Snipcart ist eine von Snipcart betriebene E-Commerce-Lösung für Entwickler. robots.txt: Nein
- Spark Shipping Spark Shipping Spark Shipping ist eine eCommerce-Automatisierungssoftware für Händler mit WooCommerce, die Produktdatenintegration, Bestandsabgleich, Bestellübermittlung und Tracking-Updates automatisiert. robots.txt: Nein
- SparkpostBot Bird SparkpostBot ist ein von Bird betriebener Bot zur Automatisierung von E-Mail-Transaktionen bei Webserver-Ereignissen. robots.txt: Nein
- Statabot StataCorp LLC Statabot ist ein von StataCorp LLC betriebener Bot, der nach stata.toc-Dateien sucht und deren Inhalte indexiert. robots.txt: Nein
- StatistikAustria Statistik Bot StatistikAustria-Bot, betrieben von Statistik Bot, um Produktpreise für Österreichs offiziellen Verbraucherpreisindex zu erfassen. robots.txt: Nein
- StatsDroneBot StatsDrone StatsDroneBot ist ein Tool zum Scrapen und Aggregieren von Statistiken für iGaming-Affiliates, betrieben von StatsDrone. robots.txt: Nein
- Stripe Stripe Stripe bot, betrieben von Stripe, sendet Echtzeit-Ereignisdaten an die webhook-Endpunkte der Kunden. robots.txt: Nein
- Stripebot Stripe Stripebot ist ein von Stripe betriebener Web-Crawler, der Daten von Nutzer-Websites für Dienste und die Einhaltung finanzieller Vorschriften sammelt. robots.txt: Nein
- Svix Webhooks Svix Inc. Svix Webhooks ist eine skalierbare webhook-Plattform, betrieben von Svix Inc., mit automatischen Wiederholungen, Signaturprüfung und tiefer Observability. robots.txt: Nein
- Termly Termly Termly bot-Scanner für die Website-Compliance robots.txt: Nein
- Trustly Trustly Group AB Trustly ist ein Zahlungsbot, betrieben von Trustly Group AB, der Händler über Zahlungsstatus benachrichtigt. robots.txt: Nein
- TurnitinBot Turnitin Turnitin.com bietet der Bildungscommunity verschiedene Dienste an. Am bekanntesten ist unser weit verbreiteter und effektiver Plagiatserkennungsdienst. Ein Teil des Plagiatsschutzdienstes beruht auf dem Vergleich von Studentenarbeiten mit Inhalten, die im Internet gefunden werden. Da wir im Voraus nicht wissen... robots.txt: Nein
- Twilio Proxy Twilio, Inc. Twilio Proxy bot, betrieben von Twilio, Inc., zum Senden und Empfangen von SMS, für Anrufe und zur Verwaltung der Kundeninteraktion. robots.txt: Nein
- upday upday GmbH & Co. KG upday ist ein von upday GmbH & Co. KG betriebener News-Aggregator-App-Bot, der Nachrichtenquellen crawlt, um Artikel für Nutzerempfehlungen zu sammeln und zu indexieren. robots.txt: Ja
- VaultPress Automattic VaultPress ist ein WordPress-Backup-Dienst von Automattic, der tägliche und Echtzeit-Backups anbietet. robots.txt: Nein
- videootv Bot Digital Green Crawler zum Extrahieren der neuesten Artikel auf der Website des Publishers (über Feed oder HTML-Parsing), um ein Karussell mit Bildern, Links und Text für unser Native-Ads-Modul zu erstellen und so die Wiederverwertung auf der Website des Publishers zu verbessern. Crawlt nur die Webseiten unseres Publishers. robots.txt: Ja
- WebSpiderMount AspenTechLabs Inc Job-Wrapping-Datenprozessor, der die Verteilung von Jobs von Arbeitgeber-Websites an mehrere Endpunkte wie Jobbörsen, Werbeplattformen, Job-Alerts usw. verarbeitet. robots.txt: Nein
- WMF Citoid Wikimedia Foundation WMF Citoid ist ein Dienst der Wikimedia Foundation, der Zitate aus URLs, DOIs und ISBNs generiert. robots.txt: Nein
- WMF Zotero Translation Server Wikimedia Foundation WMF Zotero Translation Server, betrieben von der Wikimedia Foundation, extrahiert Zitationsdaten mithilfe von Zotero-Translatoren. robots.txt: Nein
- Wordpress Namecheap namecheap Dies ist die wichtigste ausgehende IP für unsere containerisierte WordPress-Plattform, daher handelt es sich wahrscheinlich um viele Varianten von WordPress und potenziell um jede beliebige Domain. robots.txt: Nein
- Worldline Bot Worldline Der Worldline Bot, betrieben von Worldline, verarbeitet Benachrichtigungen und Rückrufe im Zusammenhang mit der Zahlungsabwicklung. robots.txt: Nein
- WorldPay WorldPay Bestätigungsrückrufe für Zahlungen an E-Commerce-Backends robots.txt: Nein
- WOVN Crawler Wovn Technologies, Inc. Wir bieten WOVN.io an, einen Service für Lokalisierungs-Websites. Wir betreiben einen Crawler, um die Quellsprache der Websites unserer Kunden zu ermitteln robots.txt: Nein
- WP Time Capsule WP Time Capsule Unser Plugin WPTimeCapsule ist auf mehr als 30000 WordPress-Seiten installiert. Wenn unsere Backup-Server Anfragen senden, um das Backup auf den WordPress-Seiten auszulösen, werden diese blockiert robots.txt: Nein
- WP Umbrella Bot WP Umbrella WP Umbrella Bot ist ein Tool zur Verwaltung und Wartung von WordPress-Websites, betrieben von WP Umbrella. robots.txt: Nein
- XY Archive Compliance Bot XY Archive Compliance Der XY Archive Compliance Bot ist ein Website-Archivierer, der von XY Archive Compliance für Kunden mit Anforderungen an die Archivierungskonformität betrieben wird. robots.txt: Nein
- Yokoy Group Webhooks Yokoy Group AG Yokoy Group Webhooks ist ein Bot, der von Yokoy Group AG betrieben wird und Anfragen erzeugt, um Ausgaben oder Rechnungen im ERP-System des Kunden zu verbuchen. robots.txt: Nein
- Zapier Zapier Inc. Zapier ist ein Automatisierungstool, das von Zapier Inc. betrieben wird und Informationen automatisch zwischen Web-Apps verschiebt. robots.txt: Nein
- Zendesk Webhook Zendesk Zendesk Webhook-Bot für die Entwicklung des Zendesk-Ticketing-Systems und von Apps. robots.txt: Nein
So entsteht dieser Katalog
Die Profile erstellen wir KI-gestützt aus dem, was Betreiber veröffentlichen: Dokumentation, Hilfeartikel und Bot-Infoseiten. Wo es eine Quelle gibt, verlinkt das Profil darauf, und alles, was der Betreiber nicht dokumentiert, kennzeichnen wir als unbekannt.
Warteliste offen
Sehen Sie, welche dieser Bots Sie besuchen
Can AI See It zeigt, welche Bots aus diesem Katalog Ihre Website besuchen, welche gefälscht sind und was jede Plattform zurückgibt.
Social-Media-Bots 35
Linkvorschau-Generierung