Googlebot-News
Googlebot-News wird von BotScope der Kategorie Search zugeordnet. Die Erkennung erfolgt über den User-Agent-String. Das aktuelle Muster:
Googlebot-News
Crawler für Google News. Stellt hohe Anforderungen an Aktualität, klare Publication-Dates, NewsArticle-Schema und schnelles Publikations-Tempo. News-Inhalte werden meist innerhalb von Minuten gecrawlt.
Suchmaschinen-Crawler indexieren öffentlich verfügbare Inhalte für ihre Suchergebnisse. Sie fetchen typischerweise zuerst /robots.txt und respektieren crawl-delay sowie Disallow-Regeln. Hohe Crawl-Frequenz korreliert in der Regel mit guter Sichtbarkeit in den jeweiligen Suchergebnissen.
Sobald Googlebot-News in deinen Logs auftaucht, kannst du in BotScope seine Crawl-Pfade, Status-Codes, IP-Verteilung und die zeitliche Aktivität analysieren — pro Stunde, Tag oder Woche.
robots.txt-Direktive für Googlebot-News
Wenn du Googlebot-News nicht crawlen lassen möchtest, ergänze folgenden Block in deiner /robots.txt. Das wirkt nur bei Bots, die robots.txt respektieren — bösartige Crawler ignorieren es.
User-agent: Googlebot-News Disallow: /
Diese Seite wird mit Detail-Wissen über Googlebot-News weiter angereichert.