Googlebot-News abgeschaltet
von Simon am 28. September 2011
Wie in der deutschen Webmaster-Zentrale zu lesen ist, hat Google den Googlebot-News endgültig abgeschaltet (SEO.at berichtete). Das Crawlen wird nun vom primären Googlebot übernommen.
Wie jede andere Website müssen wir auch die Infrastruktur von Google News gelegentlich aktualisieren. Gleichzeitig möchten wir aber weiterhin eine optimale Kontrolle der Nachrichten-Websites ermöglichen.
Spezielle robots.txt-Einträge für den Googlebot-News werden vom Googlebot übernommen. Damit ist es nach wie vor möglich, Google das Crawlen von Content für Google News zu verbieten, aber weiterhin in der Websuche aufzutauchen.
Google Webmaster-Zentrale: Google News crawlt jetzt mit dem Googlebot
