Webseiten-Crawlability verbessern
von Simon am 29. März 2010
Eric Kubitz macht sich bei seo-book.de Gedanken zum Thema Indexierung mit “erweiterter Crawlability”:
Ganz am Anfang steht da der “Scheduler”, sozusagen der Vorarbeiter des Robots, der dessen Zeit einteilt. Vermutlich ist die Zeitmenge, die der Robot pro Webseite hat, abhängig von ihrer Autorität (und damit wieder von den Backlinks). Was er aber in dieser Zeit zu sehen bekommt, haben wir selber in der Hand.
Im weiteren Verlauf des Artikels erklärt Eric, wie man Suchmaschinenbots in möglichst kurzer Zeit möglichst viele relevante Seiten zeigen kann und welche Faktoren dabei eine Rolle spielen.
Blogartikel: Erweiterte Crawlability: Don’t waste robot-time!
