Was ist Crawling (SEO)?

Definition

Crawling im Bereich der Suchmaschinenoptimierung ist die Erfassung von Daten über eine Website, meist durchgeführt von Suchmaschinen.

Information

Crawling ist ein Prozess, bei dem Suchmaschinen-Crawler (Spider / Bots) eine Website scannen und Details zu jeder Seite sammeln: Titel, Bilder, Stichwörter, andere verknüpfte Seiten usw. Außerdem werden dadurch aktualisierte Inhalte im Web, z. B. neue Websites, Unterseiten, Änderungen an vorhandenen Websites und tote Links, entdeckt.

Google beschreibt Crawling wie folgt:

Der Crawling-Prozess beginnt mit einer Liste von Webadressen (URLs) aus früheren Crawls und Sitemaps, die von Website-Eigentümern bereitgestellt wurden. Wenn unsere Crawler diese Websites besuchen, verwenden sie Links auf diesen Websites, um wiederrum andere Seiten zu entdecken. So durchsuchen unsere Crawler das gesamte Internet.

Hier ein Erklärvideo: