Deep Crawl

DeepCrawl ist die Eigenschaft von Suchmaschinen, eine Internetpräsenz vollständig, also mit allen erreichbaren Unterseiten, zu indexieren. Dies erfolgt durch spezielle Programme, sogenannte DeepBots, und kann bei großen Websites auch mehrere Stunden dauern. Der Vorteil für den Anwender einer Suchmaschine ist, dass auch Seiten, die zum Beispiel bei einem großen Webshop erst nach vielen Klicks von der Startseite aus erreichbar sind, direkt als Ergebnis der Suchanfrage angezeigt werden.
Voraussetzung für eine erfolgreiche Suche ist eine durchgehende Verlinkung aller Seiten ausgehend von einer (bereits indexierten) Homepage. Wegen des großen zeitlichen Aufwands beim DeepCrawl ist die Tiefe, in der gesucht wird, bei einigen Suchmaschinen eingeschränkt.