Skip to main content

Indexierung von Unterseiten durch Deep Crawl

Deep Crawl ist die Fähigkeit eines Suchmaschinen Crawlers selbstständig auch Unterseiten einer Webseite nach Inhalten zu durchsuchen und diese zu indexieren. Bei einigen Suchmaschinen ist die Indexierung von Inhalten auf eine bestimmte Verzeichnistiefe der Internetseite begrenzt. Ein solcher Deep Crawl kann bei umfangreichen Internetseiten mehrere Stunden in Anspruch nehmen.

Ziel eines Deep Crawls ist es, die Unterseiten einer Webseite als eigenständige Seiten zu bewerten und zu indexieren. So können Unterseiten u.a. auch einen eigenen PageRank erreichen.