Deep Crawl
Den englischen Begriff Deep Crawl umschreibt man am besten mit Tiefen-Indexierung. Von einigen Suchmaschinen wird diese spezielle Technik angewendet. Dabei werden alle Unterseiten einer Webseite durchsucht und indexiert. Bei Suchmaschinen ohne Deep Crawl werden Unterseiten nur bis zu einer bestimmten Verzeichnistiefe indexiert. Es gibt auch verschiedene Kriterien, nach denen Suchmaschinen beurteilen ob eine Unterseite durchsucht…