Sitemaps
Die Sitemap bündelt alle Links und Unterseiten einer Website, die von der Suchmaschine (bzw. dessen Crawler) verfolgt werden sollen. Im Idealfall zeigt die Sitemap auch die hierarchischen Verknüpfungsstrukturen der Seiten an. Eine Sitemap wird von den Betreibern einer Website zur Verfügung gestellt, um den Besuchern einen heraischen Überblick zu geben, welchen Umfang und welche Struktur ein Webauftritt hat.
Durch das Erstellen und Senden einer XML-Sitemap z.B kann sichergestellt werden, dass Google alle Seiten auf einer Website indexiert , einschließlich solcher URLs, die möglicherweise beim normalen Crawlen unentdeckt bleiben. Das ist besonders für große Internetpräsenzen wichtig, da der Crawler meist nur eine bestimmte Anzahl von Links auf einer Website folgt und somit gewährleistet ist, dass auch alle Unterseiten indexiert werden.
