Ein Sitemap fasst alle auf einer Domain zugänglichen URLs in einer strukturierten Datei zusammen. Für Suchmaschinen fungiert diese Datei als Inventar: Sie listet auf, was existiert, signalisiert, was sich geändert hat, und ermöglicht das Auffinden von Seiten, die ohne sie unsichtbar bleiben würden. Für die Besucher bietet die HTML-Version einen Überblick über die Architektur der Website. Zwei unterschiedliche Funktionen, die oft verwechselt werden und die es wert sind, separat betrachtet zu werden.
Sitemap XML und Crawling: Was Google wirklich nutzt
Die am weitesten verbreitete Verwirrung betrifft die genaue Rolle der Sitemap XML. Viele Inhalte lassen vermuten, dass ein Sitemap die Indizierung automatisch beschleunigt. Die von Google dokumentierte Realität ist differenzierter: Ein Sitemap hilft, URLs zu entdecken, zwingt jedoch nicht zur Indizierung. Die Unterscheidung zwischen Entdeckung, Crawling und Indizierung ist grundlegend.
Ein Googlebot, der eine URL in einem Sitemap findet, kann entscheiden, sie nicht zu crawlen (unzureichendes Crawling-Budget, wahrgenommene Qualität zu niedrig) oder sie zu crawlen, ohne sie zu indizieren (doppelte Inhalte, noindex-Direktive). Das Sitemap umgeht keine dieser Schritte.
Ein weiterer Punkt, der selten erwähnt wird: Das lastmod-Tag ist nur nützlich, wenn es eine tatsächliche Änderung des Hauptinhalts, der strukturierten Daten oder interner Links widerspiegelt. Diese Datum künstlich zu aktualisieren, um Frische zu simulieren, könnte das Vertrauen, das Google der Datei entgegenbringt, verringern. Die Tags priority und changefreq werden von Google nicht mehr berücksichtigt.
Ein konkretes Beispiel ermöglicht es, den Sitemap von Referencement Consulting zu entdecken, der veranschaulicht, wie ein Sitemap XML für eine SEO-orientierte Website strukturiert sein kann.
Sitemap-Benachrichtigung: Das Ende des Pings und aktuelle Alternativen
Bis 2023 gab es einen Endpunkt, der es ermöglichte, Google automatisch über die Aktualisierung eines Sitemaps zu benachrichtigen. Dieser Mechanismus wurde entfernt. Der Hauptgrund: Die Mehrheit der nicht authentifizierten Einreichungen erzeugte Spam und machte das System unzuverlässig.
Die drei aktuellen Einreichungsmethoden sind die Erklärung in der Datei robots.txt, die Einreichung über die Google Search Console und die Nutzung der API Search Console. Jede hat unterschiedliche Einschränkungen.
- Die Erklärung in robots.txt (Zeile Sitemap: gefolgt von der URL der Datei) ist passiv: Google liest sie beim Crawlen der robots.txt, ohne eine Garantie für die Frist.
- Die Google Search Console ermöglicht eine manuelle Einreichung mit visueller Rückmeldung zu Lesefehlern und der Anzahl der entdeckten URLs, erfordert jedoch einen verifiziertem Zugang zur Domain.
- Die API Search Console automatisiert die Einreichung in einem Bereitstellungs-Workflow, was für Websites geeignet ist, deren Inhalte häufig wechseln (E-Commerce, Medien).
Das Protokoll IndexNow, das von Bing und Yandex übernommen wurde, bietet eine Alternative, indem es Suchmaschinen in Echtzeit bei der Veröffentlichung oder Änderung einer Seite benachrichtigt. Google hat IndexNow bis heute nicht übernommen, aber einige CMS und Hosting-Anbieter integrieren es nativ für die unterstützten Suchmaschinen.
HTML-Sitemap und Benutzer-Navigation: Eine oft missverstandene Rolle
Die HTML-Sitemap erfüllt einen anderen Bedarf als die XML. Sie richtet sich an menschliche Besucher und stellt die Struktur der Website in Form einer navigierbaren Seite dar. Ihre Nützlichkeit hängt stark von der Größe und Komplexität der Website ab.
Auf einer Website mit weniger als zwanzig Seiten macht ein gut gestaltetes Menü die HTML-Sitemap überflüssig. Auf der anderen Seite, auf einer Website mit mehreren Hundert Seiten, die in tiefen Kategorien verteilt sind, kompensiert die HTML-Sitemap die Grenzen eines Hauptmenüs, das nicht alles anzeigen kann.
Ein oft übersehener Punkt: Die HTML-Sitemap erstellt interne Links zu Seiten, die möglicherweise verwaist werden. Eine verwaiste Seite (die nur über eine direkte URL zugänglich ist, ohne interne Links, die auf sie verweisen) hat sehr geringe Chancen, von den Suchmaschinen gecrawlt zu werden. Die HTML-Sitemap behebt dieses Problem mechanisch, auch wenn die ideale Lösung eine gut durchdachte Struktur von Anfang an bleibt.
Website-Struktur und Sitemap: Zwei Struktur-Ebenen, die nicht verwechselt werden sollten
Die Struktur bezeichnet die logische Organisation der Inhalte: Kategorien, Unterkategorien, Inhaltsseiten. Das Sitemap, ob XML oder HTML, ist ein Spiegelbild dieser Struktur, kein Ersatz.
Ein Sitemap korrigiert keine schlechte Architektur. Wenn die Kategorien inkohärent sind, wenn die Klicktiefe drei oder vier Ebenen überschreitet, um strategische Inhalte zu erreichen, wird das Sitemap diese Unordnung treu auflisten, ohne sie zu lösen. Das Sitemap dokumentiert die Struktur, es ersetzt sie nicht.
Die Rückmeldungen aus der Praxis gehen diesbezüglich auseinander: Einige SEO-Experten sind der Ansicht, dass die Einreichung eines gut gefilterten Sitemaps (ausschließlich von Seiten mit geringem Wert) ausreicht, um das Crawling zu steuern. Andere glauben, dass ohne ein solides internes Linking das Sitemap nur ein Pflaster bleibt. Die verfügbaren Daten erlauben keine endgültige Entscheidung, da der Einfluss je nach Größe der Website, Veröffentlichungsfrequenz und dem von Google zugewiesenen Crawling-Budget variiert.
Was dokumentiert ist: Ein Sitemap XML akzeptiert bis zu 50.000 URLs pro Datei. Darüber hinaus ist ein Sitemap-Index erforderlich. Für große Websites erleichtert die Segmentierung nach Inhaltstyp (Artikel, Produktblätter, Bilder, Videos) die Diagnose in der Search Console und ermöglicht es, schnell zu erkennen, welche Kategorien unterexploriert sind.
Das Sitemap bleibt ein Diagnosewerkzeug ebenso wie ein SEO-Werkzeug. Die Analyse des Verhältnisses zwischen eingereichten URLs und indizierten URLs in der Search Console gibt einen direkten Einblick in die von Google wahrgenommene Qualität der Website. Eine deutliche Diskrepanz zwischen diesen beiden Zahlen weist auf ein Problem mit Inhalten, Struktur oder technischen Richtlinien hin, das das Sitemap allein nicht lösen kann.
