Eine XML-Sitemap gehört zu den ersten technischen Elementen, die ein Entwickler oder ein SEO-Spezialist auf einer neuen Website einrichtet. Google selbst ist der Ursprung des Protokolls, das entwickelt wurde, um den Crawling-Robotern eine strukturierte Liste von URLs zur Verfügung zu stellen, die entdeckt werden sollen. Die technische Realität dieser Datei ist nuancierter, als es der allgemeine Diskurs vermuten lässt: Das Einreichen einer Sitemap garantiert weder das Crawlen noch das Indizieren der enthaltenen Seiten.
Was Google wirklich mit Ihrer XML-Sitemap macht
Die offizielle Dokumentation von Google Search Central ist in einem Punkt klar: Eine Sitemap ist ein Signal, keine Garantie für die Indizierung. Die Suchmaschine kann entscheiden, die Datei nicht herunterzuladen, bestimmte aufgelistete URLs nicht zu crawlen oder sie selbst nach dem Crawlen nicht zu indizieren.
Diese Unterscheidung ändert die Sichtweise auf die Sitemap. Es handelt sich nicht um eine Abkürzung zu einem besseren Ranking, sondern um ein Werkzeug, das die Entdeckung von Seiten erleichtert, insbesondere von solchen, die schlecht durch interne Links verbunden oder neu veröffentlicht sind.
Unter den verfügbaren Tags im XML-Format haben nicht alle das gleiche Gewicht. Google gibt an, die Tags changefreq und priority zu ignorieren, die lange Zeit als Optimierungshebel betrachtet wurden. Im Gegensatz dazu behält das Tag lastmod seinen Nutzen, vorausgesetzt, das angegebene Datum entspricht einer tatsächlichen und signifikanten Änderung des Inhalts. Ein künstlich aktualisiertes Datum kann das Vertrauen der Suchmaschine in die gesamte Datei verringern.
Um zu beobachten, wie eine Sitemap unter realen Bedingungen funktioniert, zeigt die Sitemap-Seite von Digital Innovators eine Struktur, die die URLs nach Inhaltskategorien organisiert, was es den Robotern ermöglicht, ihre Erkundung zu priorisieren.
Sitemap und Search Console: Ein untergenutztes Diagnosetool
Die meisten Leitfäden konzentrieren sich auf die Erstellung der Sitemap. Der nächste Schritt, die Analyse in der Google Search Console, ist jedoch derjenige, der die meisten umsetzbaren Informationen liefert.
Der Bericht über Sitemaps in der Search Console zeigt zwei Schlüsseldaten an: das Datum der letzten Abfrage der Datei durch Googlebot und die Anzahl der entdeckten URLs. Die Diskrepanz zwischen eingereichten und indizierten URLs zeigt konkrete Probleme auf: schlecht konfigurierte Canonical-Tags, Kettenweiterleitungen, von dem Algorithmus gefilterte Seiten von geringer Qualität oder Zugänglichkeitsfehler (blockierende robots.txt, HTTP-Fehler 4xx/5xx).
Eine Sitemap, die 500 URLs auflistet, während die Search Console nur 120 indiziert, stellt kein Problem der Sitemap dar. Sie zeigt ein Problem der Website auf. Diese diagnostische Lesart rechtfertigt es, die Datei aktuell zu halten und regelmäßig zu konsultieren, anstatt sie einmal zu generieren und zu vergessen.
Die Signale, die im Bericht zu überwachen sind
- Eine Indizierungsrate, die weit unter der Anzahl der eingereichten URLs liegt, weist oft auf doppelte Inhalte oder Seiten hin, die Google als zu ähnlich erachtet.
- Ein altes Datum der letzten Abfrage (mehrere Wochen) kann darauf hindeuten, dass die Sitemap nicht zugänglich ist oder dass die Website zu viele Fehler generiert, damit Googlebot häufig zurückkommt.
- Eingereichte URLs, die als “entdeckt, nicht indiziert” angezeigt werden, deuten auf ein Problem der wahrgenommenen Qualität oder auf ein unzureichendes Crawl-Budget bei großen Websites hin.
Wenn die XML-Sitemap nicht ausreicht, um Ihre Aktualisierungen zu signalisieren
Auf einer Website, die mehrmals täglich Inhalte veröffentlicht oder ändert (Nachrichtenseite, Marktplatz, Verzeichnis), stößt die XML-Sitemap an eine strukturelle Grenze. Die Crawling-Roboter konsultieren die Datei nicht in Echtzeit. Sie lesen sie in ihrem eigenen Tempo, gemäß einem Zeitplan, den der Website-Besitzer nicht kontrolliert.
Microsoft empfiehlt, die Sitemap durch das Protokoll IndexNow zur Echtzeitbenachrichtigung von Suchmaschinen zu ergänzen. Dieses Protokoll, das mit Bing und Yandex kompatibel ist, sendet ein Ping an die Suchmaschine, sobald eine URL erstellt oder geändert wird. Google hat IndexNow nicht übernommen, testet jedoch eigene Benachrichtigungsmechanismen.
Für Websites mit hohem Volumen besteht ein anderer Ansatz darin, die Sitemap in mehrere thematische Dateien zu segmentieren (eine pro Kategorie, eine für Bilder, eine für Videos), die in einer Sitemap-Indexdatei referenziert werden. Diese Segmentierung ermöglicht es, feiner zu identifizieren, welche Abschnitte der Website korrekt gecrawlt werden und welche Probleme aufweisen.
HTML-Sitemap und XML-Sitemap: zwei Dateien, zwei unterschiedliche Funktionen
Die Verwirrung zwischen HTML-Sitemap und XML-Sitemap besteht weiterhin. Die erste ist eine von den Besuchern sichtbare Seite, die die wichtigsten Rubriken der Website in Form von klickbaren Links auflistet. Die zweite ist eine technische Datei, die von Robotern gelesen wird.
Die HTML-Sitemap verbessert die interne Navigation, nicht das Crawlen. Sie funktioniert wie ein Inhaltsverzeichnis für einen Benutzer, der über das Hauptmenü nicht findet, wonach er sucht. Ihr SEO-Nutzen ist indirekt: Sie stärkt das interne Linking, indem sie Links zu tiefen Seiten verteilt.
Die XML-Sitemap hingegen spricht ausschließlich die Suchmaschinen an. Sie kann Metadaten (Änderungsdatum, geschätzte Frequenz, zugehörige Bild-URLs) enthalten, die das HTML nicht überträgt. Die beiden Dateien ersetzen sich nicht gegenseitig. Eine gut strukturierte Website profitiert von beiden, aber XML bleibt das einzige Format, das vom Google-Sitemaps-Protokoll anerkannt wird.
Was in die XML-Datei aufgenommen werden sollte
- Nur die kanonischen URLs, keine Varianten mit Parametern oder umgeleitete Seiten.
- Die Seiten, die Sie indiziert sehen möchten, wobei die durch das noindex-Tag oder robots.txt blockierten ausgeschlossen werden.
- Ein zuverlässiges
lastmod-Tag, das nur bei wesentlichen Änderungen des Inhalts aktualisiert wird.
Die Sitemap bleibt eine technische Datei unter anderen im SEO-Arsenal. Ihr wahrer Wert zeigt sich, wenn man sie als Messinstrument nutzt, anstatt sie als Formalität zu betrachten. Eine gut gepflegte Datei, die in der Search Console eingereicht und regelmäßig analysiert wird, deckt die Schwächen einer Website schneller auf als ein manueller Audit. Sie zu vernachlässigen, bedeutet, auf ein Feedback zu verzichten, das Google kostenlos zur Verfügung stellt.
