Brauchst du eine XML-Sitemap, damit KI-Crawler deine Inhalte finden?

KI-Crawler finden deine Inhalte auf einem von zwei Wegen: Sie stolpern über interne Links, oder du gibst ihnen eine Landkarte. Eine Sitemap ist diese Landkarte. Ohne sie verbrauchen KI-Bots ihr Crawl-Budget damit, durch die Struktur deiner Website zu wandern und zu verstehen, was wichtig ist. Mit ihr gehen sie direkt zu deinen wichtigsten Seiten. Mit IndexNow fällt die Wartezeit komplett weg. Deine neuen Inhalte erscheinen in KI-Suchergebnissen nach Stunden statt nach Tagen.

Was ist eine XML-Sitemap und warum brauchen KI-Crawler sie?

Eine XML-Sitemap ist eine strukturierte Liste aller Seiten deiner Website, die Crawler finden sollen. Sie enthält die URL der Seite, wann sie zuletzt aktualisiert wurde und wie wichtig die Seite im Vergleich zu anderen auf deiner Website ist. Klassische Suchmaschinen wie Google nutzen Sitemaps, um die Indexierung zu beschleunigen. KI-Crawler sind noch stärker darauf angewiesen.

Wie nutzen KI-Crawler deine Sitemap anders als Google?

Der Crawler von Google lernt die Struktur deiner Website mit der Zeit kennen. KI-Crawler haben diesen Luxus nicht. Viele KI-Plattformen arbeiten mit begrenzten Crawl-Budgets und wechseln ständig zwischen Domains. Sie verlassen sich stark auf deine Sitemap, um zu verstehen, welche Seiten es gibt und welche Priorität verdienen.

Besucht GPTBot deine Website, orientiert er sich in 76 % der Fälle an deiner Sitemap, um zu entscheiden, was er zuerst crawlt. Der Crawler von Perplexity nutzt deine Sitemap, um neue Inhalte zu erkennen: Er ruft Seiten mit aktuellen „lastmod“-Daten viel häufiger ab als ältere Seiten. Claude nutzt die Struktur deiner Sitemap, um eine semantische Karte der Themen deiner Website aufzubauen.

Warum zählt die Struktur der Sitemap für die KI-Sichtbarkeit?

Eine schlecht strukturierte Sitemap sendet widersprüchliche Signale. Hat jede Seite dieselbe Priorität, gehen KI-Crawler davon aus, dass nichts besonders wichtig ist. Enthält deine Sitemap veraltete Seiten oder noindex-URLs, verschwenden Crawler Zeit mit Inhalten, die nie in Antworten erscheinen. Eine gut strukturierte Sitemap mit sauberer Prioritätshierarchie erhöht, wie oft deine Inhalte zitiert werden, um bis zu 41 %.

Wie strukturierst du deine XML-Sitemap für die KI-Entdeckung?

Die Struktur der Sitemap zählt für KI mehr als für klassisches SEO. Die Reihenfolge, in der du Seiten auflistest, die Priorität, die du vergibst, und das, was du aufnimmst, beeinflussen alle, wie schnell KI-Systeme deine besten Inhalte finden und zitieren.

Was gehört tatsächlich in deine Sitemap?

Nimm nur Seiten auf, die in KI-Suchergebnissen erscheinen sollen. Das sind: deine veröffentlichten Inhalte, aktualisierte Artikel, Pillar-Seiten, Vergleichsbeiträge und jede Seite, die ChatGPT oder Perplexity zitieren sollen. Schliesse Seiten mit noindex-Tags aus: KI-Crawler sollten sie ohnehin überspringen, und sie in der Sitemap zu lassen, verschwendet nur Crawl-Budget.

Entferne veraltete Seiten, alte Blogbeiträge, die du nicht pflegst, private Seiten hinter einer Anmeldung und PDF-Dateien, ausser du willst ausdrücklich, dass sie gecrawlt werden. Eine saubere Sitemap signalisiert KI-Systemen, dass jede aufgeführte URL ihre Aufmerksamkeit verdient.

Wie legst du die Priorität in deiner Sitemap fest?

Die Priorität sagt KI-Crawlern, welche Seiten am wichtigsten sind. Sie wird auf einer Skala von 0,0 bis 1,0 gesetzt. Die wirksamsten Prioritätsstrukturen folgen diesem Muster:

Höchste Priorität (0,9 bis 1,0): deine Pillar-Seiten

Pillar-Seiten und deine wichtigsten Inhalte bekommen Priorität 1,0. Das sind die Seiten, die KI-Systeme am ehesten zitieren sollen. Hast du 100 Seiten auf deiner Website, sollten 10 bis 15 auf Priorität 1,0 stehen: deine Eckpfeiler-Inhalte, deine leistungsstärksten Seiten, deine autoritativen Leitfäden.

Mittlere Priorität (0,7 bis 0,8): unterstützende Inhalte

Blogbeiträge, Anleitungen und unterstützende Artikel bekommen Priorität 0,7 bis 0,8. Sie sind wichtig, aber zweitrangig gegenüber deinen Pillar-Inhalten. Diese Stufe macht oft 20 bis 30 % deiner Sitemap aus.

Niedrige Priorität (0,4 bis 0,6): zeitlose Inhalte und Nachschlagewerke

Glossareinträge, FAQ-Seiten, ergänzende Artikel und ältere zeitlose Inhalte bekommen Priorität 0,4 bis 0,6. Sie sind wertvoll, brauchen aber keine sofortige Crawl-Aufmerksamkeit. Alles andere gehört hierher: Es macht die übrigen 50 bis 60 % deiner Sitemap aus.

Warum erhöht diese Hierarchie die Zitate?

Verteilen KI-Crawler ihr Crawl-Budget, rufen sie Seiten mit hoher Priorität zuerst und am häufigsten ab. Inhalte mit Priorität 1,0 werden früher gecrawlt, bleiben im Index des KI-Systems aktueller und erscheinen häufiger in Antworten. Websites mit sauberer Prioritätshierarchie sehen 41 % mehr Zitate bei Seiten mit hoher Priorität als Websites mit flacher Priorität (bei denen alles 0,5 hat).

Wie setzt du lastmod-Daten richtig?

Das lastmod-Datum sagt KI-Crawlern, wann du eine Seite zuletzt aktualisiert hast. Besonders Perplexity crawlt Seiten mit aktuellen lastmod-Daten bis zu 3,2-mal häufiger als ältere Seiten. Genauigkeit ist hier wichtig: Falsche Daten verwirren Crawler.

Setze lastmod nur, wenn du den Inhalt der Seite wirklich aktualisiert hast. Ändere es nicht von Hand. Nutze automatische Systeme, die lastmod danach setzen, wann dein CMS die Datei zuletzt gespeichert hat. Aktualisierst du eine Seite und das System erneuert lastmod nicht automatisch, erfahren deine Crawler nicht, dass sie frisch ist.

In welchem Format sollte deine Sitemap sein?

Nutze das XML-Format: Es ist der Standard, den alle modernen Crawler erkennen. HTML-Sitemaps funktionieren für menschliche Besucher, aber Crawler überspringen sie. Du brauchst eine echte XML-Sitemap-Datei.

Was, wenn du mehr als 50.000 URLs hast?

XML-Sitemaps haben ein Limit: 50.000 URLs und 50 MB pro Datei. Überschreitet deine Website das, erstelle einen Sitemap-Index. Ein Sitemap-Index ist eine Hauptdatei, die mehrere Sitemap-Dateien auflistet.

Websites mit Tausenden URLs profitieren von segmentierten Sitemaps: eine für Blogbeiträge, eine für Produktseiten, eine für Dokumentation, eine für Leistungsseiten. Die Segmentierung erreicht 67 % höhere Crawl-Abschlussraten als eine einzige riesige Sitemap. KI-Crawler verarbeiten weniger Seiten, wenn sie eine einzelne 50-MB-Datei bewältigen müssen.

Brauchst du mehrere Sitemaps, wenn du weniger als 50.000 URLs hast?

Nein. Eine Sitemap reicht aus. Aber auch bei einer kleineren Website hilft die Segmentierung. Erstelle getrennte Sitemaps für verschiedene Inhaltstypen, wenn du mehr als 10.000 Seiten pflegst. Das hilft KI-Systemen, die Struktur deiner Website zu verstehen.

Wo sollte deine Sitemap liegen und wie reichst du sie ein?

Deine Sitemap sollte im Stammverzeichnis deiner Domain liegen: `www.example.com/sitemap.xml`. Alle Crawler schauen zuerst dort nach. Du musst sie ausserdem in deiner robots.txt-Datei angeben, damit Crawler sie zuverlässig finden.

Was muss die robots.txt für Sitemaps enthalten?

Füge deiner robots.txt-Datei eine Zeile hinzu:

Sitemap: https://www.example.com/sitemap.xml

Das sagt jedem Crawler, ob Google, der Crawler von ChatGPT, Perplexity oder Claude, genau, wo deine Sitemap liegt. So entdecken Crawler deine Sitemap am schnellsten, statt danach suchen zu müssen.

Musst du deine Sitemap bei jeder KI-Plattform einzeln einreichen?

Du reichst deine Sitemap nicht bei einzelnen KI-Plattformen ein. Aber alle suchen an denselben zwei Stellen danach: in deiner robots.txt-Datei und am Standardort /sitemap.xml. Solange du sie in der robots.txt angibst, findet jeder Crawler sie automatisch.

Was ist IndexNow und warum ist es für KI wichtig?

IndexNow ist ein Protokoll, mit dem du Suchmaschinen und KI-Plattformen im Moment der Veröffentlichung oder Aktualisierung einer Seite Bescheid gibst. Statt Tage zu warten, bis Crawler vorbeikommen und neue Inhalte entdecken, schickst du eine sofortige Benachrichtigung. Deine Seiten erscheinen nach Stunden statt nach Wochen in KI-Suchergebnissen.

Wie funktioniert IndexNow?

Du erzeugst einen API-Schlüssel, legst ihn in einer Textdatei im Stammverzeichnis deiner Domain ab und richtest dein CMS so ein, dass es bei jeder Veröffentlichung einer Seite eine einfache HTTP-Anfrage an IndexNow sendet. Die Anfrage enthält die URL der Seite und deinen API-Schlüssel. Teilnehmende Suchmaschinen erhalten die Benachrichtigung sofort.

Das ist der ganze Ablauf. Du reichst keine Sammeldatei ein. Du sendest einen Ping in Echtzeit, der sagt: „Ich habe gerade diese URL veröffentlicht, bitte prüfe sie jetzt.“

Welche Suchmaschinen unterstützen IndexNow?

Bing, eine russische Suchmaschine und mehrere kleinere regionale Suchmaschinen unterstützen IndexNow offiziell. Google unterstützt IndexNow nicht: Google bevorzugt klassische Sitemaps und hat andere Indexierungssysteme.

Bei KI-Plattformen wächst die Verbreitung von IndexNow. Bing liefert die Grundlage für Copilot von Microsoft, deshalb ist IndexNow für die Sichtbarkeit in Copilot wichtig. Andere Plattformen nutzen IndexNow zunehmend als Signal für Aktualität und die Verfügbarkeit von Inhalten in Echtzeit.

Warum IndexNow nutzen, wenn die meisten KI-Plattformen es nicht offiziell unterstützen?

IndexNow etabliert ein Muster der Veröffentlichung in Echtzeit, das Suchmaschinen erkennen. Sehen Bing und andere, dass du konsequent über IndexNow veröffentlichst, priorisieren sie deine Inhalte. Dieses Signal beeinflusst die Crawl-Frequenz über Plattformen hinweg. Ausserdem ergänzen neue Plattformen regelmässig die Unterstützung für IndexNow: Wer der Verbreitung voraus ist, hat Vorteile.

Wie richtest du IndexNow ein?

Die Umsetzung dauert 15 Minuten, wenn dein CMS eine eingebaute Unterstützung hat, oder ein paar Stunden, wenn du eigenen Code ergänzen musst.

Schritt 1: Erzeuge deinen IndexNow-API-Schlüssel

Besuche IndexNow.org, gib deine Domain ein und erzeuge einen eindeutigen API-Schlüssel. Halte diesen Schlüssel privat: Er belegt, dass dir die Domain gehört und du URLs einreichen darfst.

Schritt 2: Erstelle die Schlüsseldatei und bestätige den Besitz

Erstelle eine Textdatei, die nach deinem API-Schlüssel benannt ist: `{API-key}.txt`. Lade sie in das Stammverzeichnis deiner Domain hoch, sodass sie unter `https://www.example.com/{API-key}.txt` liegt. Das belegt gegenüber IndexNow, dass dir die Domain gehört.

Schritt 3: Richte automatische Einreichungen in deinem CMS ein

Konfiguriere dein CMS so, dass es bei jeder Veröffentlichung oder Aktualisierung einer Seite eine HTTP-POST-Anfrage an IndexNow sendet. Die Anfrage sollte die URL der Seite und deinen API-Schlüssel enthalten. Die meisten Plattformen, auch der Website-Builder von WEMASY, haben Plugins oder native Integrationen, die das automatisch erledigen.

Schritt 4: Teste mit einer manuellen Einreichung

Veröffentliche eine Testseite und reiche die URL manuell über die Plattform von IndexNow ein. Prüfe, dass IndexNow die Einreichung akzeptiert und eine Erfolgsantwort zurückgibt. Das bestätigt, dass deine Einrichtung funktioniert.

Wie oft solltest du deine Sitemap aktualisieren?

Aktualisiere deine Sitemap jedes Mal, wenn du neue Inhalte veröffentlichst oder bestehende Inhalte deutlich überarbeitest. Automatische Systeme erledigen das: Dein CMS sollte die Sitemap automatisch neu erzeugen, sobald sich eine Seite ändert.

Was ist der Unterschied zwischen Sitemap-Updates und IndexNow-Einreichungen?

Deine Sitemap ist statisch: Sie ist eine Momentaufnahme des aktuellen Zustands deiner Website, die Crawler regelmässig prüfen. IndexNow ist dynamisch: Es ist eine sofortige Benachrichtigung, dass sich etwas geändert hat. Nutze beides zusammen: IndexNow weist Crawler an, sofort nachzusehen, und deine Sitemap liefert den Kontext, den sie brauchen, um deine gesamte Websitestruktur zu verstehen.

Solltest du deine Sitemap von Hand aktualisieren?

Nein. Manuelle Updates erzeugen Fehler. Lass dein CMS die Sitemap automatisch neu erzeugen. Nutzt du kein System, das Sitemaps automatisch erzeugt, nimm kostenlose Tools oder Plugins, die das für dich erledigen. Manuelles Bearbeiten von XML führt zu Inkonsistenzen, die Crawler verwirren.

Wie passen Sitemaps und IndexNow in deine umfassendere technische GEO-Strategie?

Sitemaps und IndexNow sind Grundlagen. Sie lösen ein einziges Problem: Crawler effizient zu deinen Inhalten zu bringen. Sie arbeiten aber in einem grösseren System.

Sitemaps ersetzen keine gute Websitearchitektur

Eine Sitemap hilft Crawlern, Seiten schneller zu finden, aber eine saubere Informationsarchitektur macht Seiten überhaupt erst auffindbar. Deine interne Verlinkung sollte Crawler ganz natürlich zu deinen wichtigen Inhalten führen. Die Sitemap verstärkt das, sie ersetzt es nicht.

IndexNow behebt keine langsame Veröffentlichung von Inhalten

IndexNow benachrichtigt Crawler sofort, wenn neue Inhalte bereit sind. Braucht dein CMS aber Tage, um eine Seite zu veröffentlichen, nachdem du sie geschrieben hast, kann IndexNow nicht helfen. Das Tempo bei Inhalten zählt. Veröffentliche konsequent, und IndexNow sorgt dafür, dass KI-Systeme sofort davon wissen.

Was kommt nach Sitemaps und IndexNow?

Können Crawler deine Inhalte effizient finden und abrufen, ist die nächste Ebene, deine Inhalte zitierfähig zu machen. Das umfasst: strukturierte Daten (Schema-Markup), eine klare Informationshierarchie und Inhalte, die direkt die Fragen beantworten, die KI-Systeme stellen. Mehr dazu findest du in den Kapiteln zu Schema-Markup und Inhaltsstruktur.

Häufig gestellte Fragen