Index-Management bezeichnet die Kontrolle darüber, welche URLs einer Website in den Index einer Suchmaschine aufgenommen werden. Die Werkzeuge sind Meta-Robots-Angaben und X-Robots-Header (index/noindex), Canonical-Tags, die bei Duplikaten die Hauptversion benennen, und die XML-Sitemap als Liste der erwünschten URLs. Die Leitfrage lautet: Sind die wichtigen URLs indexierbar — und nur die?
Wie funktioniert Index-Management?
Ein Crawler ruft eine Seite ab und prüft die Robots-Anweisungen. Steht die Seite auf Noindex, wird sie nicht in den Index aufgenommen und kann in keiner Suche erscheinen. Trägt sie ein Canonical auf eine andere URL, wird die andere als Hauptversion behandelt. Fehler in diesen Angaben sind still: Eine Seite mit versehentlichem Noindex oder falschem Canonical fällt einfach aus dem Index, ohne dass jemand eine Fehlermeldung sieht.
Für die KI-Suche heißt das: Was nicht im Index von Google oder Bing ist, kann im Initial Retrieval nicht gefunden werden — die Systeme greifen auf genau diese Indizes zu.
Warum ist Index-Management für die KI-Sichtbarkeit wichtig?
Weil die Kette vor jeder KI-Antwort mit der Indexierung beginnt: Kein Index, kein Ranking, kein Retrieval, kein Grounding. Zwei Regeln fassen es zusammen: Noindex nur für Inhalte, die nicht in KI-Antworten erscheinen sollen. Canonical-Tags nur für notwendigen Duplicate Content — nicht als Ersatz für saubere URL-Strukturen.
Was bedeutet das für Ihre Website?
Gehen Sie Ihre wichtigen URLs durch und prüfen Sie Robots-Angaben, Canonicals und den Indexstatus in Google und Bing. Achten Sie besonders auf Bing: ChatGPT holt seine Kandidaten dort, und viele Websites haben Bing nie geprüft. Halten Sie die Sitemap aktuell und auf indexierbare URLs beschränkt, damit sie als verlässliche Liste funktioniert (Crawl-Budget).