Regelwerk › Crawling und Indexierung
Crawling und Indexierung: wie Google Ihre Seiten findet und aufnimmt
robots.txt, noindex, Weiterleitungen, Statuscodes, Sitemap und Co.: die technischen Regeln, nach denen der Googlebot Ihre Website liest.
10 Regeln in diesem Bereich
- G 24robots.txt: was die Datei bei Google regelt und was nicht
Die robots.txt steuert, welche Adressen der Googlebot abrufen darf; sie hält Seiten aber nicht zuverlässig aus den Suchergebnissen heraus.
Quelle zuletzt geändert am 10.12.2025 - G 25noindex: wie Sie Seiten sicher aus der Google-Suche nehmen
Mit noindex im Seitenkopf oder im HTTP-Header nehmen Sie eine Seite aus der Google-Suche; Google muss die Seite dafür abrufen dürfen, sonst sieht es die Anweisung nie.
Quelle zuletzt geändert am 10.12.2025 - G 26Doppelte Seiten und rel=canonical: wie Google die richtige Adresse auswählt
Gibt es dieselbe Seite unter mehreren Adressen, wählt Google eine als Hauptadresse; mit Weiterleitungen und rel=canonical sagen Sie Google, welche das sein soll.
Quelle zuletzt geändert am 10.07.2026 - G 27XML-Sitemap: wann Google eine Sitemap braucht und was hineingehört
Eine Sitemap hilft Google, Ihre Seiten zu finden, garantiert aber keine Aufnahme; kleine, gut verlinkte Websites brauchen sie nicht zwingend.
Quelle zuletzt geändert am 10.12.2025 - G 28Weiterleitungen bei Google: 301, 302 und wann Sie welche nutzen
Dauerhafte Weiterleitungen wie 301 und 308 machen das Ziel zur neuen Hauptadresse, vorübergehende wie 302 behalten die alte; Google empfiehlt Weiterleitungen vom Server.
Quelle zuletzt geändert am 14.04.2026 - G 29HTTP-Statuscodes: wie Google auf 200, 404, 410 und 500 reagiert
Der Statuscode sagt Google, ob eine Seite da ist, umgezogen ist, fehlt oder der Server Probleme hat; falsche Codes führen zu Soft-404-Fehlern oder verschwundenen Seiten.
Quelle zuletzt geändert am 04.02.2026 - G 30Mobile-First-Indexierung: warum Google Ihre Website mit dem Handy liest
Google nimmt die mobile Fassung Ihrer Website für Aufnahme und Ranking; was dort fehlt, fehlt für Google.
Quelle zuletzt geändert am 10.12.2025 - G 31JavaScript und Google: wie der Googlebot Baukasten- und App-Seiten liest
Google kann JavaScript ausführen, aber erst in einem zweiten Schritt und nicht immer sofort; wichtige Inhalte, Links und Angaben sollten schon im HTML stehen.
Quelle zuletzt geändert am 04.03.2026 - G 32URL-Struktur: wie Google sprechende Adressen empfiehlt
Google empfiehlt kurze, lesbare Adressen mit Wörtern statt Nummern, Bindestrichen statt Unterstrichen und so wenigen Parametern wie möglich.
Quelle ohne Änderungsdatum bei Google, gelesen am 07.11.2026 - G 33Links und Linktexte: wie Google Links liest und was einen guten Linktext ausmacht
Google folgt verlässlich nur Links mit a-Element und href; der sichtbare Linktext soll beschreiben, wohin der Link führt, statt „hier klicken“ zu sagen.
Quelle zuletzt geändert am 10.12.2025
Weitere Bereiche im Regelwerk
Hält Ihre Website die Regeln ein?
Der Check misst sieben Stationen in etwa 10 Sekunden, mit Befunden in Klartext.