seobetter.deDie Website-HU für Betriebe

Regelwerk › Crawling und Indexierung

Crawling und Indexierung: wie Google Ihre Seiten findet und aufnimmt

robots.txt, noindex, Weiterleitungen, Statuscodes, Sitemap und Co.: die technischen Regeln, nach denen der Googlebot Ihre Website liest.

10 Regeln in diesem Bereich

  1. G 24
    robots.txt: was die Datei bei Google regelt und was nicht

    Die robots.txt steuert, welche Adressen der Googlebot abrufen darf; sie hält Seiten aber nicht zuverlässig aus den Suchergebnissen heraus.

    Quelle zuletzt geändert am 10.12.2025
  2. G 25
    noindex: wie Sie Seiten sicher aus der Google-Suche nehmen

    Mit noindex im Seitenkopf oder im HTTP-Header nehmen Sie eine Seite aus der Google-Suche; Google muss die Seite dafür abrufen dürfen, sonst sieht es die Anweisung nie.

    Quelle zuletzt geändert am 10.12.2025
  3. G 26
    Doppelte Seiten und rel=canonical: wie Google die richtige Adresse auswählt

    Gibt es dieselbe Seite unter mehreren Adressen, wählt Google eine als Hauptadresse; mit Weiterleitungen und rel=canonical sagen Sie Google, welche das sein soll.

    Quelle zuletzt geändert am 10.07.2026
  4. G 27
    XML-Sitemap: wann Google eine Sitemap braucht und was hineingehört

    Eine Sitemap hilft Google, Ihre Seiten zu finden, garantiert aber keine Aufnahme; kleine, gut verlinkte Websites brauchen sie nicht zwingend.

    Quelle zuletzt geändert am 10.12.2025
  5. G 28
    Weiterleitungen bei Google: 301, 302 und wann Sie welche nutzen

    Dauerhafte Weiterleitungen wie 301 und 308 machen das Ziel zur neuen Hauptadresse, vorübergehende wie 302 behalten die alte; Google empfiehlt Weiterleitungen vom Server.

    Quelle zuletzt geändert am 14.04.2026
  6. G 29
    HTTP-Statuscodes: wie Google auf 200, 404, 410 und 500 reagiert

    Der Statuscode sagt Google, ob eine Seite da ist, umgezogen ist, fehlt oder der Server Probleme hat; falsche Codes führen zu Soft-404-Fehlern oder verschwundenen Seiten.

    Quelle zuletzt geändert am 04.02.2026
  7. G 30
    Mobile-First-Indexierung: warum Google Ihre Website mit dem Handy liest

    Google nimmt die mobile Fassung Ihrer Website für Aufnahme und Ranking; was dort fehlt, fehlt für Google.

    Quelle zuletzt geändert am 10.12.2025
  8. G 31
    JavaScript und Google: wie der Googlebot Baukasten- und App-Seiten liest

    Google kann JavaScript ausführen, aber erst in einem zweiten Schritt und nicht immer sofort; wichtige Inhalte, Links und Angaben sollten schon im HTML stehen.

    Quelle zuletzt geändert am 04.03.2026
  9. G 32
    URL-Struktur: wie Google sprechende Adressen empfiehlt

    Google empfiehlt kurze, lesbare Adressen mit Wörtern statt Nummern, Bindestrichen statt Unterstrichen und so wenigen Parametern wie möglich.

    Quelle ohne Änderungsdatum bei Google, gelesen am 07.11.2026
  10. G 33
    Links und Linktexte: wie Google Links liest und was einen guten Linktext ausmacht

    Google folgt verlässlich nur Links mit a-Element und href; der sichtbare Linktext soll beschreiben, wohin der Link führt, statt „hier klicken“ zu sagen.

    Quelle zuletzt geändert am 10.12.2025

Weitere Bereiche im Regelwerk

Hält Ihre Website die Regeln ein?

Der Check misst sieben Stationen in etwa 10 Sekunden, mit Befunden in Klartext.

Prüfung starten