Technisches SEO

Crawling, Index, Canonical

Technisches SEO ist das Fundament: Wenn Suchmaschinen eine Seite nicht sauber crawlen und indexieren können, hilft der beste Inhalt nichts.

robots.txt

Die Datei unter /robots.txt sagt Bots, was sie crawlen dürfen. Vorsicht: Sie steuert das Crawling, nicht die Indexierung – ein per robots.txt blockierter, aber anderswo verlinkter URL kann trotzdem im Index landen.

User-agent: *
Allow: /
Sitemap: https://example.de/sitemap.xml

sitemap.xml

Eine Liste aller relevanten URLs – die Landkarte der Seite für Bots. Sinnvoll besonders bei vielen Seiten oder tiefer Struktur. Sie sollte nur indexierbare URLs enthalten und in der Search Console eingereicht werden.

Indexierung steuern

  • noindex (Meta-Robots) hält eine Seite aus dem Index – der richtige Weg für Danke-Seiten, Filter-URLs, Dubletten. Wichtig: Die Seite darf dafür nicht per robots.txt blockiert sein, sonst wird das noindex nie gelesen.
  • Canonical (<link rel="canonical">) benennt bei ähnlichem/doppeltem Inhalt die Vorzugs-URL und bündelt die Signale dort.

Ein Inhalt, eine URL

Doppelte Erreichbarkeit verwässert die Bewertung. Deshalb konsequent auf eine Variante festlegen und den Rest weiterleiten:

  • http → https
  • www → ohne www (oder umgekehrt – Hauptsache einheitlich)
  • Trailing-Slash einheitlich

Weiterleitungen als dauerhaftes 301, nicht temporär.

Mobil und schnell

  • Mobile-First: Google bewertet primär die mobile Ansicht.
  • HTTPS ist Pflicht – ohne gültiges Zertifikat kein Vertrauen.
  • Core Web Vitals fließen als Nutzererfahrung ein (siehe eigener Bereich zur Performance).

Sauberes HTML

Sprechende, stabile URLs, eine logische Verlinkung, gültiges Markup und aussagekräftige Statuscodes (200 für ok, 404 für weg, 301 für umgezogen). Je klarer die Technik, desto weniger muss die Suchmaschine raten.

Kurz: crawlbar (robots, Sitemap), eindeutig (Canonical, eine URL), indexierbar (kein versehentliches noindex), mobil und sicher. Das ist das Fundament, auf dem Inhalt wirkt.