Können Crawler Ihre Seiten abrufen?
Erreichbare URLs, korrekte Statuscodes und gültige Regeln entscheiden darüber, ob ein Bot eine Seite überhaupt lesen kann.
Beispiele für Prüfungen
- robots.txt-Regeln und Sitemap
- Statuscodes und Weiterleitungsketten
- Kanonische URLs und Link-Header
- Handhabung nicht vorhandener Seiten (404)
So verbessern Sie dies
Beheben Sie fehlerhafte Links und Redirect-Ketten, geben Sie einen echten 404-Status für fehlende Seiten zurück und deklarieren Sie Canonical-URLs.