Zum Hauptinhalt springen

XML-Sitemap- und Robots.txt-Audit

Optimierung der XML-Sitemap und Robots.txt für eine bessere Indexierung

XML-Sitemap- und Robots.txt-Audit

Suchmaschinen den richtigen Weg durch Ihre Website zeigen

Zwei kleine Dateien lenken Suchmaschinen durch Ihre Website. Die XML-Sitemap ist eine Liste der Adressen, die gefunden werden sollen. Die robots.txt sagt Suchprogrammen, welche Bereiche sie auslassen sollen. Joomla liefert eine Vorlage für die robots.txt mit, eine XML-Sitemap aber nicht; dafür braucht es eine Erweiterung, und die ist nicht immer gut eingestellt.

Wir prüfen, ob die Sitemap erreichbar ist, in der robots.txt und der Google Search Console angemeldet ist und sich bei neuen Beiträgen selbst aktualisiert. Wir gleichen ab, ob alle wichtigen Seiten darin stehen und ob sie Adressen enthält, die weiterleiten, fehlen oder nicht in die Suche sollen. In der robots.txt suchen wir nach Sperren, die zu viel verbieten: ein vergessenes „Disallow: /“ aus der Entwicklung oder alte Regeln, die Bilder, CSS und Skripte aussperren, sodass Google die Seiten nicht richtig darstellen kann.

Sie erhalten eine korrigierte robots.txt, eine Empfehlung für die Sitemap und auf Wunsch die Anmeldung in der Search Console mit Ihrem Zugang.

  • Suchmaschinen erhalten eine saubere Liste aller Seiten, die gefunden werden sollen.
  • Versehentliche Sperren in der robots.txt werden entfernt.
  • Google kann Ihre Seiten mit Bildern, CSS und Skripten richtig darstellen.
  • Neue Beiträge kommen von selbst in die Sitemap, wenn die Erweiterung richtig eingestellt ist.
Positiv
Suchmaschinen finden neue und wichtige Seiten schnell und verschwenden keine Zeit mit Unwichtigem.
Negativ
Eine einzige falsche Zeile in der robots.txt kann ganze Bereiche Ihrer Website für Suchmaschinen sperren.

Das klären wir vorab

Diese Fragen gehen wir im ersten Gespräch mit Ihnen durch – damit das Angebot genau passt.

  • Ist eine XML-Sitemap vorhanden und aktuell?
  • Werden alle wichtigen Unterseiten in der Sitemap aufgeführt?
  • Gibt es Probleme mit der Sitemap in der Google Search Console oder anderen Tools?
  • Ist die robots.txt korrekt konfiguriert, um das Crawling zu steuern?
  • Gibt es in der robots.txt Disallow-Anweisungen, die möglicherweise nicht beabsichtigt sind?
  • Wurden alle Änderungen an der Webseite in der Sitemap reflektiert?
  • Wie häufig wird die Sitemap aktualisiert?
  • Gibt es spezifische Anweisungen für verschiedene Suchmaschinen-Crawler?
  • Werden Sitemap und robots.txt regelmäßig überprüft?
  • Gibt es Rückmeldungen von Suchmaschinen bezüglich Problemen mit diesen Dateien?

Sitemap und robots.txt prüfen

Wir prüfen beide Dateien und zeigen, ob Suchmaschinen die richtigen Seiten finden.

FAQ

Häufig gestellte Fragen
Erstellt Joomla eine XML-Sitemap selbst?
Nein, dafür braucht es eine Erweiterung. Wir prüfen, ob Ihre vorhandene Lösung zuverlässig arbeitet, oder schlagen eine passende vor.
Kann die robots.txt Seiten aus Google entfernen?
Nicht zuverlässig. Sie verbietet nur das Durchsuchen; eine gesperrte Seite kann trotzdem im Index stehen, wenn andere auf sie verlinken. Zum Ausblenden dient die Angabe „noindex“ an der Seite selbst.
Gehören Seiten mit Anmeldung in die Sitemap?
Nein. Seiten nur für angemeldete Nutzer, Danke-Seiten und Druckansichten haben in der Sitemap nichts zu suchen. Wir prüfen, ob Ihre Sitemap solche Adressen enthält.
Wie gehen Sie bei mehrsprachigen Websites vor?
Jede Sprachversion gehört in die Sitemap, auf Wunsch mit Verweisen zwischen den Sprachen. Wir prüfen, ob alle Sprachen vollständig und mit den richtigen Adressen enthalten sind.
Was ist nach einem Umzug zu beachten?
Die alte Sitemap und Sperren aus der Entwicklung müssen weg, und die neue Sitemap muss in der Search Console angemeldet werden. Wir prüfen beides nach dem Umzug.
Habt Ihr dazu etwas im Blog geschrieben?
Wenn ja finden Sie eine Auflistung der letzten 5 Beiträge aus unserem Blog zu diesem Thema hier.
Die richtige Frage nicht dabei?
Invalid Input
Invalid Input
Invalid Input
Captcha
Ungültige Eingabe