Eine Website, die gerade online gestellt wurde, erscheint nicht sofort bei Google. Die Suchmaschine muss sie zunächst entdecken, dann ihre Seiten crawlen und schließlich entscheiden, ob sie diese indexiert. Sie können diesen Prozess nicht erzwingen, aber Sie können ihn erleichtern und verfolgen. Dieser Leitfaden behandelt die technischen Tools: robots.txt, Sitemap und Search Console.
1. Wie Google eine Website findet
Google entdeckt Seiten, indem es Links von anderen Websites oder von Ihren eigenen Seiten aus verfolgt und die von Ihnen gemeldeten Sitemaps auswertet. Jede entdeckte Seite wird anschließend vom Googlebot gecrawlt und bewertet: Eine Seite kann gecrawlt werden, ohne indexiert zu werden, wenn Google sie als wenig nützlich, als Duplikat oder als qualitativ minderwertig einstuft. Daraus ergibt sich eine einfache Regel: Jede wichtige Seite muss über einen Link von einer anderen Seite der Website aus erreichbar sein und darf nicht nur in der Sitemap aufgeführt sein.
2. Die Datei „robots.txt“
Im Stammverzeichnis der Website abgelegt, robots.txt Weist den Robotern die Bereiche an, die nicht erkundet werden sollen. Ein sinnvolles Beispiel:
User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Disallow: /panier/
Sitemap: https://www.monsite.fr/sitemap.xml
robots.txt verhindert das Crawlen, nicht die Indizierung. Eine gesperrte Seite kann dennoch in Google erscheinen – allerdings ohne Beschreibung –, wenn andere Websites darauf verlinken. Um eine Seite aus dem Index zu entfernen, lassen Sie sie weiterhin crawlbar und fügen Sie das Tag <meta name="robots" content="noindex"> : Google muss sie lesen können, um sie zu berücksichtigen.Der häufigste Fehler nach einer Veröffentlichung ist ein Disallow: / das bereits in der Entwicklungsphase vergessen wurde, oder ein Tag noindex auf der gesamten Website verfügbar. Bitte überprüfen Sie beides am Tag der Veröffentlichung: siehe Die SEO-Checkliste vor der Veröffentlichung.
3. Die XML-Sitemap
Die Sitemap listet die Adressen auf, die Sie indexiert haben möchten. Die meisten CMS erstellen diese automatisch; bei einer manuell erstellten Website ist das Format einfach:
<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
<url>
<loc>https://www.monsite.fr/</loc>
<lastmod>2026-09-15</lastmod>
</url>
<url>
<loc>https://www.monsite.fr/services</loc>
<lastmod>2026-09-01</lastmod>
</url>
</urlset>
- Fügen Sie dort bitte nur indexierbare Seiten ein : endgültige Adresse, Antwort 200, keine
noindex, keine Weiterleitungen. Eine Sitemap, die mit Fehlerseiten oder Weiterleitungen gefüllt ist, führt dazu, dass die Suchmaschine das Vertrauen in die Website verliert. - Das Datum
lastmodwird von Google verwendet, sofern sie zuverlässig ist: Aktualisieren Sie sie bitte nur, wenn sich der Inhalt tatsächlich ändert. - Die Tags
priorityundchangefreqwerden von Google ignoriert: Sie brauchen sich darüber keine Gedanken zu machen. - Eine Sitemap ist auf 50.000 URLs und 50 MB begrenzt. Bei größeren Mengen sollten Sie sie aufteilen und die einzelnen Teile in einem Sitemap-Index auflisten.
4. Die Website in der Search Console anmelden
Die Google Search Console ist ein kostenloses Tool, das Ihnen zeigt, wie Google Ihre Website sieht. Fügen Sie eine Domain-Eigenschaft hinzu: Diese deckt alle Varianten ab, sowohl mit als auch ohne www, über HTTP und HTTPS. Die Überprüfung erfolgt durch Hinzufügen eines Eintrags TXT von Google im DNS-Bereich der Domain bereitgestellt: siehe DNS konfigurieren.
Sobald die Domain verifiziert ist, öffnen Sie Sitemaps, geben Sie die Adresse Ihrer Sitemap ein und bestätigen Sie die Eingabe. Nach einigen Tagen werden die Berichte Seiten und Leistung mit Daten gefüllt: indexierte und nicht indexierte Seiten, Suchanfragen der Nutzer, Klicks und Positionen.
5. Eine Seite überprüfen und deren Indizierung beantragen
Fügen Sie die Adresse einer Seite in die Suchleiste oben in der Search Console ein. Das Inspektionstool zeigt an, ob die Seite indexiert ist, wann sie gecrawlt wurde und welche kanonische URL Google ausgewählt hat, und ermöglicht es Ihnen, die URL live zu testen. Bei einer neuen oder grundlegend geänderten Seite wird diese über die Schaltfläche Indexierung anfordern in die Prioritätswarteschlange für das Crawling aufgenommen. Diese Funktion ist auf wenige Anfragen pro Tag beschränkt: Nutzen Sie sie daher nur für wichtige Seiten.
6. Nicht indexierte Seiten verstehen
| Status in der Search Console | Bedeutung und Ansatz |
|---|---|
| Erkannt, derzeit nicht indexiert | Google kennt die Adresse, hat sie jedoch noch nicht gecrawlt. Dies kommt bei neuen Websites häufig vor; verstärken Sie die internen Verlinkungen zu dieser Seite. |
| Erfasst, derzeit nicht indexiert | Google hat den Text gelesen und ihn als nicht relevant eingestuft. Erweitern Sie den Inhalt oder fassen Sie Seiten zusammen, die sich zu sehr ähneln. |
| Doppelte Seite ohne ausgewählte kanonische URL | Mehrere Adressen zeigen denselben Inhalt an. Fügen Sie ein kanonisches Tag hinzu und leiten Sie die Varianten weiter. |
| Durch das noindex-Tag ausgeschlossen | Das ist in Ordnung, wenn es beabsichtigt ist; andernfalls entfernen Sie bitte das Tag. |
| Durch die Datei „robots.txt“ blockiert | Bitte stellen Sie sicher, dass die Regel keine wichtige Seite blockiert. |
| Serverfehler (5xx) | Der Server ist während des Scanvorgangs ausgefallen: Überwachen Sie dessen Verfügbarkeit und Ressourcen. |
Eine langsame Antwortzeit verlangsamt zudem den Crawling-Vorgang: Google crawlt weniger Seiten auf einem Server, der nur langsam antwortet. Siehe PHP-FPM und den Nginx-Cache optimieren.
7. Bing und IndexNow
Denken Sie auch an die Bing Webmaster Tools, mit denen Sie Ihre Websites direkt aus der Search Console importieren können. Bing unterstützt ebenso wie Yandex IndexNow – ein Protokoll, mit dem sich eine neue oder geänderte Seite durch eine einfache Anfrage sofort melden lässt. Mehrere CMS-Erweiterungen integrieren diese Funktion. Google nutzt sie zwar nicht, doch die Kosten betragen null und die Wirkung bei den Suchmaschinen, die sie unterstützen, ist unmittelbar spürbar.
Häufig gestellte Fragen
Wie lange dauert es, bis Google eine neue Website indexiert?
Von einigen Tagen bis zu einigen Wochen. Eine neue Website ohne externe Links wird nur langsam gecrawlt. Reichen Sie die Sitemap in der Search Console ein, beantragen Sie die Indizierung der wichtigsten Seiten und sorgen Sie für einige Links von bestehenden Websites, um die Erfassung zu beschleunigen.
Gewährleistet die Sitemap die Indizierung?
Nein. Sie hilft Google zwar dabei, Ihre Seiten zu finden, doch die Indizierung hängt von der Qualität und dem wahrgenommenen Nutzen der jeweiligen Seite ab. Eine Seite, die zwar in der Sitemap aufgeführt ist, aber weder interne Verweise noch substanziellen Inhalt aufweist, bleibt möglicherweise nicht indiziert.
Muss man eine Seite in der robots.txt-Datei sperren, um sie aus Google zu entfernen?
Nein, das ist kontraproduktiv: Wenn Google die Seite nicht mehr crawlen kann, erkennt es das „noindex“-Tag nicht und behält sie möglicherweise im Index. Lassen Sie die Seite mit einem „noindex“-Tag crawlbar und nutzen Sie das Tool zum Entfernen aus der Search Console, um sie schnell und vorübergehend aus dem Index zu entfernen.
Warum werden meine Seiten als „gecrawlt, derzeit nicht indexiert“ angezeigt?
Google hat diese Seiten geprüft und ist zu dem Schluss gekommen, dass sie im Vergleich zu bereits vorhandenen Inhalten keinen ausreichenden Mehrwert bieten. Die häufigsten Ursachen hierfür sind zu kurze Inhalte, Seiten, die sich stark ähneln, oder eine noch wenig bekannte Website. Erweitern Sie diese Seiten und verlinken Sie sie von Ihren stärksten Seiten aus.










