Website-Indexierung

In diesem Artikel zeigen wir Ihnen, wie Sie die Indexierung Ihrer Website überprüfen können. So stellen Sie sicher, dass Suchmaschinen Ihre Webseite sehen und Nutzer sie über die Suche finden können.

Bei der Indexierung speichert der Webcrawler die Daten über die Plattform in einer speziellen Datenbank. Genau dort suchen Suchmaschinen später nach Ergebnissen, die zu den Anfragen der Nutzer passen. 

Viele verwechseln die Indexierung einer Website mit dem Crawling. Ein Bot kann eine Webseite ziemlich schnell komplett scannen. Die Aufnahme in den Index erfolgt dagegen deutlich langsamer. Außerdem können manche Seiten aus dem Index entfernt werden oder gar nicht erst dort landen.

Um die Indexierung zu beschleunigen, sollten Sie eine Sitemap erstellen und diese in der Search Console einreichen.

Was Sie über die Indexierung wissen sollten:

• sie ermöglicht es Webseiten, in den Suchergebnissen zu erscheinen;
• jede Suchmaschine hat ihren eigenen Index und eigene Bots;
• die Indexierungseinstellungen werden in der Anfangsphase der SEO-Optimierung vorgenommen;
• Google verfügt über mehrere Bots: Googlebot — der Haupt-Bot, Googlebot News — für Nachrichten, Google Mobile — für mobile Versionen usw.

Denken Sie daran! In der Suche werden nur indexierte Websites angezeigt.

Wie die Indexierung einer Website bei Google funktioniert

Der Indexierungsprozess bei Google ist ziemlich komplex. Er besteht aus vielen miteinander verknüpften Phasen.

Wir heben drei Hauptphasen hervor:

1. Erkennung. Der Website-Besitzer sollte eine sitemap.xml-Datei mit allen URLs erstellen und diese an Google übermitteln. Wenn der Webcrawler neue Adressen entdeckt, fügt er sie in die Warteschlange zum Scannen ein.
2. Crawling. Die Suchmaschine durchsucht jede entdeckte Seite, um den Inhalt mit relevanten Suchanfragen abzugleichen. Die gesammelten Informationen fließen in den Index ein.
3. Verarbeitung. Das ist die eigentliche Indexierung bei Google. Dabei werden Webseiten sowie die darauf befindlichen Videos, Bilder und anderen Dateien analysiert und verarbeitet. Im Prozess bestimmt die Suchmaschine, auf welcher Position in den Suchergebnissen Ihre Ressource platziert wird. Die indexierten Links landen im sogenannten Katalog (Index).

All das geschieht mit einem einzigen Ziel — den Nutzern die relevantesten Antworten auf ihre Anfragen zu liefern.

Wie Sie die Indexierung einer Seite überprüfen

1. Suchoperatoren

Fangen wir mit der einfachsten Methode an. Geben Sie dazu die URL der zu prüfenden Seite in die Google-Suchleiste ein. Wenn sie indexiert ist, erscheint sie auf der ersten Position in den Suchergebnissen.

Sie können auch den Befehl «site:» vor dem Link verwenden — dann wird nur innerhalb Ihrer Plattform gesucht:

Wenn die Seite nicht angezeigt wird, ist sie noch nicht an der Reihe zum Scannen:

Um eine vollständige Liste der nicht indexierten URLs zu sehen, können Sie die Google Search Console nutzen.

2. Search Console

Wenn Sie die Indexierung einer Seite bei Google überprüfen möchten, empfehlen wir die Webentwickler-Tools. Kopieren Sie dazu die Adresse der gewünschten Webseite in das Tool «URL-Prüfung».

Die Prüfung in der Search Console liefert Informationen über Indexierungssperren sowie Daten zur kanonischen URL und zum Seitenstatus.

Wichtig! Ein großer Vorteil dieses Tools ist die Möglichkeit, die Indexierung eines einzelnen Links anzufordern, wenn er Änderungen erfahren hat.

3. Drittanbieter-Tools

Die Überprüfung kann auch mit Plugins und Skripten durchgeführt werden, die als Browser-Erweiterungen fungieren und bei Bedarf per Klick auf das Symbol aktiviert werden. 

Zu den beliebtesten Bookmarklets gehören:

• Seo Magic;
• RDS bar;
• SEO-tools.

Detaillierte Informationen nach der Indexierungsprüfung liefern auch Dienste wie Xseo, Seogadget, Netpeak Checker u.a.

Wie Sie die Indexierung Ihrer Website bei Google überprüfen

Um die Website auf Indexierung zu prüfen, müssen Sie zwei einfache Schritte ausführen:

1. Finden Sie heraus, wie viele Seiten Ihre Webressource hat. Dabei helfen Ihnen spezielle Tools — sowohl kostenlose als auch kostenpflichtige. Wenn die Website weniger als fünfhundert Links enthält, reichen kostenlose Programme völlig aus. Zum Beispiel die kostenlose Version von Screaming Frog oder Site Analyzer. Die Anzahl der Webseiten wird im Abschnitt HTML angezeigt.
2. Gehen Sie dann in die Google Search Console und navigieren Sie zum Abschnitt «Abdeckung». Hier sehen Sie, wie viele Seiten «Ohne Fehler» indexiert sind. Beim Vergleich mit den Daten aus Site Analyzer erkennt man, dass die Anzahl nahezu identisch ist. Daraus lässt sich schließen, dass die wichtigsten Webseiten gescannt wurden. Wenn einige im Bereich «Ausgeschlossen» gelandet sind, können Sie auf das Fragezeichen klicken und die Gründe für den Ausschluss herausfinden. Dieser Bericht ermöglicht es auch, die Indexierungshistorie der Website bei Google über einen bestimmten Zeitraum zu verfolgen — 3, 6 Monate oder 1 Jahr.

Auch im Bereich «Abdeckung» findet man häufig Seiten, die gescannt, aber nicht indexiert wurden. Das bedeutet, dass der Bot bereits alle notwendigen Daten gesammelt, sie aber noch nicht vollständig verarbeitet hat. Ein zweiter Grund kann schlechte Inhaltsqualität oder fehlender Content sein. Wenn die Überprüfung nach einiger Zeit zeigt, dass sich die Anzahl der Links mit diesem Status nicht geändert hat, muss die Situation korrigiert werden. Man kann den Weg über die Einzigartigkeit und Ergänzung des Contents gehen oder die Anzahl externer Links auf die Webressource erhöhen.

Wenn Sie mehrere Webseiten gleichzeitig überprüfen müssen, empfehlen wir den beliebten kostenlosen Dienst Index Checking. Damit können Sie über 20 Links in einem Durchgang qualitativ prüfen.

Die Indexierung Ihrer Website können Sie auch online mit dem Tool Ryte überprüfen. Es ermöglicht die Erkennung von Seiten, die von der Indexierung ausgeschlossen sind, sowie solcher mit technischen Problemen.

Mögliche Ursachen für Indexierungsprobleme

Es gibt davon ziemlich viele, aber wir heben die wichtigsten hervor:

• die Website ist nicht erreichbar oder die Indexierung für Suchmaschinen ist gesperrt. In diesem Fall sollten Sie in die CMS-Einstellungen gehen und prüfen, ob nicht ein überflüssiges Häkchen im Feld «Sichtbarkeit für Suchmaschinen» gesetzt ist;
• fehlende oder zu wenige qualitative Backlinks. Sie sind die Wegweiser, die Besucher auf Ihre Website führen. Je mehr davon auf externen Plattformen platziert sind, desto häufiger wird Ihre Ressource gescannt;
• die Plattform wurde lange nicht aktualisiert. Mit Aktualisierungen meinen wir die Erstellung und Veröffentlichung verschiedener Inhalte. Dabei ist Regelmäßigkeit wichtig — veröffentlichen Sie einzigartige Materialien, die für die Nutzer einen Mehrwert bieten. Das hilft garantiert, die Indexierung der Website zu beschleunigen;
• minderwertiger Content — ein weiteres häufiges Problem. Dazu gehören von anderen Quellen kopierte Artikel, Doorway-Pages, duplizierter Content u.a.
• die Ressource ist nicht in den Tools der Suchmaschinen registriert;
• Probleme auf Seiten der Suchmaschine. Ja, auch bei Google gibt es manchmal Probleme. Zum Glück für Website-Besitzer treten sie eher selten auf.

1. Manche Seiten sollte man selbst von der Indexierung ausschließen. Das betrifft Duplikate, veraltete URLs, nicht mehr aktuelle Artikel u.a. Die Indexierung einer Website kann man mithilfe der Datei robots.txt oder des Tags NoIndex sperren.  

Wie Sie die Indexierung Ihrer Website verbessern

1. Eine sitemap.xml erstellen

Diese Datei enthält die URLs aller Seiten. Sie hilft den Suchmaschinen erheblich, die Struktur der Ressource zu verstehen. Jeder neue Link wird automatisch in die sitemap.xml aufgenommen, wodurch die Bots ihn schneller finden.

Nachdem die Datei sitemap.xml erstellt wurde, müssen Sie den Pfad dazu in der robots.txt angeben:

Um Google über Ihre Sitemap zu informieren, fügen Sie den Link zur Sitemap in den Search Console-Tools oder in der Datei robots.txt ein.

So fügen Sie die Sitemap in der Search Console hinzu, um Ihre Website indexieren zu lassen:

• Gehen Sie in die Search Console.
• Fügen Sie Ihre Webressource hinzu oder wählen Sie sie aus der Liste.
• Navigieren Sie zum Abschnitt Crawling>Sitemap-Dateien.
• Wählen Sie «Neue Sitemap hinzufügen», fügen Sie die URL ein und klicken Sie auf «Hinzufügen».

Um nach jeder neuen Seite keine Zeit mit der Aktualisierung der Datei zu verschwenden, können Sie eine dynamische sitemap.xml verwenden. Sie lässt sich einfach mit Plugins (z.B. eignet sich für WordPress hervorragend All in One SEO Pack) oder PHP-Tools einrichten. Die dynamische Datei bleibt immer aktuell, da sie vor jedem Bot-Zugriff neu erstellt wird.

2. Content aktualisieren

Bei der Inhaltsanalyse prüft die Suchmaschine auch die Einzigartigkeit der Seite. Content, der bereits auf anderen Plattformen indexiert wurde, wird vom System als nutzlos betrachtet — also ohne Mehrwert für den Nutzer. Wegen geringer Content-Einzigartigkeit indexiert Google die Website nicht. Wundern Sie sich also nicht, wenn Sie minderwertiges Rewriting oder offensichtliche Plagiate veröffentlichen. Suchmaschinen lassen sich nicht täuschen und betrachten solchen Content als Duplikat. Zur Überprüfung der Einzigartigkeit eignen sich beliebige kostenlose Dienste.

Damit Suchmaschinen Ihre Website mögen, muss sie «lebendig» sein. Wenn einen Monat lang keine neuen Veröffentlichungen erscheinen, hört der Bot auf, sie regelmäßig zu besuchen.

Um die Ressource aktuell zu halten, brauchen Sie:

• regelmäßige Veröffentlichungen — mindestens 1 neuer Beitrag pro Woche;
• Aktualisierung und Erneuerung der Informationen;
• Hinzufügen von Links zu neuem Content auf veralteten Seiten.

Wichtig! Je mehr Aufwand und Zeit in die Erstellung aktueller Inhalte investiert wird, desto höher ist die Wahrscheinlichkeit, dass die Seite in den Google-Index aufgenommen wird.

3. Technische Erreichbarkeit

Stellen Sie sicher, dass der Bot direkten Zugriff auf die CSS- und JS-Dateien hat. Sie helfen dem Indexierer, die Struktur der Webseite besser zu verstehen. Ob die Dienstdateien erreichbar sind, können Sie so prüfen: Google Search Console>Crawling>Abruf wie durch Google. Wir empfehlen, mit diesem Tool die wichtigsten Seiten der Ressource zu überprüfen und zu vergleichen, wie sie für Nutzer und den Suchbot aussehen. Studieren Sie den Bericht sorgfältig. Dabei muss der Bot die Möglichkeit haben, alle Ressourcen Ihrer Domain zu scannen, damit die Website bei Google indexiert wird. 

4. Interne Verlinkung

Damit der Suchbot Lust bekommt, eine neue Webseite zu besuchen, fügen Sie die URLs auf anderen, bereits indexierten Seiten der Website hinzu. Dabei sollte der Content, in dem der Link platziert wird, thematisch ähnlich sein. Am effektivsten sind Verlinkungen von der Startseite und anderen meistbesuchten Seiten. Auch in Blog-Artikeln können Links gesetzt werden, wenn im Kontext thematisch passende Begriffe verwendet werden. Betreiber von Online-Shops können die Indexierung beschleunigen, indem sie Blöcke mit empfohlenen Produkten oder Zubehör hinzufügen.

5. Externe Links

Eine ausgezeichnete Möglichkeit, die Chancen auf Aufnahme in den Index zu erhöhen, ist das Platzieren externer Links. Dabei ist es wichtig, dass die externen Plattformen eine gute Indexierung aufweisen. Wenn der Suchbot dann die Donor-Website besucht, entdeckt er den nicht indexierten Webauftritt und reiht ihn in die Warteschlange ein. Dafür eignen sich hervorragend Nachrichten- oder Informationsportale. Deren Bots können sie mehrmals täglich besuchen. Wenn alles richtig gemacht wird, lassen sich hervorragende Ergebnisse erzielen. Allerdings sollte man bedenken, dass die Indexierung einer Website ein langsamer Prozess ist.

Diese Methode hat vor einigen Jahren breite Verbreitung gefunden — zu der Zeit, als Suchmaschinen begannen, Seiten in sozialen Netzwerken als vollwertige Webressourcen wahrzunehmen. So kann man einfach einen Link setzen und auf den Effekt warten. Wichtig ist dabei, dass es sich um einen direkten Link handelt und nicht um einen Redirect.

Jetzt wissen Sie, wie man eine Website bei Google indexieren lässt und was diesen Prozess beeinflusst. Das Unternehmen Solarweb bietet professionelle Beratung zu allen Fragen der Online-Geschäftsförderung. Rufen Sie uns an: (067) 846-62-75, (093) 350-32-19!