So verbessern Sie die Crawlability und Indexierbarkeit Ihrer Website

Obwohl niemand den genauen Suchalgorithmus von Google kennt, gibt es bestimmte Aspekte Ihrer Website, die Sie für eine bessere Crawlability und Indexierbarkeit optimieren können. Die ordnungsgemäße Umsetzung dieser Änderungen in Verbindung mit einer umfassenden SEO-Strategie kann Ihre Chancen erhöhen, in den SERPs gut zu ranken und sich dieser begehrten ersten Position zu nähern.

Crawlability

Sie können so viele auf Keywords ausgerichtete Seiten mit relevantem Inhalt haben, wie Sie möchten, aber sie können nicht viel tun, Sie können jedoch nicht viel tun, wenn sie nicht crawlbar sind. Durch Crawlability kann eine Suchmaschine auf den Inhalt Ihrer Website zugreifen und ihn crawlen, ohne auf einen defekten Link zu stoßen. Wenn der Bot auf zu viele dieser Dateien stößt oder eine robots.txt-Datei sie blockiert, kann der Bot Ihre Site nicht genau crawlen. In diesem Fall fällt es den Suchenden wahrscheinlich schwer, Sie zu finden.

Indexierbarkeit

Die Indexierbarkeit misst andererseits die Fähigkeit von Google, die Seiten Ihrer Website zu analysieren und zum Index hinzuzufügen. Sie können sehen, welche Seiten derzeit indiziert sind, indem Sie „site:“ vor Ihre URL setzen. Hier werden alle Seiten angezeigt, die sich derzeit im Google-Index befinden. Wenn Sie feststellen, dass Seiten fehlen, von denen Sie wissen, dass sie vorhanden sein sollten, überprüfen Sie Ihre technische Suchmaschinenoptimierung, um festzustellen, ob bestimmte Dinge Google daran hindern, sie zu indizieren.

Was macht eine Website gut strukturiert

Eines der größten Dinge, die eine Website gut strukturiert macht, ist eine klare Navigation. Dies erleichtert Google,dass einfacher Ihrer Website durchsuchen und indizieren. Ihre Seitenhierarchie sollte von breit nach schmal gehen. Wechseln Sie nach der Startseite zu übergeordneten Kategorieseiten, Unterkategorieseiten und dann zu einzelnen Seiten. Wenn Sie eine klare Top-Down-Navigation haben, können Benutzer und die Suchmaschinen leichter auf Ihrer Website navigieren und zu der gewünschten Seite gelangen.

Häufige Probleme mit Crawlability

Es gibt viele Faktoren, die sich auf Crawlability einer Website auswirken, aber die Wichtigsten sind der Code und das Hosting.

Codierung:

Wenn Sie Code haben, der nicht für Crawler geeignet ist, können Sie Google wahrscheinlich keine klare Geschichte darüber erzählen, was Sie tun. AJAX-Sites sind berüchtigt dafür, dass sie Code haben, bei dem Bots Probleme beim Crawlen haben.

Hosting:

Aspekte wie Site-Geschwindigkeit und Serverfehler können erhebliche Probleme für die Such-Bots verursachen. Wenn etwas zu lange dauert und eine Zeitüberschreitung auftritt, können die Bots nicht auf den Inhalt Ihrer Site zugreifen.

URL-Strukturen

Stellen Sie sicher, dass Ihre URLs leicht gelesen werden. Ein Benutzer sollte sich an die Site erinnern können, auf der er sich befindet, und ohne große Schwierigkeiten erneut danach suchen können. Wenn wir zum Beispiel der Navigationshierarchie zurückkehren, könnte es ungefähr so aussehen:

Startseiten: example.com
Übergeordneten Kategorieseiten: example.com/services
Unterkategorieseiten: example.com/services/seo
Einzelnen Seiten: example.com/services/seo/local

Die übergeordnete Kategorieseite bietet einen Überblick über alle Dienstleistungen, die ein Unternehmen anbietet. Die Unterkategorieseite behandelt im Allgemeinen einen Dienst (SEO), und die einzelne Seite konzentriert sich auf die Besonderheiten dieses einen Dienstes (lokales SEO). Für E-Commerce-Websites stehen Ihnen die Hauptkategorien, Unterkategorien und dann bestimmte Produkte zur Verfügung.

Navigation

Ihre Navigation sollte jede Seite abdecken, die die Suchmaschine indizieren soll.

Service-Seiten und Produktkategorieseiten sind für SEO besonders wichtig, da sie die Möglichkeit für Keyword-Rankings erhöhen.

Sie sollten über eine klar codierte Navigation verfügen, mit der Crawler Links schnell und einfach folgen können. Überprüfen Sie diese Seiten auf fehlerhafte Links, um sicherzustellen, dass die Bots sie ordnungsgemäß crawlen können.

Sitemaps

Obwohl Sie alle Anstrengungen unternehmen sollten, um eine klare Navigation zu erreichen, können Ihnen auch die Dateien sitemap.xml helfen. Verwenden Sie diese, um sicherzustellen, dass Suchmaschinen alle Ihre indizierbaren Seiten sehen können, falls Ihre Navigation nicht perfekt ist. Abhängig von der Größe und dem Layout Ihrer Website reicht eine sitemap.xml oder sitemap_index.xml aus. Sie können diese Dateien auch an die Google Search Console senden, damit Bots leichter genau das crawlen und indizieren können, was Sie möchten.

Dateien, die Sie indiziert haben sollten

Im Allgemeinen möchten Sie, dass Seiten, Bilder, PDFs und Videos indiziert werden. Der Inhalt Ihrer Seiten bietet Ihnen die größte Möglichkeit, für relevante Keywords in Ihrer Branche zu ranken, da der Crawler diese interpretieren kann. Bots können Bilder und Videos nicht genau „sehen“, aber sie können Alternativtext crawlen. Wenn Sie also Alternativtext hinzufügen, der das Visuelle beschreibt, können Sie Ihre Geschichte weiter erzählen.

Robots.txt

Es gibt viele Seiten, die Google auf jeden Fall auf Ihrer Website crawlen und indizieren soll, damit Sie nach relevanten Keywords in Ihrer Branche ranken können. Es gibt jedoch auch eine Handvoll Dinge, die Suchmaschinen nicht betrachten sollen. Sie können eine robots.txt-Datei verwenden, um Bots anzuweisen, bestimmte Seiten nicht anzusehen. Zu den allgemeinen Dateien, die zu diesen Dateien hinzugefügt werden, gehören Verzeichnisse, Administrator- / Autorenseiten, Tags und Warenkorbseiten.

Worauf Sie achten sollten

Hier und da wird es immer kleine Dinge geben, auf die man hinsichtlich Crawlability und Indexierbarkeit achten muss, aber einige der größten Dinge, die man sich ansehen sollte, sind:

Orphan Pages:

Orphan Pages sind Live-Seiten mit Inhalten, die nicht mit einem anderen Teil Ihrer Website verknüpft sind. Der einzige Weg, um zu ihnen zu gelangen, besteht darin, die URL genau einzugeben. Diese Dateien können nur gefunden werden, wenn sie in der Sitemap enthalten sind. Im Idealfall verlinken Sie es von irgendwo auf Ihrer Site, damit der Crawler es leichter auf die Seite verfolgen kann.

Unindexierte Dateien:

Google kann keine Multimedia-Inhalte wie Flash, Java-Programme und Audio indizieren. Wenn Ihre Website stark von diesen Aspekten abhängt, ist es eine gute Idee, geschriebenen Inhalt in die Seite aufzunehmen, damit Bots zumindest den HTML-Teil crawlen können.

Frames (Rahmen):

Frames sehen zwar gut aus, sind aber nicht unbedingt die besten für SEO. Sie laden Ihre Inhalte, Bilder usw. unabhängig von Ihrer tatsächlichen Website. Dies kann zu erheblichen Problemen bei der Crawlability und Indexierbarkeit führen, weil Bots häufig Probleme beim Lesen dieser Elemente haben. Dies kann auch zu Ladeproblemen für Ihre Benutzer führen.

Ajax:

Das Ajax-Skript verursacht weiterhin Probleme für Suchmaschinen. Verwenden Sie nach Möglichkeit sauber codiertes HTML, um Bots das Crawlen und Indizieren Ihrer Inhalte zu erleichtern.

Es ist wichtig zu beachten, dass dies alles Best Practices sind – es gibt keine einheitliche Lösung für Crawling- und Indexierbarkeit. Wenn Sie jedoch eine solide Onsite- / Offsite-SEO-Strategie haben und diese Aspekte Ihrer Website regelmäßig überprüfen, können Sie sich in den SERPs nach oben arbeiten.