Indexierte Webseiten

Indexierte Webseiten sind Webseiten, die zum Index einer Suchmaschine hinzugefügt wurden. Eine Webseite muss indexiert werden, damit sie später überhaupt in den Suchergebnissen ausgegeben werden kann. Vor der Indexierung muss eine Webseite aber zunächst vom Crawler erfasst werden. Im Zuge dessen findet auch eine erste Bewertung der Webseite statt. Diese Bewertung entscheidet dann darüber, bei welchen Suchbegriffen und auf welcher Position die Webseite in den Suchergebnissen angezeigt wird.

Wie schnell und in welchem Umfang eine Webseite indexiert wird, hängt vor allem davon ab, wie die Webseite strukturiert ist. Denn nur wenn der Crawler die Webseite problemlos navigieren kann, wird er es schaffen, einen Großteil der Unterseiten in kurzer Zeit zu crawlen und damit zum Index hinzuzufügen. Eine Webseite, die nur unzureichend gecrawled werden kann, wird auch nur sehr oberflächlich indexiert werden. Die Chancen, so ein gutes Ranking zu erzielen, stehen in diesem Fall schlecht. Glücklicherweise gibt es einige Möglichkeiten, wie man dem Crawler die Arbeit erleichtern kann:

• Crawler bewegen sich auf Webseiten, indem sie Links folgen. Mit internen Verlinkungen können Crawler gezielt auf relevante Unterseiten gelotst werden.
• 404-Fehlerseiten und miteinander verkettete 301-Weiterleitungen sollten vermieden werden.
• Als zusätzliche Orientierungshilfe für Crawler solle eine XML-Sitemap erstellt und regelmäßig aktualisiert werden.

Der Fortschritt der Indexierung kann mithilfe des Google Webmaster Tools überwacht werden. Dort ist zwar nicht einsehbar, welche Seiten konkret indexiert wurden, aber dafür die Gesamtzahl aller indexierten Seiten. Das ist bereits eine wertvolle Info, da so Probleme mit der Indexierung schnell erkannt werden können, etwa wenn deutlich weniger Unterseiten indexiert werden als eigentlich auf der Webseite vorhanden sind. Das kann beispielsweise an mangelhaften Verlinkungen, einer zu großen Anzahl an Unterseiten oder qualitativ minderwertigen Inhalten liegen. In diesem Fall ist Ursachenforschung gefragt, damit das Problem so schnell wie möglich behoben werden kann. Denn nur dann kann die Webseite später auch von Nutzer*innen und damit potenzieller Kundschaft gefunden werden.