Den Bot an der Hand nehmen – Noindex/nofollow

Im Search Engine Journal ist heute ein schöner Artikel von John Britsios erschienen, der sich mit PageRank Sculping unter Zuhilfenahme der noindex- und nofollow-Metatags, dem Linkattribut rel=”nofollow” und der Noindex-Anweisung in der robots.txt beschäftigt.

Zunächst sollten die einzelnen Begriffe noch einmal kurz erläutert werden:

meta name=”robots” content=”noindex”: Dieser Metatag weist den Bot an, die Inhalte der betreffenden Seite nicht zu indexieren.
meta name=”robots” content=”nofollow”: Hier wird der Bot angewiesen, den Links auf der entsprechenden Seite nicht zu folgen. Im Umkehrschluss bedeutet das: der Webmaster unterbindet das Vererben von PageRank an die verlinkten Sites.
rel=”nofollow”: Entspricht der nofollow-Anweisung im Header einer Seite, ist hier jedoch nur auf den Link beschränkt, der dieses Attribut trägt.
Noindex:/beispielseite.html in der robots.txt: Überrascht? Nun, inoffiziell unterstützt Google (aber auch nur Google) die Noindex-Anweisung in der robots.txt. Diesbezüglich stellt Tekka allerdings die durchaus spannende Frage: was passiert, wenn eine Seite in der robots.txt mit Noindex gesperrt ist, im Header aber das Metatag meta name=”robots” content=”index”trägt? Tja Tekka, da musste jetzt mal ran und testen *g*

Doch nun zur eigentlichen Frage: wie kann man erfolgreiches PageRank Sculping mit Hilfe der oben genannten Anweisungen betreiben?

Gehen wir davon aus, dass eine Seite des Webprojektes nicht indexiert werden soll und keinen PR haben soll – im folgenden Beispiel der Einfachheit halber das Impressum. Nun ist es klar, dass man den Link zum Impressum mit dem Attribut “nofollow” versieht. Wenn jedoch von anderer Stelle auf das Impressum verlinkt wird (ohne das betreffende Attribut), dann taucht die Seite doch im Index von Google auf. Was also tun? Der erste Gedanke wäre, die Seite über die robots.txt mit Disallow:/impressum.php zu sperren. Doch damit ist die oben beschriebene Problematik nicht ausgehebelt: eine externe Seite, die auf das Impressum verlinkt, führt denoch das Indexieren der Seite herbei.

Für diesen Fall gibt es zwei Lösungsansätze:
1. meta name=”robots” content=”noindex” in der Header des Impressum packen.
2. Noindex:/impressum.php in der robots.txt

Das Interessante ist, dass John Britsios einen klaren Standpunkt zur Verwendung des meta name=”robots” content=”nofollow” einnimmt, der da wäre: NEIN! Nicht verwenden! Warum? Nun, dieser Metatag macht aus der entsprechenden Seite eine Sackgasse, a dead end. Links, die auf eine solche Sackgasse verweisen, nennt man Dangling Links.

Dangling Links: Logischerweise vererbt eine Sackgassenseite keinen PR, also auch nicht an Seiten aus dem eigenen Projekt. Was das genau für den PR-Aufbau bedeutet, am Besten mal hier nachlesen.

Zum Abschluss noch eine heiße Twitter-Diskussion zwischen Graywolf und Matt Cutts – Enjoy it!