3. Januar 2013 21:54

robots.txt

Wenn man Google mit in die Überlegung einbezieht, kommt die
robots.txt ins Spiel. Denkbar wäre also schon, das Links nur auf
Seiten erlaubt sind, die durch die robots.txt freigeben sind.

Leider hat Heise die betroffenen Artikel nicht verlinkt, dann könnte
man das prüfen. Aber ich schätze mal, die betroffenen Artikel sind
frei durch die robots.txt.

Anzeige

heise online Themen