Yahoo hat heute zugegriffen:
8.059 Seitenzugriffe.
Ich weiß überhaupt nicht, was da so übermäßig interessant ist.
Aber gut.
Der Bot ist ja immernoch da. Es sind sogar mehrere…
Yahoo hat heute zugegriffen:
8.059 Seitenzugriffe.
Ich weiß überhaupt nicht, was da so übermäßig interessant ist.
Aber gut.
Der Bot ist ja immernoch da. Es sind sogar mehrere…
Hast Du was angestellt? Vielleicht wollen sie Dich ja den chinesischen Behörden ausliefern. 😉
Uh. Die Möglichkeit hab ich noch garnet gesehen… Shit…
Wenn Yahoo! zu nervig wird, gibt’s hier Abhilfe:
http://help.yahoo.com/help/us/ysearch/slurp/slurp-03.html
Vielleicht hat er sich verlaufen? Bei mir hängen sie gerne in den Dateien vom Counter rum und drehen ein paar kleine Runden … Muss sehr spannend sein 😉
Der Slurp ist/war bin mir auch unglaublich aktiv. Ich habe ihn jetzt mal ein bisschen mit der robots.txt in die Schranken gewiesen und ihm den Zutritt zum Archiv 2005 (das müsste er ja schon langsam mal haben) und vor allem ins Unterverzeichnis „tags“ verboten habe. Denn da hat er alle Tag-Kombinationen (teilweise Ketten von 3-6 Tags) abgeklappert. Und das muss nicht sein.
Danke für diese gute Idee 😉
Hab ich doch auch gleich mal gemacht 🙂