hallo,
ich habe das sp4 installiert und seit dem ohne ende ip´s auf der seite,
die meisten von
74.6.23.13 lj511883.crawl.yahoo.net
74.6.22.43 lj511993.crawl.yahoo.net
74.6.23.202 lj511764.crawl.yahoo.net
liegt es wirklich am sp4 und was kann ich dagegen tun?
Hi,
ganz sicher nicht :) yahoo hat neue bots .. irgendwann muessen/sollen se ja mal zu dir ... wenn nicht sperr die bots ueber deine .htaccess oder robots.txt aus ...
sind sie denn sinnvoll ich wie sperre ich es genau?
Hi,
also ich freu mich wenn ich ausser bei google auch bei yahoo indiziert werde ...
google is ja schliesslich nicht die ganze welt ;)
ansonsten www.robotstxt.org da is alles erklaert denke wikipedia sollte auch nen paar infos dazu haben ...
Zitat von: smartmusic am 21 Juni 2007, 19:41:04
sind sie denn sinnvoll ich wie sperre ich es genau?
http://www.google.de/search?q=.htaccess+bots+ausspe.... (http://www.google.de/search?q=.htaccess+bots+aussperren&ie=utf-8&oe=utf-8&aq=t&rls=org.mozilla:de:official&client=firefox-a)
Dann aber nicht irgendwann wundern, dass die Seite bei Yahoo nicht mehr gefunden wird...
am besten
User-agent: *
Disallow: / in die robots.txt und du hast für immer ruhe und die garantie das dich niemand findet ;) ;)
so long maverik