DerEinzige & traumfahne.de
zeitschrift zum selbstausdrucken im eigenverlag vom 27. 5. 2008 | gesamtausgaben: 269
slurp, den bot von yahoo aussperren
27. Mai 2008 | ausgabe drucken | 8 leserbriefe | leserbrief schreibenwillst du auch den bandbreiten verschwender / vernichter slurp loswerden?
füge einfach
User-agent: Slurp
Disallow: /
in deine robots.txt ein.
hab jetzt echt die faxen dicke. gut ein drittel meiner bandbreite geht für den crawler von yahoo drauf, aber treffer von yahoo hab ich praktisch nicht …
yahoo, wer zum geier ist yahoo 
… eben
dazu kommt noch, dass yahoo inc. eine firma ist, die in mir ein ungutes gefühl erzeugt:
ich las von zensur, vorauseilendem gehorsam, zusammenarbeit mit folterregimen, willkürlichen entscheidungen …
sieh dir mal die links an die ich dazu zusammengetragen habe:
http://de.wikipedia.org/wiki/Yahoo!#Yahoo_in_der_Kritik
http://blog.till-westermayer.de/index.php/2007/06/13/flickr-sperrt-deutsche-aus/ (flickr gehört yahoo!)
http://www.reporter-ohne-grenzen.de/ (eine von vielen nachrichten dort)
autor: jeff brett, verfasst am 27. 5. 2008
permalink: http://dereinzige.de/2008/05/27/slurp-den-bot-von-yahoo-aussperren/
short url: http://dereinzige.de/431
Dann müsstest Du google aber auch ausperren, zumindestens was die Kritik an Zensur usw. betrifft.
no, ausgesperrt hab ich yahoo wg. seines resourcenfressenden bots und weil es quasi keine gegenleistung dafür gibt … die anderen punkte hab ich nebenbei bei meiner recherche zu slurp gefunden.
weist du was handfesteres ausser gerüchten zu google (link(s)?)?
ja, war mir schon klar, dass es hauptsache aus den Ressourcengründen geschieht. Das Problem kennt ja jeder Webmaster mittlerweile. Wollte halt nur sagen, dass google in den anderen Bereichen aber auch nicht besser ist und mir persönlich auch viel zu viele Daten vom User sammelt. Deswegen nutze ich ausser der Suche keine weiteren Dienste von google, egal wie gut sie sind. URLs gibt es zu hauf:
http://www.google.de/search?q=google+zensur&hl=de
http://www.google.de/search?q=google+kritik+datenschutz&hl=de
ich seh schon was du meinst, leider sind diese links über google suchen (sic!) wie immer etwas schwammig.
die ersten drei treffer des ersten links, beschäftigen sich mit zensur von seiten (nazi, kinderporno), mit der behauptung die deutschen suchergebnisseiten (google.de) sähen aus zensurgründen anders aus, als google.com, google.at, google.com/intl/en …
dies kann ich leider nicht verifizieren. mit den string *preteen* (vorgeschlagen im ersten treffer deines links), erhältst du queer durch alle google tlds den gleichen mist.
ändern tut sich nur was wenn du an den spracheinstellungen was änderst:
google.com (englisch) liefert das selbe wie z.b. google.de (englisch) und umgekehrt google.com/intl/en (deutsch) das gleiche wie standard google.de …
deine zweite linkgruppe beschäftigt sich mit dem zusammenspiel des betriebsystems windows, google desktop und der datensicherheit.
jetzt muss ich doch etwas spotten: windows und datensicherheit?
aus datenschutzgründen würde ich niemals windows in welcher version auch immer verwenden. darum kann ich zu den aussagen deines zweiten links keine stellung beziehen.
wie schon geschrieben: links auf google suchergebnisseiten sind meist eher schwammig als nützlich … oder wolltest du mich mit der schieren menge der treffer virtuell erschrecken? allein die menge an suchtreffern ist kein echtheitszertifikat und in manchen kreisen werden argumentationen mittels links auf suchergebnisseiten als stiellos empfunden
Ähem, hast Du wahrscheinlich nur übersehen, aber der dritte Link befasst sich auch mit der freiwilligen Zensur in China, die Du bei yahoo ja mit deinem dritten Link (ROG) kritisierst.
Falls Dir das tatsächlich entgangen sein sollte:
http://www.spiegel.de/netzwelt/web/0,1518,397285,00.html
Den Wikipedialink gibt es zu google übrigens auch:
http://de.wikipedia.org/wiki/Google#Google_in_der_Kritik
Und mein zweiter Link befasst sich keineswegs mit dem Zusammenspiel des Betriebsystems windows, google desktop und der Datensicherheit.
Alle Daten die google sammelt stammen von webbasierten Diensten und die kannst Du mit jedem Betriebssystem nutzen. Ich weiss also nicht was Windows damit zu tun haben soll?
siehst du, jetzt wird doch alles konkreter. danke für deine mühe!
klar ist es möglich, oder besser wahrscheinlich, dass ich bei deinen ersten links (aus kommentar 3) das nicht gefunden habe, was du meintest und dafür anderes, was du nicht meintest
bei immerhin 872.000 bzw. 389.000 treffern …
gruss und beste wünsche
Mich würde mal interessieren, wieviel Traffic Du denn jetzt wirklich mit dem Aussperren des Yahoo-Bots eingespart hast, also in Gigabyte pro Monat.
Viele Webhoster bieten ja heutzutage auch schon Traffic-Flatrates an. Da sollte man meiner Meinung nach ruhig die paar Besucher über Yahoo mitnehmen. Ich würde wohl erst zu so drastischen Methoden greifen, wenn der Speed der gesamten Homepage darunter leidet.
hey micha
ich warte auch gespannt bis zum monatsende um vergleichsdaten zu bekommen. ich rechne mit mehr als 30% einsparung.
um ladezeit oder kohle geht es mir nicht … ich hab mich nur zu lange über diesen mies programmierten bot geärgert
der ganz allgemein zur netzverstopfung beiträgt ( ich hab dsl 16000 mit echten 14200 und ärger mich trotzdem … aus prinzip 
)
ich finde man sollte der yahoo inc. mal ans bein treten, damit sie einen besseren bot bauen lassen.
und je weniger die yahoo verwender finden, desto eher wechseln sie, desto eher kommt yahoo in die pötte …
falls du echte bedenken wg. den yahoo usern hast, kannst du ja an einem tag im monat slurp durchlassen
ende juni werd ich zahlen haben und posten …