DerEinzige & traumfahne.de

gedanken zur illusorischen realität des einzigen und seines eigenthums ...
die zeitschrift zum selbstausdrucken ... ausgabe 269 ... 5. jahrgang.

home | rubriken | inhalt | editorial | über | english | datenschutz | impressum | service     | abo    

«« »»

rubrik: bots markup security seo

DerEinzige & traumfahne.de

zeitschrift zum selbstausdrucken im eigenverlag vom 8. 3. 2007 | gesamtausgaben: 269

irlbot

8. März 2007 | ausgabe drucken     | leserbrief schreiben    

in letzter zeit taucht öfter mal der irlbot (crawler4.irl.cs.tamu.edu) bei mir auf. ein projekt der tamu (eine us kadetten uni), besser gesagt ihrer informatik abteilung. laut deren aussage werden zur zeit keine daten gespeichert ;)

wens stört, da gibts die anleitung, um den bot zu steuern.

#edit … der bot ist wirklich nichtsnutzig und bandbreiten verschwenderisch!

meine empfehlung für deine robots.txt:

User-agent: IRLbot
Disallow: /

oder zumindest:

User-agent: IRLbot
Crawl-delay: 360

autor: jeff brett, verfasst am 8. 3. 2007
permalink: http://dereinzige.de/2007/03/08/irlbot/
short url: http://dereinzige.de/171

anzeige:
einen leserbrief schreiben

smilies:  :)   ;)   :D   :(   :o   :?   8)   ](   :p   :|   :/   :))   ;(  
html: <a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code> <del datetime=""> <em> <i> <q cite=""> <strike> <strong>

datenschutzerklärung

wenn du auf eine komerzielle seite verlinkst, schau dir doch zuerst meine wunschliste an und bedenke mich ein wenig, bitte: wunschzettel

«« »»

durchschnittlich 29 abonnenten täglich
leser: 2 online, 375192 gesamt seit dem 16.februar 2006.

home | rubriken | inhalt | editorial | über | english | datenschutz | impressum | service     | abo    

springe zum seitenanfang