[Zope-it] robots.txt

[Giorgio Andreoletti]

ciao,
non so perch=E8 google usi sempre IP diversi; l'unica idea sensata che mi=20
viene in mente =E8 perch=E8 di fatto non solo uno il crawler che sonda i=
 vari=20
pezzetti di internet, ma saranno un certo numero; assegnando ad ognuno un=20
ip diverso sai all'istante chi ha causato eventuali problemi ad un=20
eventuale utente skazzato ....

se vuoi che rallenti le scansioni sul tuo sito, dai una occhiata su
http://www.googlebot.com/bot.html


ciao
Giorgio


=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=
=3D=3D=3D=3D=3D
Giorgio Andreoletti - mentelocale S.r.l.
responsabile hardware e networking
responsabile sviluppo web
www.mentelocale.it
giorgio.andreoletti@mentelocale.it
=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=3D=
=3D=3D=3D=3D=3D