[Grey-Walter] robots.txt y acceso a la información

[Lluis]

On Sat, 15 Nov 2003 00:23:36 +0100
David Gómez i Fontanills <dvd at enlloc.org> wrote:

> Ok, ya lo entiendo. Gracias.
> He mirado en google.es/robots.txt y no me parece nada raro. En realidad 
> sugieren que los robots no miren todas las páginas que son buscadores 
> (generalistas o específicos). Si lo hicieran se retroalimentarian 
> inutilmente en una especie de bucle, no?
> 
> Están ahí el "search" (google por defecto), el "images", el "groups", etc...
> 
> Pues el disallow: unclesam? no parece ser nada del otro mundo. 
> Simplemente una cuestión "tecnica", como el resto.

mi comentario inicial era una bromita, nada mas. intentaba ser pedagogico
para explicarte el tema robots.txt, pero los chistes cuando los tienes que 
explicar demasiado pierden su gracia ;)

-- 
Lluis & Pere Rocallaura
=================================================================
Antaviana		:: http://antaviana.net
Astramat		:: http://astramat.com/c/alife.html
Autonomia Situada	:: http://sindominio.net/autonomiasituada
=================================================================