[Grey-Walter] robots.txt y acceso a la información

[Lluis]

On Thu, 13 Nov 2003 19:02:53 +0100
"Juan J. Merelo" Guervós <jmerelo at geneura.ugr.es> wrote:

> Hola,
> 	Supongo que habéis oido la historia del robots.txt de la casa Blanca, y
> como restringía el acceso a ciertos directorios; he estado mirando en
> algunos webs españoles, poquitos, y muchos de ellos también restringen
> indexación de ciertos directorios: la Generalitat, la Junta, el Gobierno
> Vasco...

acabo de mirar google.es/robots(el espiador espiado ;) 
y he probado con http://www.google.es/unclesam
ahgg!! dios!! espero que no se convierta en la home por defecto de google ;)

> KK

mmm.. una firma mutagena ;)


-- 
Lluis & Pere Rocallaura
=================================================================
Antaviana		:: http://antaviana.net
Astramat		:: http://astramat.com/c/alife.html
Autonomia Situada	:: http://sindominio.net/autonomiasituada
=================================================================