Buscando información sobre si existe algún estándar en relación al fichero "robots.txt", me llevé la sorpresa que al buscar en Google "robots txt" en las primeras posiciones aparece el correspondiente fichero robots.txt de la Casa Blanca (un caso de Google Hacking involuntario). No pude resistir la tentación de curiosear y mi sorpresa fue que dicho fichero ofrece un panorama completo de la estructura de directorios de la web de la Casa Blanca.

Sin entrar a considerar los aspectos de seguridad que ello conlleva (obviamente, ahorra mucho esfuerzo a quien quiera recorrer el subsuelo web de la Casa Blanca), es mucho más interesante ver los nombres de los directorios, extrapolar su contenido y comprobar las prioridades de la misma.

 

Kriptópolis (Kikuyo) -24-05-2007