tag:blogger.com,1999:blog-9313524.post-21530403835012113352008-07-15T06:01:00.001+02:002008-07-15T06:01:03.317+02:00

El robots.txt es un fichero que suele estar disponible en la raíz de un sitio Web (es decir, http://miSitio/robots.txt). Se trata de un fichero que las arañas de los buscadores piden antes de descargar ninguna página de un sitio Web. En el fichero robots.txt se pueden especificar qué páginas y/o directorios se pueden o no indexar en los buscadores. El fichero robots.txt suele utilizarse con

Fabián Pérezhttp://www.blogger.com/profile/11587678441824841623noreply@blogger.com