2012-03-14

El archivo robots.txt

Si nuestro sitio web contiene páginas antiguas, o directorios que contienen imagenes sin importancia, o por cualquier razón queremos avisar a Google o cualquier otro buscador que no estamos interesados en que indexe ciertas páginas ó directorios de nuestro sitio web debemos usar un archivo robots.txt

Este archivo se debe dejar en el directorio raíz de nuestro sitio web.

La sintaxis concreta de este archivo es muy sencilla y se puede encontrar en http://www.robotstxt.org/


2 comentarios:

  1. Respuestas
    1. Hola Kike.

      En el fondo este es un archivo normal y corriente, por lo que lo único que tienes que hacer es borrarlo igual que se borra cualquier otro archivo.

      Eliminar