Etiqueta: robots.txt

Mediante el fichero robots.txt puedes limitar el acceso de bots de indexación en tu web, creando reglas para denegar el acceso a carpetas concretas, a todo el sitio web, a archivos determinados,