El archivo el fichero robots es una herramienta fundamental para el control de tu sitio web . Permite a los buscadores de buscadores , como Googlebot, directrices sobre qué secciones deben indexar y cuáles es mejor ignorar. Establecer correctamente este fichero es esencial para mejorar el rastreo de tu web y prevenir problemas de crawling duplica

La presente reglamento define las pautas bajo las cuales usted puede navegar a nuestro plataforma web y sus materiales. Está prohibido, de forma rotunda, cualquier proceso de alterar la configuración del portal, así como la obtención masiva de contenido sin autorización expresa. El descumplimiento de esta norma puede conllevar en la suspensió