El documento robots.txt es el recurso esencial para cualquier sitio web que desea ser bien vista por los motores de búsqueda como Bing. Funciona como un directorio para los bots, indicándoles https://soloweb.mx/knowledgebase/211/Sitemap-y-robots.txt-para-mejorar-tu-web.html