El archivo robots.txt es el herramienta clave para toda sitio web que busca ser bien vista por los rastreadores como Bing. Funciona como un mapa para los bots, indicándoles qué páginas de tu https://soloweb.mx/knowledgebase/211/Sitemap-y-robots.txt-para-mejorar-tu-web.html