El archivo robots.txt es el herramienta clave para toda página web que busca estar bien indexada por los buscadores como Bing. Funciona como una mapa para los bots, indicándoles qué páginas de https://soloweb.mx/knowledgebase/211/Sitemap-y-robots.txt-para-mejorar-tu-web.html