El documento robots.txt es el elemento clave para cualquier sitio que busca ser bien indexada por los rastreadores como Bing. Sirve como un mapa para los bots, indicándoles qué secciones de tu https://soloweb.mx/knowledgebase/211/Sitemap-y-robots.txt-para-mejorar-tu-web.html