El documento robots.txt es un herramienta esencial para cualquier sitio web que busca aparecer bien indexada por los buscadores como Bing. Sirve como una mapa para los bots, indicándoles qué áreas de tu web pueden deben indexadas y cuáles se deben excluir . La adecuada configuración de este documento ayuda a evitar problemas de posicionamiento