El archivo robots.txt es el herramienta clave para la sitio web que busca ser bien indexada por los buscadores como Bing. Sirve como el mapa para los rastreadores , indicándoles qué áreas de tu web pueden están rastreadas y cuáles se deben excluir . La óptima configuración de este archivo puede a prevenir problemas de rastreo , mejorar la ve