El archivo robots.txt es un recurso esencial para dirigir cómo los buscadores exploran tu portal. Ofrece a los bots indicaciones sobre cuáles secciones de tu web pueden indexadas y cuáles deben excluidas . Una configuración adecuada del robots.txt puede mejorar tu SEO en los SERP y evitar problemas de Descargar indexación no planificados . Si