El archivo robots.txt es un instrumento clave para dirigir cómo los motores de búsqueda rastrean tu portal. Ofrece a los bots instrucciones sobre qué páginas de tu dominio pueden ser rastreadas y cuáles deben ser ignoradas . Una configuración adecuada del robots.txt puede impactar positivamente t