2026-05-31 · Lectura de 1 min
Conceptos basicos de robots.txt y sitemap.xml
robots guia rastreadores; el sitemap lista URL que quieres descubrir — use ambos el dia del lanzamiento.
SEOrastreositemap
Conclusiones clave
- robots.txt no es autenticacion — proteja rutas sensibles en el servidor.
- Envie sitemap.xml en Search Console tras el deploy; ping IndexNow en lotes grandes.
Emparejar los dos archivos
Genere robots.txt con la URL del sitemap en la directiva Sitemap.
Construya sitemap.xml solo con URL canonicas indexables — omita variantes noindex.
Preguntas frecuentes
Debo disallow /api?
Si — bloquee endpoints que no son paginas para ahorrar presupuesto de rastreo.
Cuantas URL por sitemap?
Menos de 50.000 por archivo; divida por idioma o seccion si hace falta.