robots.txt administra el tráfico de los rastreadores, pero no mantiene una página fuera de Google. Para eso se usa noindex o protección con contraseña. Un mapa del sitio ayuda a descubrir URLs, pero no garantiza rastreo ni indexación. Reviso cuál es tu caso y qué corregir.
Qué dice Google
El archivo robots.txt indica a los rastreadores a qué URL pueden acceder; su propósito principal es evitar la sobrecarga de solicitudes, no mantener una página fuera de Google. Para eso, Google indica bloquear la indexación con noindex o proteger la página con contraseña. Una URL bloqueada por robots.txt aún puede aparecer en los resultados si otras páginas la enlazan. Fuente: Google Search Central, "Introducción a robots.txt", consultada el 30 oct 2026.
Un mapa del sitio ayuda a descubrir URLs, pero no garantiza que todo lo que contiene se rastree o indexe. Fuente: Google Search Central, "¿Qué es un mapa del sitio?", consultada el 30 oct 2026.
Para comprobar si Google ya encontró tu contenido, se puede buscar con el operador site:. Fuente: Google Search Central, "Guía de inicio de SEO".
Qué reviso
| Área | Pregunta |
|---|---|
| robots.txt | ¿Bloquea algo que sí debe verse? |
| Directivas | ¿Hay noindex donde no debe? |
| Mapa del sitio | ¿Lista las URLs correctas? |
| Search Console | ¿Qué páginas se excluyen y por qué? |
| Canónicas | ¿Las señales son coherentes? |
Para quién es / cuándo no
Para caídas de tráfico o páginas que no aparecen. Si el problema es de contenido, no se resuelve aquí.
Preguntas frecuentes
¿robots.txt oculta una página de Google?
No; usa noindex o contraseña. Fuente: Google Search Central.
¿Un mapa del sitio garantiza indexar?
No. Fuente: Google Search Central.
¿Cómo veo si estoy en el índice?
Con site: y con Search Console.
¿Cuánto tarda un cambio?
De horas a meses. Fuente: Google Search Central.
Fuentes
- Google Search Central, "Introducción a robots.txt", https://developers.google.com/search/docs/crawling-indexing/robots/intro, consultada el 30 oct 2026.
- Google Search Central, "¿Qué es un mapa del sitio?", https://developers.google.com/search/docs/crawling-indexing/sitemaps/overview, consultada el 30 oct 2026.
- Google Search Central, "Guía de inicio de SEO", https://developers.google.com/search/docs/fundamentals/seo-starter-guide, consultada el 30 oct 2026.
