Bloqueaste una página y sigue en Google: robots.txt y noindex no hacen lo mismo
Pusiste una barrera al rastreador, pero la dirección todavía aparece en el buscador. Puede ocurrir: robots.txt regula qué puede visitar Googlebot; noindex indica qué no debe aparecer en los resultados. Elegir entre ambos cambia la solución.
En pocas palabras
- Robots.txt controla el acceso de los rastreadores.
- Noindex permite excluir una página de Google.
- El robot necesita poder leer esa instrucción.
- La información privada necesita controles de acceso.
Rastrear una página no es incluirla en el buscador
El rastreo es la visita que hace un robot para leer una dirección. La indexación es otro paso: incorporar información al índice con el que el buscador prepara sus resultados. Una regla pensada para la primera tarea no resuelve necesariamente la segunda.
Según la documentación de Google, una URL bloqueada en robots.txt puede seguir apareciendo en las búsquedas si otras páginas enlazan hacia ella. El buscador puede conocer esa dirección aunque no haya podido visitar su contenido.
Por eso, encontrar una URL bloqueada no demuestra por sí solo que Google haya ignorado el archivo. La explicación puede estar en lo que esa instrucción controla: el acceso del rastreador, no la desaparición del resultado.
Cuándo sirve noindex y dónde va
Si la página debe seguir siendo pública, pero no aparecer en Google, la regla noindex responde a ese objetivo. Puede enviarse en una etiqueta meta del encabezado HTML o en una cabecera HTTP llamada X-Robots-Tag. Esta última opción también permite trabajar con archivos como PDF.
Noindex no es una instrucción que Google admita dentro de robots.txt. Tampoco oculta la página a las personas que tienen el enlace: pueden seguir abriéndola si el sitio permite el acceso.
Para leer noindex, Googlebot tiene que acceder al recurso. Si robots.txt le impide entrar, también puede impedirle encontrar la orden que le pide quitarlo de las búsquedas.
Una página de agradecimiento y un documento interno
Imaginá una página que confirma una inscripción. Querés que el visitante llegue después de completar un formulario, pero no necesitás que esa confirmación compita en las búsquedas. Es un caso en el que puede tener sentido excluir la página del índice y conservar su acceso público.
Ahora cambiá el ejemplo por un documento reservado a un equipo. Ahí el objetivo es controlar quién puede leerlo. Una contraseña y permisos de acceso actúan sobre esa necesidad; desaparecer de un buscador no convierte un enlace público en privado.
Son decisiones diferentes dentro de un mismo sitio. Antes de tocar una regla, conviene escribir el resultado buscado en una frase: “no quiero que aparezca en Google” o “no quiero que lo abra alguien sin autorización”.
Qué mirar si el cambio todavía no se refleja
Search Console permite revisar cómo Google rastrea e indexa un sitio. La inspección de una URL ayuda a estudiar una dirección concreta; el informe de indexación ofrece una vista más amplia de las páginas y sus motivos de exclusión.
También conviene distinguir la información guardada por Google de una prueba del estado actual. Cambiar una etiqueta en el sitio no actualiza instantáneamente lo que el buscador ya conoce.
Si necesitás retirar un resultado con urgencia
La herramienta de retiradas de Search Console permite ocultar temporalmente resultados de una propiedad que administrás. Una solicitud aceptada dura aproximadamente seis meses. Es un recurso para actuar rápido mientras se aplica una solución duradera.
Ese retiro afecta a Google Search: no borra el contenido de Internet ni lo quita de otros buscadores. Si el material no debe permanecer disponible, también hay que resolver qué ocurre en el sitio que lo publica.
Primero el objetivo, después la herramienta
El SEO técnico empieza muchas veces por una decisión sencilla: qué contenido querés ofrecer y a quién. Entender rastreo, indexación y acceso evita aplicar una misma barrera a problemas distintos. Son conceptos que forman parte de la práctica del Curso SEO de UNIFADER.
Imagen: ilustración conceptual original generada con IA para UniNews. No es una captura de Google ni de Search Console.
Fuentes
Para analizar resultados después de resolver el acceso, leé la guía sobre visibilidad y métricas en Search Console. Más herramientas en Tecnología y UniNews.
