Herramientas SEO

Gratis Generador de cabecera X-Robots-Tag

Genera cabeceras HTTP X-Robots-Tag y etiquetas meta robots para archivos no HTML como PDFs e imágenes.

Cargando herramienta...

Qué es Generador de cabecera X-Robots-Tag?

X-Robots-Tag es un encabezado de respuesta HTTP que indica a los motores de busqueda como manejar un recurso en su indice. Es el equivalente HTTP del meta tag robots pero funciona en cualquier tipo de archivo: PDFs, imagenes, videos, feeds, respuestas JSON y paginas HTML por igual. El encabezado acepta las mismas directivas que el meta tag: noindex, nofollow, noarchive, nosnippet, noimageindex, notranslate y otras.

Respuesta rápida

X-Robots-Tag es un encabezado HTTP que controla la indexacion de motores de busqueda para cualquier tipo de archivo: PDFs, imagenes, feeds y HTML. Use cuando necesite control de indexacion sobre recursos que no son HTML o cuando no pueda agregar un meta tag a la pagina. Acepta las mismas directivas que el meta tag robots.

Last updated: 2026-05-28

Limitaciones

Algunos bots y rastreadores ignoran X-Robots-Tag por completo. Es una sugerencia, no una directiva vinculante, y no existe un mecanismo de aplicacion mas alla del cumplimiento voluntario de los motores de busqueda.
Si una pagina esta bloqueada por robots.txt, los rastreadores no pueden ver el encabezado X-Robots-Tag en absoluto. Use robots.txt y X-Robots-Tag como capas complementarias, no alternativas.
X-Robots-Tag no es un estandar oficial IETF: es una convencion de facto compatible con Google, Bing y la mayoria de los motores de busqueda principales. Los rastreadores mas pequenos o especificos pueden no reconocerlo.

Sources:MDN Web Docs · W3C Specifications · jquery.app on GitHub

Cómo usar esta herramienta

Seleccione las directivas que desea aplicar: las combinaciones comunes son noindex y nofollow para paginas que se excluiran, y noarchive para contenido que no debe almacenarse en cache por los motores de busqueda.
Opcionalmente, especifique un user-agent para dirigirse a rastreadores especificos, o dejelo vacio para todos los bots.
Copie el encabezado HTTP o el meta tag HTML en la configuracion de su servidor o el marcado de la pagina.

Para qué puedes usarla

Aplicar noindex a PDFs y otros archivos descargables que no deban aparecer en los resultados de busqueda.
Evitar que los motores de busqueda almacenen en cache contenido sensible con noarchive.
Agregar noimageindex a una pagina de galeria para evitar la indexacion de imagenes individuales mientras se mantiene la pagina indexada.

Casos de uso

Ejemplos prácticos

Ejemplo

Prevenir indexacion de PDFs

Un sitio ofrece documentos PDF detras de un formulario. Agregue X-Robots-Tag: noindex, nofollow a las respuestas PDF para que los motores de busqueda no indexen el contenido restringido ni sigan enlaces dentro de los PDFs.

Ejemplo

Proteger activos de imagen

Un sitio de fotos de stock agrega X-Robots-Tag: noimageindex a todas las respuestas de imagen. Las paginas HTML permanecen indexadas, pero las imagenes individuales no aparecen en Google Image Search.

Errores comunes

Establecer un meta tag robots en una pagina pero tambien enviar un encabezado X-Robots-Tag conflictivo: los motores de busqueda pueden honrar la directiva mas restrictiva.
Usar noindex en una pagina bloqueada por robots.txt: los motores de busqueda no pueden ver la directiva noindex si no pueden rastrear la pagina.
Olvidar que X-Robots-Tag se aplica a toda la respuesta HTTP: todos los recursos incrustados en esa respuesta heredan el comportamiento del encabezado.

Verificación

Use la herramienta URL Inspection de Google Search Console para confirmar el estado de las paginas indexadas despues de aplicar noindex mediante X-Robots-Tag.
Ejecute curl -I https://sursitio.com/ruta para verificar que el encabezado X-Robots-Tag este presente y contenga las directivas correctas.

FAQ

Preguntas sobre Generador de cabecera X-Robots-Tag

Cual es la diferencia entre robots.txt Disallow y X-Robots-Tag noindex?

robots.txt Disallow evita el rastreo: el motor de busqueda no puede acceder al recurso en absoluto. X-Robots-Tag noindex permite el rastreo pero indica al motor de busqueda que no incluya el recurso en su indice. Para eliminar una pagina de los resultados de busqueda, use noindex y NO la bloquee con robots.txt.

X-Robots-Tag funciona en archivos que no son HTML?

Si, y esta es su principal ventaja sobre el meta tag. X-Robots-Tag funciona en PDFs, imagenes, videos, documentos de Word, feeds RSS, respuestas JSON y cualquier otra respuesta HTTP. El meta tag HTML solo funciona dentro de paginas HTML.

Puedo usar X-Robots-Tag para user-agents especificos solamente?

Si. La mayoria de los servidores web admiten encabezados condicionales basados en user-agent. Sin embargo, no todos los bots respetan las directivas especificas de user-agent, y el enfoque mas seguro es aplicar las directivas de manera amplia.

Herramientas relacionadas