Qu'est-ce que Générateur d'en-tête X-Robots-Tag ?
X-Robots-Tag est un en-tete de réponse HTTP qui indique aux moteurs de recherche comment gerer une ressource dans leur index. C'est l'equivalent HTTP de la balise meta robots mais il fonctionne sur tout type de fichier -- PDF, images, videos, flux, réponses JSON et pages HTML. L'en-tete accepte les memes directives que la balise meta : noindex, nofollow, noarchive, nosnippet, noimageindex, notranslate et autres.
Réponse rapide
X-Robots-Tag est un en-tete HTTP qui controle l'indexation par les moteurs de recherche pour tout type de fichier -- PDF, images, flux et HTML. Utilisez-le lorsque vous avez besoin de controler l'indexation de ressources non-HTML ou lorsque vous ne pouvez pas ajouter de balise meta a la page. Il accepte les memes directives que la balise meta robots.
Last updated: 2026-05-28
Limites
- Certains robots et exploreurs ignorent entierement X-Robots-Tag. C'est une indication, pas une directive contraignante.
- Si une page est bloquee par robots.txt, les exploreurs ne peuvent pas voir du tout l'en-tete X-Robots-Tag. Utilisez robots.txt et X-Robots-Tag comme couches complementaires.
- X-Robots-Tag n'est pas une norme IETF officielle -- c'est une convention de fait prise en charge par Google, Bing et la plupart des grands moteurs de recherche.
Sources:MDN Web Docs · W3C Specifications · jquery.app on GitHub
Comment utiliser cet outil
- Selectionnez les directives que vous souhaitez appliquer -- les combinaisons courantes sont noindex, nofollow pour les pages a exclure, et noarchive pour le contenu qui ne doit pas etre mis en cache par les moteurs de recherche.
- Specifiez éventuellement un user-agent pour cibler des robots specifiques, ou laissez vide pour tous les robots.
- Copiez l'en-tete HTTP et/ou la balise meta HTML dans votre configuration serveur ou le balisage de votre page.
A quoi il sert
- Exclure les PDF et autres fichiers telechargeables des résultats de recherche.
- Empêcher les moteurs de recherche de mettre en cache du contenu sensible avec noarchive.
- Ajouter noimageindex a une page de galerie pour empêcher l'indexation individuelle des images tout en gardant la page indexee.