X-Robots-Tag

En-tête HTTP portant les directives d'indexation, y compris hors HTML.

Le X-Robots-Tag est un en-tête de réponse HTTP qui véhicule les mêmes directives que la balise meta robots — noindex, nofollow — mais au niveau du serveur plutôt que dans le HTML.

Cette position lui donne deux avantages décisifs. Il pilote l'indexation de ressources non HTML — PDF, images, fichiers — où aucune balise ne peut se poser. Et il traite des URL en masse par une règle serveur, sans éditer page par page.

C'est pour cela qu'il est un levier privilégié en edge SEO : posé à la périphérie, il applique une politique d'indexation à des motifs d'URL entiers en quelques lignes de configuration. On vérifie son effet dans les en-têtes de réponse, à surveiller aux côtés des codes de statut HTTP.