Ces balises Meta permettent de contrôler l'exploration et l'indexation effectuées par les moteurs de recherche.
La balise <meta name="robots"> s'applique à tous les moteurs de recherche, tandis que la balise <meta name="googlebot"> est propre à Google.
En cas de balises Meta robots (ou googlebot) qui se contredisent, la balise la plus restrictive s'applique. Par exemple, si une page contient à la fois les balises max-snippet:50 et nosnippet, la balise nosnippet prévaut.
Les valeurs par défaut sont index, follow, et il n'est pas nécessaire de les spécifier. Pour obtenir la liste complète des valeurs acceptées par Google, consultez la liste des instructions valides.
Vous pouvez également spécifier ces informations dans l'en-tête des pages à l'aide de l'instruction d'en-tête HTTP "X-Robots-Tag". Cette instruction est particulièrement utile pour limiter l'indexation de fichiers non HTML comme les images ou d'autres types de documents. En savoir plus sur les balises Meta robots