Google explique l'index, suivez la balise méta

John Mueller de Google a répondu à une question sur Reddit concernant une balise méta robots couramment utilisée et ce qui se passerait si elle manquait. La réponse de Mueller, même si elle est logique et documentée, peut encore surprendre de nombreux éditeurs et référenceurs.

Balise méta des robots

L'élément méta HTML communique des métadonnées. Les métadonnées sont des informations lisibles par machine qu'un robot comme Googlebot peut lire.

Il existe de nombreux types de méta-éléments, comme l'élément méta-description, mais le méta-élément Robots est différent en ce sens qu'il peut contrôler les robots des moteurs de recherche.

Les informations communiquées par la balise méta robots sont appelées directives, ce qui signifie que les robots d'exploration sont obligés d'obéir aux instructions contenues dans la balise méta robots.

Il existe de nombreuses instructions à transmettre à travers la méta des robots, mais la balise méta suivante est celle qui est pertinente par rapport à la question à laquelle John Mueller a répondu.

La balise méta noindex, no follow :

La balise méta ci-dessus indique aux robots des moteurs de recherche de ne pas indexer le contenu de la page Web et de ne suivre aucun lien.

L'une des balises méta les plus courantes est celle-ci, qui commande aux moteurs de recherche d'indexer le contenu et de suivre tous les liens :

Bien que la balise méta ci-dessus soit courante, il existe de nombreux malentendus à son sujet. Il existe un raisonnement selon lequel, parce que Google prend en charge nofollow, cela doit impliquer que Google prend en charge la directive follow.

J'ai trouvé un certain nombre de sites Web faisant autorité qui disent que Google utilise l'index des méta-robots, suivez la balise méta.

Mais ce n’est pas réellement ainsi que Google utilise ces directives, comme le précise John Mueller dans sa réponse.

Voir aussi : Google répond si les balises Meta Robots affectent les classements de recherche

Quel est l'effet de l'omission de la balise d'index Meta Robots ?

La personne sur Reddit a posé la question suivante :

«Je suis un peu confus avec le site Web sur lequel je travaille.

Voici donc à quoi ressemblent les méta-extraits de la plupart des sites Web sur lesquels je travaille :

Mais, sur le site Web actuel, il manque la balise « index ».

Ma question est la suivante : quel est l'effet de l'absence de la balise "index" sur le site. »

John Mueller a répondu :

« La balise méta des robots « index » n'a aucune fonction (du moins dans Google) – elle est complètement ignorée. "Suivez" également.

Google a https://developers.google.com/search/docs/crawling-indexing/special-tags & https://developers.google.com/search/docs/crawling-indexing/robots-meta-tag pour documenter le balises méta qui ont des fonctions. Vous pouvez utiliser n'importe quoi d'autre, il sera ignoré. est une option si vous voulez déstabiliser les gens.

Pourquoi Google ignore l'index et le suivi des robots

La simple raison pour laquelle Google ignore la balise méta index et follow des robots est que l'indexation et le follow sont les valeurs par défaut.

L'indexation et le suivi des liens sont ce que font les robots des moteurs de recherche. Il n'est pas nécessaire de leur dire d'indexer le contenu et de suivre les liens, car c'est leur objectif.

La documentation de Google sur les balises robots conseille :

"Les valeurs par défaut sont index, follow et n'ont pas besoin d'être spécifiées."

La liste complète des directives valides pour Google est ici .

Si la méta des robots que vous souhaitez utiliser n'y figure pas, Googlebot l'ignorera.

Connexe : Comment contrôler l'interaction de Googlebot avec votre site Web

L'index et le suivi sont-ils complètement inutiles ?

Il est vrai, documenté et officiel que lorsqu'il s'agit de Googlebot, est une perte d'espace HTML et est ignoré par Googlebot.

Bing traite les index, suivez de la même manière mais avec une légère différence, comme décrit dans la documentation officielle de Bing pour les balises méta.

Voici ce que dit la documentation de Bing à propos de la directive index :

« Par défaut, nous supposons « index », mais si nécessaire, vous pouvez utiliser pour indiquer explicitement que nous pouvons indexer la page.

Et voici ce qu'il est dit à propos de la directive suivante :

« Par défaut, nous supposons « suivre », mais vous pouvez explicitement indiquer « suivre » si vous le souhaitez.

Au cours de mes plus de 20 années de travail dans le référencement, la création de sites Web, leur optimisation et leur classement, j'ai toujours considéré comme une bonne politique de donner aux robots ce qu'ils attendent et d'essayer de ne rien leur donner d'inattendu. Donc, si une méta description n'est pas nécessaire, mon impulsion serait de la laisser de côté, car le but de l'optimisation est de permettre aux moteurs de recherche d'indexer et de comprendre le contenu aussi facilement que possible, ce qui signifie de se débarrasser de tout ce qui pourrait aller à l’encontre de cet objectif.

Dans ce cas, il est fort probable que cela n’aura aucun effet dans un sens ou dans l’autre.

Mais… Il existe une autre façon de suivre et d'indexer les gens.

Certains éditeurs utilisent cette balise méta robots :

Certains sites conseillent que si la page n'est pas indexée, l'utilisation de la directive « follow » oblige le moteur de recherche à suivre les liens.

Mais ce n'est pas vrai s'il existe une directive « noindex » pour la simple raison que Google ne peut pas suivre un lien sur une page qui n'est pas indexée. Si ce n'est pas dans l'index, les liens sur ces pages ne sont pas dans l'index.

Lire : Comment amener Google à indexer votre site (rapidement)

Image en vedette par Shutterstock/Bangun Stock Productions