Français‎ > ‎fr-posts‎ > ‎

Un nouveau user-agent Googlebot pour explorer le contenu pour smartphone

posted Jan 23, 2014, 4:56 AM by Vincent Courson   [ updated Jan 23, 2014, 4:58 AM ]

Niveau webmaster : avancé


Au fil des années, nous avons utilisé différents robots pour explorer et indexer le contenu destiné aux téléphones multimédias et aux smartphones. Ces robots d'exploration conçus spécifiquement pour les mobiles s'appellent tous "Googlebot-Mobile". Toutefois, les téléphones multimédias et les smartphones sont des appareils avec des fonctionnalités considérablement différentes, et il est déjà arrivé qu'un webmaster bloque par inadvertance l'exploration ou l'indexation du contenu pour smartphone alors qu'il ne souhaitait en réalité bloquer que l'exploration ou l'indexation du contenu pour téléphone multimédia. À cause de cette ambiguïté, nous n'avons pas été en mesure d'indexer le contenu pour smartphone de certains sites, ni de savoir qu'il s'agissait de sites optimisés pour les smartphones.


Un nouveau Googlebot pour les smartphones

Pour clarifier la situation et permettre aux webmasters de mieux contrôler leurs sites, nous allons supprimer le user-agent "Googlebot-Mobile" pour les smartphones d'ici trois à quatre semaines. Dès lors, le user-agent pour smartphone s'appellera tout simplement "Googlebot", mais la mention "mobile" apparaîtra toujours ailleurs dans la chaîne user-agent. Voici le nouveau et l'ancien user-agent :

Le nouveau user-agent Googlebot pour smartphones :
Mozilla/5.0 (iPhone; CPU iPhone OS 6_0 like Mac OS X) AppleWebKit/536.26 (KHTML, like Gecko) Version/6.0 Mobile/10A5376e Safari/8536.25 (compatible;Googlebot/2.1; +http://www.google.com/bot.html)

Le user-agent Googlebot-Mobile pour smartphones que nous allons supprimer prochainement :
Mozilla/5.0 (iPhone; CPU iPhone OS 6_0 like Mac OS X) AppleWebKit/536.26 (KHTML, like Gecko) Version/6.0 Mobile/10A5376e Safari/8536.25 (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html)

Ce changement concerne seulement Googlebot-Mobile pour smartphones. Le user-agent du Googlebot standard ne change pas, et les deux robots d'exploration Googlebot-Mobile restants continueront de mentionner les téléphones multimédias dans leurs chaînes user-agent. Vous les trouverez ci-dessous à titre indicatif.


User-agent Googlebot standard :

Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

Les deux user-agents Googlebot-Mobile pour les téléphones multimédias :

  • SAMSUNG-SGH-E250/1.0 Profile/MIDP-2.0 Configuration/CLDC-1.1 UP.Browser/6.2.3.3.c.1.101 (GUI) MMP/2.0 (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html)
  • DoCoMo/2.0 N905i(c100;TB;W24H16) (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html)

Vous pouvez tester votre site à l'aide de notre fonctionnalité Explorer comme Google dans les outils pour les webmasters, et vous pouvez consulter la liste complète de nos robots d'exploration actuels dans le centre d'aide.


Exploration et indexation

Il est important de connaître les effets de la mise à jour du user-agent : le nouveau robot d'exploration Googlebot pour smartphone suivra les directives du fichier robots.txt, de la balise Meta robots et de l'en-tête HTTP pour Googlebot, et non pour Googlebot-Mobile. Par exemple, lorsque le nouveau robot sera déployé, la directive du fichier robots.txt bloquera toute exploration du nouveau user-agent Googlebot pour smartphones ainsi que du Googlebot standard :

User-agent: Googlebot

Disallow: /

Cette directive robots.txt bloquera l'exploration des robots Google pour téléphones multimédias :

User-agent: Googlebot-Mobile

Disallow: /

D'après nos analyses internes, cette mise à jour concerne moins de 0,001 % des URL et permet d'offrir aux webmasters un plus grand contrôle sur l'exploration et l'indexation de leur contenu. Comme toujours, si vous avez des questions, vous pouvez :


Posté par Zhijian He, ingénieur de la recherche sur smartphones



Comments