Il est difficile de faire confiance à la nouvelle vision de recherche de Google basée sur l’IA lorsqu’elle ne peut même pas résumer correctement les détails de ses propres produits.

Lors de sa conférence des développeurs Google I/O mercredi, Google a jeté les bases de la refonte de son moteur de recherche emblématique, qui suit la même formule de base depuis des années. La société vise à alimenter la recherche Google avec une IA conversationnelle et générative – et, plus important encore, à placer ces réponses avant les liens traditionnels et tout le reste. Pour le moteur de recherche le plus populaire au monde, il s’agit d’un changement monumental.

Google

Le problème avec cette approche est que les chatbots IA font souvent des erreurs qui semblent confiantes – et, fidèle à sa forme, Google n’a même pas pu obtenir exactement les détails de ses derniers produits Google Pixel Fold et Pixel Tablet, y compris le prix. Nous avons utilisé Google Bard pour nos tests, pas Google Search, mais avec la même IA qui sous-tend finalement les deux, nous pensons que les résultats méritent d’être soulignés.

Google fait un choix audacieux lors de la présentation de sa dernière vision de recherche : il place ses résultats d’IA au premier plan. Microsoft et son moteur de recherche Bing alimenté par l’IA incluent également une interface de chat conversationnelle alimentée par l’IA, mais placent son IA dans une petite boîte à droite des liens traditionnels, à peu près à la hauteur (et à la priorité) du premier résultat de recherche. Dans certains cas, comme demander aux deux moteurs de recherche les spécifications du Google Pixel Fold, Bing inclut un ensemble de spécifications provenant d’un site Web tiers. Dans les maquettes de Google, ce n’est pas le cas.

Lecture complémentaire : Les chatbots IA ne sont pas des moteurs de recherche, ce sont des crypto bros

Bing a raison ; Barde n’est pas

Sur les conseils de mon éditeur, j’ai demandé à Google Bard et à Bing Chat les spécifications du Google Pixel Fold et de la Pixel Tablet. Bard était beaucoup plus verbeux – mais, malheureusement, aussi plus faux.

Les deux moteurs de recherche, pour être justes, ont renvoyé des résultats généralement précis. Nous avons même accordé à Bard le bénéfice du doute, en lui demandant d’abord les spécifications du « Google Fold », puis du « Google Pixel Fold ». Mais Bard a toujours renvoyé des informations incorrectes sur l’affichage extérieur, signalant d’abord que son écran extérieur de 5,8 pouces avait un écran 1080 × 2670 et un écran intérieur de 7,6 pouces de 1920 × 1080. Ce n’est pas le cas; l’affichage extérieur a une résolution de 2092×1080 et un affichage intérieur de 2208×1840. (Les deux fonctionnent jusqu’à 120 Hz, un autre fait que Bard a omis.) Lorsque nous lui avons demandé une deuxième fois, il n’a même pas fait la distinction entre l’écran intérieur et extérieur, indiquant simplement qu’il dispose d’un écran pliable de 7,6 pouces avec une résolution de 1920×1080.

(Vous pouvez voir les résultats de notre requête ci-dessous. Vous devrez peut-être ouvrir les images dans un onglet séparé. Google répertorie les spécifications du Pixel Fold sur sa page d’achat.)

Mark Hachman / IDG

Bard a également hésité sur les spécifications de l’appareil photo, signalant pour la première fois que l’appareil photo avant du Pixel Fold était de 8 mégapixels et que son appareil photo arrière était de 48MP (principal) / 12MP (ultra large) / et 10MP (téléobjectif). Il a ensuite décidé que la caméra selfie avant était de 12MP et que l’arrière était de 50MP/12MP/10MP. (Les spécifications correctes sont une caméra selfie 8MP et une caméra arrière 48MP/10.8MP/10.8MP.)

Bard était au moins cohérent sur le prix, la taille de la batterie, les dimensions et les capacités sans fil, mais n’a pas pu décider si le Fold exécute Android 13 ou le prochain Android 14. (Google ne le dit pas.)

Google a également gaffé lorsqu’il a été interrogé sur la nouvelle tablette Google Pixel. Son erreur la plus importante ? Le prix, que Bard a indiqué simplement à 599 $. En fait, selon Google, la configuration de base est de 499 $, soit 100 $ de moins. (Là est une option de 599 $, qui augmente la base de stockage de 128 Go à 256 Go, mais plus particulièrement, une série de rumeurs sur les premières tablettes Pixel l’ont attribuée à ce prix.) Bard a également continué à avoir des problèmes avec les spécifications de l’appareil photo, caractérisant incorrectement les caméras avant et arrière. comme 8MP et une caméra arrière 13MP (principale) et 5MP (ultra large). La tablette Pixel comprend des caméras avant et arrière de 8 mégapixels, sans options pour un ultra large.

Encore une fois, nous avons reproduit nos requêtes ci-dessous. Vous pouvez les comparer aux spécifications officielles de Google Pixel Tablet.

Mark Hachman / IDG

Bing, quant à lui, a patiné en signalant que le Pixel Fold a un écran extérieur « 1080p ». Sinon, cependant, c’était tout à fait correct sur les deux appareils Google, alors que Google lui-même ne l’était pas.

Google est passage à un grand modèle de langage PaLM 2 mis à jour, avec des intégrations plus étroites à d’autres services Google. On ne sait pas si cela donne à Bard et à l’IA sous-jacente Bard / Search une meilleure précision. Et nous serions négligents de ne pas noter la mise en garde suivante :

« Il existe des limites connues avec l’IA générative et les LLM, et la recherche, même aujourd’hui, ne fera pas toujours les choses correctement », a écrit Elizabeth Reid, directrice générale de Google pour la recherche, dans un article de blog. « Nous adoptons une approche responsable et délibérée pour apporter de nouvelles capacités d’IA génératives à la recherche. Nous avons formé ces modèles pour maintenir la barre haute de qualité de Search, et nous continuerons d’apporter des améliorations au fil du temps.

Pourtant, le principe de base reste vrai : si Google veut diriger ses résultats de recherche avec des réponses générées par l’IA, il vaut mieux être certain que ces réponses de l’IA sont absolument correctes. À l’heure actuelle, les réponses de l’IA de Google ne le sont pas.