Une nouvelle étude souligne les limites importantes des chatbots IA quand il s’agit d’obtenir des informations exactes. Menée par le Tow Center for Digital Journalism, cette étude révèle que ces outils donnent très souvent des réponses incomplètes ou entièrement fausses, tout en affichant une confiance trompeuse dans leurs affirmations.
Les chercheurs ont testé huit chatbots populaires censés effectuer en temps réel des recherches précises sur le web : ChatGPT, Perplexity, Perplexity Pro, DeepSeek, Copilot de Microsoft, Grok-2, Grok-3 et Gemini. Chaque bot devait simplement identifier une citation extraite d’un article de presse en ligne, puis fournir le lien, la date de publication, le titre et l’éditeur d’origine de l’article. Pour faciliter la tâche, seuls des extraits facilement trouvables via une simple recherche Google ont été choisis.
Résultat : aucun de ces chatbot IA n’est véritablement fiable. En moyenne, leur taux de réponse correcte ne dépasse pas 40 %. Le meilleur, Perplexity, atteint 63 %, tandis que Grok-3 de X s’effondre à seulement 6 % d’exactitude. Plus inquiétant encore, les versions payantes offrent souvent des réponses incorrectes avec davantage d’assurance que les versions gratuites. Plusieurs chatbots contournent aussi les consignes présentes dans les fichiers robots.txt de certains sites, indexant ainsi des contenus auxquels ils ne devraient normalement pas avoir accès.
Autre détail préoccupant : certains chatbots inventent tout simplement des liens ou citent des versions copiées ou syndiquées au lieu des sources originales, même lorsqu’ils disposent d’accords explicites avec ces sources.
Dans ce contexte peu rassurant, le choix par Apple de s’associer à ChatGPT apparaît plutôt judicieux. Bien que loin d’être parfait, ChatGPT figure parmi les outils les moins problématiques, selon l’étude. Cela conforte la décision récente d’Apple de miser sur ChatGPT pour faciliter les interactions avec Siri, notamment pour répondre à certaines questions complexes auxquelles l’assistant traditionnel ne trouve pas de réponse.
Plus d'articles de la catégorie Actualité
Apple : une nouvelle version du modem 5G bientôt sur les iPhone 18 Pro
Apple a introduit cette année son premier modem 5G maison, le C1, avec l’iPhone 16e. Cependant, ce n'est qu'à partir …
iPhone 17 : rumeurs d’une caméra frontale 24 mégapixels et plus
Selon l'analyste Jeff Pu de GF Securities, l'iPhone 17 pourrait marquer une avancée significative en matière de fonctionnalités photographiques. Dans …
YouTube Music déploie son générateur radio IA sur iPhone et iPad
Après son lancement sur Android en septembre, le générateur de radios basé sur l'IA, "Ask Music", est désormais disponible sur …
Google ajoute un clin d’œil à Severance avant la finale de saison
La deuxième saison de Severance touche à sa fin, et pour célébrer le succès de la série, Google a intégré …
Nouvel Apple TV 4K : sortie prévue d’ici fin 2025
Apple a mis à jour son Apple TV 4K pour la dernière fois fin 2022. Quand verra-t-on arriver le nouveau …
Les trois objectifs ambitieux d’Apple pour la refonte d’iOS 19
La sortie d’iOS 19 s'annonce comme un tournant majeur avec une refonte significative, accompagnée de mises à jour comme macOS …