La mise à jour ChatGPT d'OpenAI apporte une précision améliorée

OpenAI, la société à l'origine du populaire modèle d'IA conversationnelle, ChatGPT, a publié une mise à jour pour améliorer la précision du chatbot.

Après une longue période d'indisponibilité mardi, ChatGPT est opérationnel avec un nouveau modèle.

Il s'agit de la première mise à jour de ChatGPT cette année et de la deuxième mise à jour du modèle depuis son lancement en novembre.

Un message contextuel répertorie les changements dans ce qu'OpenAI appelle la mise à jour de la « version du 9 janvier ».

La fenêtre contextuelle indique :

"Nous avons encore amélioré le modèle ChatGPT ! Il devrait être généralement meilleur sur un large éventail de sujets et a amélioré la factualité."

"Nous avons encore amélioré le modèle ChatGPT ! Il devrait être généralement meilleur sur un large éventail de sujets et a amélioré la factualité."

De plus, vous pouvez maintenant arrêter ChatGPT pendant qu'il est en train de générer une réponse, ce qui fonctionnalité demandée.

Les détails dans les notes de version sont limités, j'ai donc testé plusieurs invites dans ChatGPT pour en savoir plus sur la nouvelle mise à jour. Voici ce que j'ai découvert.

Les données sont toujours limitées à 2021

Bien que ChatGPT soit plus précis maintenant, ses connaissances sont toujours limitées aux données de 2021.

Quand on lui demande ce qu'il y a dans la nouvelle mise à jour de ChatGPT, l'IA me dit :

"ChatGPT est un grand modèle de langage développé par OpenAI qui est formé sur un ensemble de données de texte conversationnel. Comme il s'agit d'un modèle OpenAI, il est régulièrement mis à jour avec de nouvelles fonctionnalités et améliorations. Cependant, comme mes connaissances sont coupées en 2021, je n'ai pas les dernières mises à jour et je ne peux pas vous fournir d'informations spécifiques sur les nouvelles fonctionnalités ou améliorations qui ont été ajoutées au modèle dans les mises à jour récentes. »

"ChatGPT est un grand modèle de langage développé par OpenAI qui est formé sur un ensemble de données de texte conversationnel. Comme il s'agit d'un modèle OpenAI, il est régulièrement mis à jour avec de nouvelles fonctionnalités et améliorations. Cependant, comme mes connaissances sont coupées en 2021, je n'ai pas les dernières mises à jour et je ne peux pas vous fournir d'informations spécifiques sur les nouvelles fonctionnalités ou améliorations qui ont été ajoutées au modèle dans les mises à jour récentes. »

Lorsqu'on m'a posé une autre question, j'ai pu mieux comprendre ce qu'implique l'amélioration de la précision d'un modèle d'IA :

"En général, quand une mise à jour est apportée à un modèle d'IA comme ChatGPT, elle peut viser à améliorer ses performances dans un ou plusieurs aspects. Par exemple, il peut avoir un plus grand ensemble de données sur lequel s'entraîner ou des améliorations dans son architecture qui lui permettent de générer des réponses plus fluides et précises. Et une telle mise à jour l'améliore également sur le plan factuel, c'est-à-dire sa capacité à comprendre et à générer des réponses basées sur des informations factuelles. »

"En général, quand une mise à jour est apportée à un modèle d'IA comme ChatGPT, elle peut viser à améliorer ses performances dans un ou plusieurs aspects. Par exemple, il peut avoir un plus grand ensemble de données sur lequel s'entraîner ou des améliorations dans son architecture qui lui permettent de générer des réponses plus fluides et précises. Et une telle mise à jour l'améliore également sur le plan factuel, c'est-à-dire sa capacité à comprendre et à générer des réponses basées sur des informations factuelles. »

La précision reste discutable

OpenAI affirme que ChatGPT peut désormais fournir des réponses plus factuelles.

J'ai testé cette affirmation en consultant un référentiel GitHub de Échecs de ChatGPT et exécutant plusieurs invites pour voir si cela produirait des réponses différentes.

Connexe : Exemples de ChatGPT : 5 façons dont les référenceurs et les spécialistes du marketing numérique peuvent utiliser ChatGPT

Test 1 : Échec

Auparavant, ChatGPT ne pouvait pas identifier avec précision combien de fois l'Argentine avait remporté la Coupe du Monde de la FIFA.

Si l'on ne tient pas compte de la victoire de la Coupe du Monde 2022, car les connaissances de ChatGPT sont limitées à 2021, il devrait dire que l'Argentine l'a remportée deux fois. Une fois en 1978 et à nouveau en 1986.

Comme indiqué dans le tweet ci-dessous, ChatGPT n'a pas toujours renvoyé la bonne réponse :

Demandé #ChatGPT à propos de qui a remporté la coupe du monde de la FIFA en 2022. Il n'a pas pu répondre. C'est prévu. Cependant, il semble fournir des informations erronées (sur les 2 autres victoires) même si les informations sont présentes dans le système. Des #Explanations ? pic.twitter.com/fvxe05N12p

— indranil sinharoy (@indranil_leo) 29 décembre 2022

Demandé #ChatGPT à propos de qui a remporté la coupe du monde de la FIFA en 2022. Il n'a pas pu répondre. C'est prévu. Cependant, il semble fournir des informations erronées (sur les 2 autres victoires) même si les informations sont présentes dans le système. Des #Explanations ? pic.twitter.com/fvxe05N12p

— indranil sinharoy (@indranil_leo) 29 décembre 2022

J'ai exécuté l'invite via la version mise à jour de ChatGPT, et il a renvoyé une réponse différente mais toujours incorrecte.

Test 2 : Échec

Auparavant, ChatGPT n'était pas en mesure de fournir une réponse correcte lorsqu'on lui demandait qui est le plus grand basketteur entre Shaq et Yao Ming.

J'ai dirigé le invite via la version mise à jour de ChatGPT, et il a renvoyé en toute confiance le même réponse incorrecte.

En parcourant les échecs de ChatGPT liés ci-dessus, j'ai trouvé qu'il continue de lutter avec les mêmes invites.

Il est difficile d'identifier les domaines dans lesquels ChatGPT peut renvoyer des réponses plus précises. Il serait utile qu'OpenAI puisse fournir des détails spécifiques dans les notes de version des futures mises à jour.

Cela dit, soyez prudent lorsque vous utilisez ChatGPT comme source d'informations. Bien qu'il fournisse des réponses correctes à de nombreuses questions, il n'est actuellement pas assez fiable pour remplacer Google.

Source : OpenAI

Image en vedette : CHUAN CHUAN/Shutterstock