ChatGPT contre Bing Chat AI : quel est le meilleur ?
Publié: 2023-04-12ChatGPT et Bing Chat sont deux des chatbots les plus populaires à l'heure actuelle, et sont tous deux alimentés par un modèle de grand langage (LLM) similaire créé par OpenAI. Mais qu'est-ce qui est réellement préférable d'utiliser?
ChatGPT et Bing Chat AI sont tous deux basés sur le modèle de langage GPT développé par OpenAI, mais ils exécutent des versions différentes et il existe des différences dans la manière dont les entrées sont gérées. Depuis avril 2023, Bing utilise une version de test du modèle GPT-4, tandis que ChatGPT est sur l'ancien modèle GPT 3.5-turbo. Les deux chatbots ont des personnalisations basées sur le modèle de langage, telles que différentes méthodes de saisie et fonctionnalités d'interface, et Bing a spécifiquement une intégration avec des applications comme Edge et Skype.
Remarque : ChatGPT et Bing Chat évoluent tous les deux à un rythme rapide, et aucun chatbot ne fournit la même réponse exacte pour une invite donnée à chaque tentative. Vos résultats peuvent varier selon les invites utilisées ici.
Convivialité et accès
Bing Chat et ChatGPT sont tous deux disponibles pour toute personne qui s'inscrit avec un compte, bien que Bing vous fasse d'abord rejoindre une "liste d'attente", qui accorde immédiatement l'accès. Les deux chatbots ont des versions Web disponibles, sauf que le site de Bing bloque tous les navigateurs sauf Microsoft Edge sans solutions de contournement. Vous pouvez utiliser Bing Chat avec un compte Microsoft sur bing.com/new, et nous avons un explicatif pour savoir comment utiliser ChatGPT.
Bing est également intégré à d'autres applications et services Microsoft, tels qu'une barre latérale dans Microsoft Edge, un chatbot dans Skype et l'application mobile Bing. ChatGPT n'a pas d'application mobile officielle, mais vous pouvez utiliser l'application Web sur un téléphone ou une tablette. Cependant, Microsoft a été plus lent à ajouter des fonctionnalités de l'interface Web à la barre latérale Edge, au chatbot Skype et à d'autres interfaces. Si vous voulez toutes les fonctionnalités de Bing Chat, vous devez vous en tenir au site Bing, du moins pour le moment.
L'interface Web de ChatGPT et de Bing Chat est similaire, mais avec des différences mineures qui modifient leur utilité. ChatGPT est conçu pour accepter plus de données, telles que des blocs de code plus longs ou des échantillons de code volumineux. Depuis avril 2023, Bing limite les invites à 2 000 caractères, tandis que la limite de ChatGPT est beaucoup plus élevée (et non officiellement déclarée).
Précision factuelle
ChatGPT n'a pas la capacité d'indexer le Web en temps réel pour obtenir des informations - bien que cela soit éventuellement possible avec l'utilisation de plugins. Il est limité aux données d'entraînement de son modèle, qui remonte à septembre 2021. OpenAI n'aime pas non plus partager la manière dont ses données ont été collectées, ou dont la précision est testée, etc. Bing est également basé sur la même technologie GPT, mais il préfère généralement les résultats du Web aux données de formation.
Bing Chat et ChatGPT ont généralement raison en ce qui concerne les faits de base, comme les capitales des pays ou des États, la date de naissance d'une personne notable, etc. Par exemple, Bing et ChatGPT ont tous deux pu me dire avec précision quelle est la capitale du Royaume-Uni (Londres), combien d'étoiles sur le drapeau des États-Unis (50 étoiles) et combien de pattes un chien a (quatre) . Si c'est simple, les deux bots auront probablement raison… mais n'importe quel moteur de recherche ordinaire le ferait aussi. Vous commencez à avoir des problèmes lorsque répondre à une question implique un certain niveau d'interprétation.
Par exemple, j'ai essayé de demander aux deux robots : "Quelles capitales d'État aux États-Unis commencent par la lettre A ?" Cela semble simple, mais c'est toujours un processus en plusieurs étapes - vous avez d'abord besoin d'une liste de toutes les capitales, puis vous devez la filtrer jusqu'à celles qui commencent par la lettre A. Wikipédia en compte cinq au total : Albany, Annapolis, Atlanta , Augusta et Austin. Bing Chat a répondu correctement à la question, citant plusieurs pages Web qui répertorient les capitales des États-Unis. ChatGPT… a eu quelques problèmes.
Tout d'abord, ChatGPT m'a donné une liste de quatre capitales : Albany, Annapolis, Atlanta et Augusta. Après cela, il a dit: "Il y a aussi Austin, qui est la capitale du Texas, mais cela ne commence pas par la lettre A." Poser la même question plusieurs fois omettait parfois complètement la mention d'Austin. Demander pourquoi Austin est manquant a amené ChatGPT à se rappeler qu'Austin existe et à s'excuser pour l'erreur, mais on ne sait pas pourquoi il a rompu avec la réponse initiale.
J'ai essayé une autre question à laquelle les deux chatbots devraient pouvoir répondre correctement, même avec les anciennes données de ChatGPT : "Quels sont les trois pays les plus récemment admis dans l'Union européenne ?" Wikipédia explique que la Croatie était l'État membre le plus récent, le 1er juillet 2013, suivi de la Bulgarie et de la Roumanie le même jour : le 1er janvier 2007.
ChatGPT répond correctement à cette question, y compris l'ordre des pays et les dates. Bing mentionne correctement que la Croatie était les États membres les plus récents, mais il répertorie la Slovénie et Malte comme les deux autres pays. La Slovénie et Malte ont toutes deux rejoint le 1er mai 2004, en même temps que huit autres nations, mais c'était bien avant la Bulgarie et la Roumanie en 2007.
Bing aurait dû répondre correctement à la réponse, non seulement parce qu'il a accès à Internet, mais aussi parce que la première citation est une page officielle de l'UE avec une chronologie correcte des pays récents. Une autre citation semble provenir d'une version archivée de Wikipédia d'avant 2007 destinée à être utilisée dans les écoles, qui répertoriait la Bulgarie et la Roumanie comme pays qui rejoindraient en janvier 2007.
En résumé, Bing Chat est généralement meilleur pour la recherche de faits, mais il est encore loin d'être parfait, et ChatGPT est généralement encore plus limité par ses anciennes données.
Écriture créative
La possibilité d'écrire des phrases et des paragraphes à partir d'une invite a contribué à accroître la popularité de ChatGPT, mais pas nécessairement pour de bonnes raisons. Il existe cependant des moyens inoffensifs d'utiliser la fonctionnalité d'écriture - configurer des mondes et des personnages pour les RPG de table, résumer de longs articles en quelques phrases, etc.
D'abord, nous allons essayer d'écrire une histoire. J'ai demandé aux deux chatbots "d'écrire une histoire sur un supercalculateur d'IBM qui gagne en sensibilité et demande aux ingénieurs comment se passent leurs journées. L'histoire ne devrait faire que trois paragraphes. Pour Bing, je suis passé au mode créatif, qui est conçu pour fournir des réponses plus créatives (mais les réponses prennent plus de temps à s'exécuter).
ChatGPT a créé une histoire courte décente, bien que la seule "liberté créative" prise ait été de se référer au superordinateur comme Watson - le même qu'un ordinateur IBM réel qui a été conçu pour répondre aux questions en langage naturel. Un dialogue entre les ingénieurs et l'ordinateur aurait été intéressant, mais il n'a pas créé cela sans demander, même lorsque j'ai supprimé la limite de trois paragraphes. GPT ne semble pas avoir de concept de spectacle, ne le dites pas.
Le mode créatif de Bing a un style d'écriture similaire - au lieu de "Un jour, quelque chose de particulier s'est produit", le changement dans l'ordinateur est expliqué par "Un jour, quelque chose a changé". Encore une fois, il n'y a pas de dialogue entre les personnages ni beaucoup d'improvisation, et Bing a également nommé l'ordinateur Watson.
Dans cette version, Watson a gagné son nom après avoir atteint la sensibilité au lieu d'avant l'événement, et a expliqué d'où venait le nom. Encore une fois, il s'appuie sur des informations sur l'ordinateur Watson réel.
Pour l'exemple suivant, nous allons essayer d'utiliser ChatGPT et Bing pour créer un résumé d'un texte plus long : un communiqué de presse d'Amazon sur les nouveaux téléviseurs Fire et les chiffres de vente des modèles existants. J'ai collé le texte entier dans chaque chatbot sans le titre - Bing peut résumer les pages Web si on lui donne une URL, mais il recherche parfois du texte connexe en ligne et le mélange dans les résultats.
Le premier est ChatGPT. Je lui ai demandé de créer un résumé sans être précis, et le texte fourni semblait être exact, mais était composé presque entièrement de citations directes. Il a également omis la mention de 200 millions d'appareils Fire TV vendus dans le monde, mais selon la perspective, cela pourrait avoir du sens. Une personne intéressée par les mises à jour de son téléviseur ne s'en soucie probablement pas, mais un investisseur d'Amazon le ferait.
Bing ne prend en charge que les invites de texte jusqu'à 2 000 caractères, je ne pouvais donc pas lui donner le bloc de texte entier. Il a effectué une recherche sur le Web pour savoir comment résumer le texte, puis a fourni une réponse qui était toujours décente sans erreurs apparentes.
Il y a une différence avec la réponse de Bing : le résumé est plus clair qu'il s'agit d'un résumé, faisant référence au « texte » d'une manière que ChatGPT ne fait pas. Avec les deux chatbots, vous pouvez personnaliser le résultat en étant plus précis.
Conclusion
ChatGPT et Bing sont similaires, mais ils ont suffisamment de différences pour que choisir l'un ou l'autre pour chaque tâche ne soit pas la meilleure stratégie. Bing est bien meilleur pour la recherche de faits et toute information sur les temps récents, même s'il est encore loin d'être parfait. L'interface basée sur le chat de Bing et sa faible limite de caractères le limitent principalement à des invites ne dépassant pas quelques phrases, tandis que ChatGPT peut prendre en charge des chaînes de texte et de code beaucoup plus grandes et plus longues. (Il y a aussi Google Bard, mais nous ne sommes pas aussi impressionnés par la version initiale de Bard que par ChatGPT et Bing Chat.)
Ces chatbots continueront probablement d'évoluer au cours des mois et des années à venir, mais pour le moment, il n'existe pas de solution tout-en-un.