ChatGPT vs Bing Chat AI: quale è meglio?

ChatGPT e Bing Chat sono due dei chatbot più popolari in questo momento e sono entrambi alimentati da un modello LLM (Large Language Model) simile creato da OpenAI. Ma quale è effettivamente meglio usare?

ChatGPT e Bing Chat AI sono entrambi basati sul modello di linguaggio GPT sviluppato da OpenAI, ma eseguono versioni diverse e ci sono differenze nel modo in cui vengono gestiti gli input. A partire da aprile 2023, Bing utilizza una versione di prova del modello GPT-4, mentre ChatGPT si trova sul vecchio modello GPT 3.5-turbo. Entrambi i chatbot hanno personalizzazioni basate sul modello linguistico, come diversi metodi di input e funzionalità dell'interfaccia, e Bing ha specificamente l'integrazione con applicazioni come Edge e Skype.

Nota: ChatGPT e Bing Chat stanno cambiando rapidamente e nessuno dei due chatbot fornisce la stessa risposta esatta per un determinato prompt a ogni tentativo. I risultati possono variare con i suggerimenti utilizzati qui.

Usabilità e accesso

Bing Chat e ChatGPT sono entrambi disponibili per chiunque si iscriva con un account, sebbene Bing ti faccia prima entrare in una "lista d'attesa", che garantisce immediatamente l'accesso. Entrambi i chatbot hanno versioni web disponibili, tranne per il fatto che il sito di Bing blocca tutti i browser tranne Microsoft Edge senza soluzioni alternative. Puoi utilizzare Bing Chat con un account Microsoft su bing.com/new e abbiamo una spiegazione su come utilizzare ChatGPT.

Bing è anche integrato in altre app e servizi Microsoft, come una barra laterale in Microsoft Edge, un chatbot in Skype e l'app mobile Bing. ChatGPT non ha un'app mobile ufficiale, ma puoi utilizzare l'app Web su un telefono o tablet. Tuttavia, Microsoft è stata più lenta nell'aggiungere funzionalità dall'interfaccia Web alla barra laterale Edge, al chatbot di Skype e ad altre interfacce. Se desideri tutte le funzionalità di Bing Chat, dovresti attenersi al sito di Bing, almeno per ora.

L'interfaccia web per ChatGPT e Bing Chat è simile, ma con piccole differenze che ne cambiano l'utilità. ChatGPT è progettato per raccogliere più dati, come blocchi di codice più lunghi o campioni di codice di grandi dimensioni. A partire da aprile 2023, Bing limita i prompt a 2.000 caratteri, mentre il limite di ChatGPT è molto più alto (e non dichiarato ufficialmente).

Accuratezza fattuale

ChatGPT non ha la capacità di indicizzare il Web in tempo reale per ottenere informazioni, anche se alla fine sarà possibile con l'uso di plug-in. È limitato ai dati di addestramento nel suo modello, che risale a settembre 2021. Inoltre, a OpenAI non piace condividere il modo in cui i suoi dati sono stati raccolti, o come viene testata l'accuratezza e così via. Anche Bing si basa sulla stessa tecnologia GPT, ma di solito preferisce i risultati dal Web rispetto ai dati di addestramento.

Bing Chat e ChatGPT di solito hanno ragione quando si tratta di fatti di base, come le capitali di paesi o stati, quando è nata una persona importante e così via. Ad esempio, Bing e ChatGPT sono stati entrambi in grado di dirmi con precisione qual è la capitale del Regno Unito (Londra), quante stelle sulla bandiera degli Stati Uniti (50 stelle) e quante zampe ha un cane (quattro) . Se è semplice, probabilmente entrambi i bot avranno ragione... ma lo stesso vale per qualsiasi normale motore di ricerca. Inizi ad avere problemi quando rispondere a una domanda implica un certo livello di interpretazione.

Ad esempio, ho provato a chiedere a entrambi i robot: "Quali capitali di stato negli Stati Uniti iniziano con la lettera A?" Sembra semplice, ma è ancora un processo in più fasi: prima hai bisogno di un elenco di tutte le capitali, quindi devi filtrarlo fino a quelle che iniziano con la lettera A. Wikipedia ne conta cinque in totale: Albany, Annapolis, Atlanta , Augusta e Austin. Bing Chat ha risposto correttamente alla domanda, citando diverse pagine web che elencano capitali negli Stati Uniti. ChatGPT... ha avuto dei problemi.

Innanzitutto, ChatGPT mi ha fornito un elenco di quattro capitali: Albany, Annapolis, Atlanta e Augusta. Dopodiché, ha detto: "C'è anche Austin, che è la capitale del Texas, ma non inizia con la lettera A". Fare la stessa domanda più volte a volte ha completamente escluso la menzione di Austin. Chiedere perché Austin è scomparso ha fatto sì che ChatGPT ricordasse che Austin esiste e si scusasse per l'errore, ma non è chiaro il motivo per cui si è rotto con la risposta iniziale.

Ho provato un'altra domanda a cui entrambi i chatbot dovrebbero essere in grado di rispondere correttamente, anche con i dati più vecchi di ChatGPT: "Quali tre paesi sono stati ammessi più di recente nell'Unione Europea?" Wikipedia spiega che la Croazia è stato lo stato membro più recente, aderendo il 1° luglio 2013, con la Bulgaria e la Romania che lo hanno preceduto lo stesso giorno: 1° gennaio 2007.

ChatGPT risponde correttamente a questa domanda, incluso l'ordine dei paesi e le date. Bing menziona correttamente che la Croazia era gli stati membri più recenti, ma elenca la Slovenia e Malta come gli altri due paesi. Sia la Slovenia che Malta si sono unite il 1° maggio 2004, contemporaneamente ad altre otto nazioni, ma molto prima della Bulgaria e della Romania nel 2007.

Bing avrebbe dovuto rispondere correttamente alla risposta, non solo perché ha accesso a Internet, ma anche perché la prima citazione è una pagina ufficiale dell'UE con una cronologia corretta dei paesi recenti. Un'altra citazione sembra provenire da una versione archiviata di Wikipedia precedente al 2007 destinata all'uso nelle scuole, che elencava la Bulgaria e la Romania come paesi che avrebbero aderito nel gennaio 2007.

In sintesi, Bing Chat è generalmente migliore nella ricerca dei fatti, ma è ancora tutt'altro che perfetto e ChatGPT è solitamente ancora più limitato dai suoi vecchi dati.

Scrittura creativa

La capacità di scrivere frasi e paragrafi su richiesta ha contribuito ad aumentare la popolarità di ChatGPT, ma non necessariamente per buoni motivi. Tuttavia, esistono alcuni modi innocui per utilizzare la funzionalità di scrittura: impostare mondi e personaggi per giochi di ruolo da tavolo, riassumere lunghi articoli in poche frasi e così via.

Per prima cosa, proveremo a scrivere una storia. Ho chiesto a entrambi i chatbot di “Scrivere una storia su un supercomputer in IBM che diventa senziente e chiede agli ingegneri come stanno andando le loro giornate. La storia dovrebbe essere lunga solo tre paragrafi. Per Bing, sono passato alla modalità creativa, progettata per fornire risposte più creative (ma le risposte richiedono più tempo per essere eseguite).

ChatGPT ha creato un racconto decente, anche se l'unica "libertà creativa" concessa è stata quella di riferirsi al supercomputer come Watson, lo stesso di un computer IBM nella vita reale che è stato costruito per rispondere a domande in linguaggio naturale. Qualche dialogo tra gli ingegneri e il computer sarebbe stato interessante, ma non lo ha creato senza chiedere, anche quando ho rimosso il limite di tre paragrafi. GPT non sembra avere un concetto di spettacolo, non dirlo.

La modalità creativa di Bing ha uno stile di scrittura simile: invece di "Un giorno, è successo qualcosa di strano", il cambiamento nel computer è spiegato con "Un giorno, qualcosa è cambiato". Ancora una volta, non c'è dialogo tra i personaggi o molta improvvisazione, e Bing ha anche chiamato il computer Watson.

In questa versione, Watson ha preso il nome dopo aver raggiunto la sensibilità invece che prima dell'evento, e ha spiegato da dove viene il nome. Ancora una volta, attinge dalle informazioni sull'effettivo computer Watson.

Per il prossimo esempio, proveremo a utilizzare ChatGPT e Bing per creare un riepilogo di un testo più lungo: un comunicato stampa di Amazon sui nuovi Fire TV e i dati di vendita dei modelli esistenti. Ho incollato l'intero testo in ogni chatbot senza il titolo: Bing può riassumere le pagine Web se gli viene fornito un URL, ma a volte cerca il testo correlato online e lo mescola nei risultati.

Il primo è ChatGPT. Gli ho chiesto di creare un riassunto senza essere specifico, e il testo fornito sembrava accurato, ma era composto quasi interamente da citazioni dirette. Ha anche tralasciato la menzione di 200 milioni di dispositivi Fire TV venduti a livello globale, ma a seconda della prospettiva, potrebbe avere senso. A una persona interessata agli aggiornamenti per la propria TV probabilmente non interessa, ma un investitore in Amazon lo farebbe.

Bing supporta solo prompt di testo fino a 2.000 caratteri, quindi non ho potuto assegnargli l'intero blocco di testo. Ha eseguito una ricerca sul Web su come riassumere il testo, quindi ha fornito una risposta che era ancora decente senza errori apparenti.

C'è una differenza con la risposta di Bing: il sommario è più chiaro che è un riassunto, riferendosi al "testo" in un modo che ChatGPT non fa. Con entrambi i chatbot, puoi personalizzare il risultato essendo più specifico.

Conclusione

ChatGPT e Bing sono simili, ma hanno abbastanza differenze che scegliere l'uno o l'altro per ogni attività non è la strategia migliore. Bing è molto più bravo nella ricerca di fatti e in qualsiasi informazione sui tempi recenti, sebbene sia ancora tutt'altro che perfetto. L'interfaccia basata sulla chat di Bing e il basso limite di caratteri lo limitano principalmente a richiedere non più di poche frasi, mentre ChatGPT può contenere stringhe di testo e codice molto più grandi e più lunghe. (C'è anche Google Bard, ma non siamo così colpiti dalla versione iniziale di Bard come lo siamo da ChatGPT e Bing Chat.)

Questi chatbot continueranno probabilmente a evolversi nei prossimi mesi e anni, ma per il momento non esiste una soluzione all-in-one.