ChatGPT ve Bing Chat AI: Hangisi Daha İyi?

ChatGPT ve Bing Chat şu anda en popüler sohbet robotlarından ikisi ve her ikisi de benzer bir OpenAI tarafından oluşturulmuş büyük dil modeli (LLM) tarafından destekleniyor. Ama aslında hangisini kullanmak daha iyi?

ChatGPT ve Bing Chat AI, OpenAI tarafından geliştirilen GPT dil modelini temel alır, ancak farklı sürümleri çalıştırırlar ve girdilerin nasıl işlendiği konusunda farklılıklar vardır. Nisan 2023 itibarıyla Bing, GPT-4 modelinin test sürümünü kullanırken ChatGPT eski GPT 3.5 turbo modelini kullanıyor. Her iki sohbet robotunun da farklı giriş yöntemleri ve arabirim özellikleri gibi dil modeli üzerine kurulu özelleştirmeleri vardır ve Bing'in özellikle Edge ve Skype gibi uygulamalarla entegrasyonu vardır.

Not: ChatGPT ve Bing Chat hızlı bir şekilde değişiyor ve her iki chatbot da her denemede belirli bir istem için aynı yanıtı vermiyor. Sonuçlarınız burada kullanılan istemlere göre değişebilir.

Kullanılabilirlik ve Erişim

Bing Chat ve ChatGPT, bir hesapla kaydolan herkes tarafından kullanılabilir, ancak Bing sizi önce bir "bekleme listesine" katılmaya zorlar ve bu da hemen erişim sağlar. Her iki sohbet robotunun da web sürümleri vardır, ancak Bing'in sitesi Microsoft Edge hariç her tarayıcıyı geçici çözümler olmadan engeller. Bing Chat'i bing.com/new adresinde bir Microsoft hesabıyla kullanabilirsiniz ve ChatGPT'nin nasıl kullanılacağına ilişkin bir açıklamamız var.

Bing, Microsoft Edge'deki kenar çubuğu, Skype'taki sohbet robotu ve mobil Bing uygulaması gibi diğer Microsoft uygulamalarına ve hizmetlerine de entegre edilmiştir. ChatGPT'nin resmi bir mobil uygulaması yoktur, ancak web uygulamasını bir telefon veya tablette kullanabilirsiniz. Ancak Microsoft, web arayüzünden Edge kenar çubuğuna, Skype sohbet botuna ve diğer arayüzlere özellikler eklemek için daha yavaş olmuştur. Bing Chat'in tüm özelliklerini istiyorsanız, en azından şimdilik Bing sitesine bağlı kalmalısınız.

ChatGPT ve Bing Chat için web arabirimi benzerdir, ancak kullanışlılıklarını değiştiren küçük farklılıklar vardır. ChatGPT, daha uzun kod blokları veya büyük kod örnekleri gibi daha fazla veri alacak şekilde tasarlanmıştır. Nisan 2023 itibariyle, Bing istemleri 2.000 karakterle sınırlarken, ChatGPT'nin sınırı çok daha yüksektir (ve resmi olarak belirtilmemiştir).

Gerçek Doğruluk

ChatGPT, bilgi için web'i gerçek zamanlı olarak dizine ekleme yeteneğine sahip değildir - ancak bu, eklentilerin kullanımıyla eninde sonunda mümkün olacaktır. Eylül 2021'e dayanan modelindeki eğitim verileriyle sınırlıdır. OpenAI ayrıca verilerinin nasıl toplandığını veya doğruluğunun nasıl test edildiğini vb. paylaşmaktan hoşlanmaz. Bing de aynı GPT teknolojisine dayalıdır, ancak genellikle web'den alınan sonuçları eğitim verilerine tercih eder.

Bing Chat ve ChatGPT, ülkelerin veya eyaletlerin başkentleri, önemli bir kişinin ne zaman doğduğu vb. gibi temel gerçekler söz konusu olduğunda genellikle haklıdır. Örneğin, Bing ve ChatGPT bana İngiltere'nin başkentinin ne olduğunu (Londra), Amerika Birleşik Devletleri bayrağında kaç yıldız olduğunu (50 yıldız) ve bir köpeğin kaç bacağı olduğunu (dört) doğru bir şekilde söyleyebildiler. . Basitse, her iki bot da muhtemelen haklı olacaktır… ama herhangi bir normal arama motoru da öyle olacaktır. Bir soruyu yanıtlarken bir miktar yorumlama içerdiğinde sorun yaşamaya başlarsınız.

Örneğin, her iki bota da "Amerika Birleşik Devletleri'nde hangi eyalet başkentleri A harfiyle başlıyor?" Bu basit görünüyor, ancak yine de çok adımlı bir süreç - önce tüm büyük harflerin bir listesine ihtiyacınız var, ardından onu A harfiyle başlayanlara göre filtrelemeniz gerekiyor. Vikipedi toplamda beş tane sayar: Albany, Annapolis, Atlanta , Augusta ve Austin. Bing Chat, Amerika Birleşik Devletleri'ndeki başkentleri listeleyen birkaç web sayfasına atıfta bulunarak soruyu doğru yanıtladı. ChatGPT… bazı sorunlar yaşadı.

İlk olarak, ChatGPT bana dört başkentin bir listesini verdi: Albany, Annapolis, Atlanta ve Augusta. Ondan sonra “Teksas'ın başkenti olan Austin de var ama A harfi ile başlamıyor” dedi. Aynı soruyu birden çok kez sormak bazen Austin'den bahsetmeyi tamamen dışladı. Austin'in neden kayıp olduğunu sormak, ChatGPT'nin Austin'in var olduğunu hatırlamasına ve hata için özür dilemesine neden oldu, ancak neden ilk yanıttan koptuğu belli değil.

ChatGPT'nin eski verileriyle bile her iki sohbet robotunun da doğru yanıt verebilmesi gereken başka bir soru denedim: "Avrupa Birliği'ne en son hangi üç ülke kabul edildi?" Wikipedia, Hırvatistan'ın 1 Temmuz 2013'te katılan en son üye devlet olduğunu, Bulgaristan ve Romanya'nın da aynı gün, yani 1 Ocak 2007'de geldiğini açıklıyor.

ChatGPT, ülkelerin sırası ve tarihler de dahil olmak üzere bu soruyu doğru yanıtlar. Bing doğru bir şekilde Hırvatistan'ın en son üye devletler olduğundan bahsediyor, ancak diğer iki ülke olarak Slovenya ve Malta'yı listeliyor. Hem Slovenya hem de Malta, 1 Mayıs 2004'te, diğer sekiz ülkeyle aynı zamanda katıldı, ancak bu, 2007'de Bulgaristan ve Romanya'dan çok önceydi.

Bing, yalnızca internet erişimi olduğu için değil, aynı zamanda ilk alıntı, son ülkelerin doğru zaman çizelgesini içeren resmi bir AB sayfası olduğu için yanıtı doğru yanıtlamış olmalıydı . Başka bir alıntı, Bulgaristan ve Romanya'nın Ocak 2007'de katılacak ülkeler olarak listelendiği okullarda kullanılmak üzere tasarlanmış, 2007'den önceki Wikipedia'nın arşivlenmiş bir versiyonundan geliyor gibi görünüyor.

Özetle, Bing Chat bilgi bulma konusunda genellikle daha iyidir, ancak yine de mükemmel olmaktan uzaktır ve ChatGPT genellikle eski verileri nedeniyle daha da sınırlıdır.

Yaratıcı Yazarlık

İstem verildiğinde cümleler ve paragraflar yazabilme özelliği, ChatGPT'nin popülaritesini artırmaya yardımcı oldu, ancak bunun iyi nedenleri olması gerekmez. Yine de, yazma işlevini kullanmanın bazı zararsız yolları vardır - masaüstü RPG'ler için dünyalar ve karakterler oluşturmak, uzun makaleleri birkaç cümlede özetlemek vb.

İlk önce bir hikaye yazmayı deneyeceğiz. Her iki sohbet robotundan da “IBM'de duyarlılık kazanan bir süper bilgisayar hakkında bir hikaye yazmalarını ve mühendislere günlerinin nasıl geçtiğini sormalarını istedim. Hikaye sadece üç paragraf uzunluğunda olmalı.” Bing için, daha yaratıcı yanıtlar sağlamak üzere tasarlanmış (ancak yanıtların çalıştırılması daha uzun sürüyor) Yaratıcı Mod'a geçtim.

ChatGPT düzgün bir kısa hikaye yarattı, ancak alınan tek "yaratıcı özgürlük", süper bilgisayardan Watson olarak bahsetmekti - doğal dil sorularını yanıtlamak için oluşturulmuş gerçek hayattaki bir IBM bilgisayarının aynısı. Mühendisler ve bilgisayar arasındaki bazı diyaloglar ilginç olabilirdi, ancak üç paragraf sınırını kaldırdığımda bile sormadan bunu yaratmadı. GPT'nin bir şov konsepti yok gibi görünüyor, söyleme.

Bing'in Yaratıcı Modu benzer bir yazı stiline sahiptir - "Bir gün, tuhaf bir şey oldu" yerine, bilgisayardaki değişiklik "Bir gün, bir şey değişti" ile açıklanır. Yine, karakterler arasında diyalog veya çok fazla doğaçlama yok ve Bing ayrıca bilgisayara Watson adını verdi.

Bu versiyonda Watson, adını olaydan önce değil, duyarlılığa ulaştıktan sonra almış ve adının nereden geldiğini açıklamıştır. Yine, gerçek Watson bilgisayarı hakkındaki bilgilerden yararlanıyor.

Bir sonraki örnekte, daha uzun bir metnin özetini oluşturmak için ChatGPT ve Bing'i kullanmayı deneyeceğiz: Amazon'dan yeni Fire TV'ler ve mevcut modellerin satış rakamları hakkında bir basın açıklaması. Metnin tamamını başlık olmadan her sohbet robotuna yapıştırdım - Bing, bir URL verilirse web sayfalarını özetleyebilir, ancak bazen ilgili metni çevrimiçi arar ve sonuçlara karıştırır.

İlki ChatGPT'dir. Spesifik olmadan bir özet oluşturmasını istedim ve sağlanan metin doğru görünüyordu, ancak neredeyse tamamen doğrudan alıntılardan oluşuyordu. Ayrıca dünya çapında satılan 200 milyon Fire TV cihazından bahsetmedi, ancak bakış açısına bağlı olarak bu mantıklı olabilir. Televizyonu için güncellemelerle ilgilenen bir kişi muhtemelen umursamaz ama Amazon'daki bir yatırımcı umursar.

Bing yalnızca 2.000 karaktere kadar metin istemlerini destekler, bu nedenle ona tüm metin bloğunu veremedim. Metnin nasıl özetleneceğine dair bir web araması yaptı, ardından görünürde hiçbir hata içermeyen makul bir yanıt verdi.

Bing'in yanıtıyla bir fark var: Özet, özet olduğundan daha açık, ChatGPT'nin yapmadığı bir şekilde "metne" atıfta bulunuyor. Her iki sohbet robotunda da sonucu daha belirgin hale getirerek özelleştirebilirsiniz.

Çözüm

ChatGPT ve Bing benzerdir, ancak her görev için birini veya diğerini seçmenin en iyi strateji olmadığı kadar farklılıkları vardır. Bing, gerçekleri bulmada ve son zamanlarla ilgili herhangi bir bilgide çok daha iyidir, ancak yine de mükemmel olmaktan uzaktır. Bing'in sohbet tabanlı arabirimi ve düşük karakter sınırı, onu öncelikle birkaç cümleden fazlasını istemeyecek şekilde sınırlarken, ChatGPT çok daha büyük, daha uzun metin ve kod dizilerini alabilir. (Google Bard da var, ancak Bard'ın ilk sürümünden ChatGPT ve Bing Chat kadar etkilenmedik.)

Bu sohbet robotları muhtemelen önümüzdeki aylarda ve yıllarda gelişmeye devam edecek, ancak şu an için hepsi bir arada bir çözüm yok.