ChatGPT와 Bing Chat AI: 어느 것이 더 낫습니까?

ChatGPT와 Bing Chat은 현재 가장 인기 있는 두 가지 챗봇이며 둘 다 비슷한 OpenAI 생성 대규모 언어 모델(LLM)로 구동됩니다. 그러나 실제로 사용하는 것이 더 낫습니까?

ChatGPT와 Bing Chat AI는 둘 다 OpenAI에서 개발한 GPT 언어 모델을 기반으로 하지만 서로 다른 버전을 실행하고 있으며 입력을 처리하는 방식에도 차이가 있습니다. 2023년 4월부터 Bing은 GPT-4 모델의 테스트 버전을 사용하고 ChatGPT는 이전 GPT 3.5-터보 모델을 사용합니다. 두 챗봇 모두 서로 다른 입력 방법 및 인터페이스 기능과 같은 언어 모델에 구축된 사용자 지정 기능이 있으며 Bing은 특히 Edge 및 Skype와 같은 애플리케이션과 통합됩니다.

참고: ChatGPT와 Bing Chat은 모두 빠른 속도로 변화하고 있으며 두 챗봇 모두 각 시도에서 주어진 프롬프트에 대해 동일한 정확한 답변을 제공하지 않습니다. 여기에 사용된 프롬프트에 따라 결과가 다를 수 있습니다.

사용성 및 접근성

Bing Chat과 ChatGPT는 둘 다 계정에 가입한 모든 사람이 사용할 수 있지만 Bing은 먼저 "대기자 명단"에 가입하여 즉시 액세스 권한을 부여합니다. Bing 사이트가 해결 방법 없이 Microsoft Edge를 제외한 모든 브라우저를 차단한다는 점을 제외하면 두 챗봇 모두 웹 버전을 사용할 수 있습니다. bing.com/new에서 Microsoft 계정으로 Bing Chat을 사용할 수 있으며 ChatGPT 사용 방법에 대한 설명이 있습니다.

Bing은 Microsoft Edge의 사이드바, Skype의 챗봇, 모바일 Bing 앱과 같은 다른 Microsoft 앱 및 서비스에도 통합됩니다. ChatGPT에는 공식 모바일 앱이 없지만 휴대폰이나 태블릿에서 웹 앱을 사용할 수 있습니다. 그러나 Microsoft는 웹 인터페이스의 기능을 Edge 사이드바, Skype 챗봇 및 기타 인터페이스에 추가하는 속도가 느립니다. Bing Chat의 모든 기능을 원한다면 적어도 지금은 Bing 사이트를 고수해야 합니다.

ChatGPT와 Bing Chat의 웹 인터페이스는 유사하지만 유용성을 변경하는 약간의 차이가 있습니다. ChatGPT는 더 긴 코드 블록이나 큰 코드 샘플과 같은 더 많은 데이터를 가져오도록 설계되었습니다. 2023년 4월부터 Bing은 프롬프트를 2,000자로 제한하는 반면 ChatGPT의 제한은 훨씬 더 높습니다(공식적으로 명시되지 않음).

사실적 정확성

ChatGPT는 정보를 위해 웹을 실시간으로 인덱싱할 수 있는 기능이 없습니다. 하지만 결국 플러그인을 사용하면 가능할 것입니다. 2021년 9월로 거슬러 올라가는 모델의 훈련 데이터로 제한됩니다. 또한 OpenAI는 데이터 수집 방법이나 정확성 테스트 방법 등을 공유하는 것을 좋아하지 않습니다. Bing도 동일한 GPT 기술을 기반으로 하지만 일반적으로 교육 데이터보다 웹의 결과를 선호합니다.

Bing Chat 및 ChatGPT는 일반적으로 국가 또는 주 수도, 저명인사가 태어난 시기 등과 같은 기본적인 사실에 관해서는 옳습니다. 예를 들어 Bing과 ChatGPT는 모두 영국의 수도(런던), 미국 국기의 별 개수(별 50개), 개의 다리 개수(별 4개)를 정확하게 알려줄 수 있었습니다. . 간단하다면 두 봇이 모두 맞을 것입니다. 하지만 일반 검색 엔진도 마찬가지입니다. 질문에 답하는 데 일정 수준의 해석이 필요할 때 문제가 발생하기 시작합니다.

예를 들어 두 봇에게 "미국에서 문자 A로 시작하는 주도는 어디인가요?"라고 물었습니다. 그것은 간단해 보이지만 여전히 다단계 프로세스입니다. 먼저 모든 대문자 목록이 필요한 다음 문자 A로 시작하는 것으로 필터링해야 합니다. Wikipedia는 총 5개로 계산합니다: Albany, Annapolis, Atlanta , 오거스타, 오스틴. Bing Chat은 미국의 수도를 나열한 여러 웹 페이지를 인용하여 질문에 올바르게 답변했습니다. ChatGPT… 몇 가지 문제가 있었습니다.

먼저 ChatGPT는 알바니, 아나폴리스, 애틀랜타, 오거스타의 4개 수도 목록을 제공했습니다. 이어 “텍사스의 주도인 오스틴도 있는데 A로 시작하지 않는다”고 했다. 같은 질문을 여러 번 하면 때때로 오스틴에 대한 언급이 완전히 생략됩니다. 오스틴이 누락된 이유를 묻자 ChatGPT는 오스틴이 존재한다는 사실을 기억하고 오류에 대해 사과했지만 초기 답변과 어긋난 이유는 확실하지 않습니다.

나는 ChatGPT의 오래된 데이터를 가지고도 두 챗봇이 올바르게 대답할 수 있어야 하는지 또 다른 질문을 시도했습니다. "가장 최근에 유럽 연합에 가입한 세 국가는?" Wikipedia는 크로아티아가 2013년 7월 1일에 가입한 가장 최근의 회원국이며 불가리아와 루마니아가 같은 날인 2007년 1월 1일에 가입했다고 설명합니다.

ChatGPT는 국가 순서와 날짜를 포함하여 이 질문을 올바르게 처리합니다. Bing은 크로아티아가 가장 최근에 가입한 국가라고 정확하게 언급하지만 슬로베니아와 몰타를 다른 두 국가로 나열합니다. 슬로베니아와 몰타는 모두 2004년 5월 1일에 다른 8개국과 동시에 가입했지만 2007년에는 불가리아와 루마니아보다 훨씬 앞서 있었습니다.

Bing은 인터넷 액세스가 가능할 뿐만 아니라 첫 번째 인용이 최근 국가의 정확한 타임라인이 있는 공식 EU 페이지이기 때문에 답을 올바르게 대답했어야 합니다 . 또 다른 인용은 2007년 1월에 가입할 국가로 불가리아와 루마니아를 나열한 학교에서 사용하기 위한 2007년 이전의 보관된 위키백과 버전에서 나온 것으로 보입니다.

요약하면 Bing Chat은 일반적으로 사실 찾기에 더 좋지만 여전히 완벽하지는 않으며 ChatGPT는 일반적으로 이전 데이터로 인해 훨씬 ​​더 제한됩니다.

창의적 글쓰기

프롬프트가 주어지면 문장과 단락을 작성하는 기능은 ChatGPT의 인기를 높이는 데 도움이 되었지만 반드시 좋은 이유가 있는 것은 아닙니다. 그러나 쓰기 기능을 사용하는 몇 가지 무해한 방법이 있습니다. 테이블탑 RPG용 세계와 캐릭터 설정, 긴 기사를 몇 문장으로 요약하는 등입니다.

먼저 이야기를 써보도록 하겠습니다. 나는 두 챗봇 에게 “IBM의 슈퍼컴퓨터에 대한 이야기를 써서 지각력을 얻고 엔지니어들에게 그들의 하루가 어땠는지 물어보세요. 이야기의 길이는 세 단락이어야 합니다.” Bing의 경우 더 창의적인 답변을 제공하도록 설계된 크리에이티브 모드로 전환했습니다(그러나 답변을 실행하는 데 시간이 오래 걸림).

ChatGPT는 괜찮은 단편 소설을 만들었지만, 유일한 "창의적 자유"는 슈퍼컴퓨터를 Watson이라고 부르는 것이었습니다. 이는 자연어 질문에 답하기 위해 만들어진 실제 IBM 컴퓨터와 동일합니다. 엔지니어와 컴퓨터 간의 일부 대화는 흥미로웠을 것입니다. 그러나 세 단락 제한을 제거하더라도 묻지 않고는 생성되지 않았습니다. GPT는 쇼의 개념이 없는 것 같습니다. 말하지 마세요.

Bing의 크리에이티브 모드는 유사한 글쓰기 스타일을 가지고 있습니다. "언젠가, 뭔가 이상한 일이 일어났습니다." 대신에 컴퓨터의 변화는 "언젠가, 뭔가 바뀌었습니다. 다시 말하지만, 등장인물 사이의 대화나 많은 즉흥 연주가 없으며 Bing은 컴퓨터 이름도 Watson이라고 지정했습니다.

이 버전에서 Watson은 사건 이전이 아니라 지각을 달성한 후에 이름을 얻었고 이름의 유래를 설명했습니다. 다시 말하지만 실제 Watson 컴퓨터에 대한 정보에서 가져옵니다.

다음 예에서는 ChatGPT 및 Bing을 사용하여 더 긴 텍스트의 요약을 생성해 보겠습니다. 새로운 Fire TV 및 기존 모델의 판매 수치에 대한 Amazon의 보도 자료입니다. 제목 없이 전체 텍스트를 각 챗봇에 붙여넣었습니다. Bing은 URL이 제공되면 웹 페이지를 요약할 수 있지만 때때로 온라인에서 관련 텍스트를 찾아 결과에 혼합합니다.

첫 번째는 ChatGPT입니다. 구체적이지 않고 요약본을 만들어 달라고 했더니 제공된 텍스트가 정확한 것 같으나 거의 대부분 직접 인용으로 구성되어 있었다. 또한 전 세계적으로 판매된 2억 대의 Fire TV 장치에 대한 언급도 생략했지만 관점에 따라 말이 될 수 있습니다. TV 업데이트에 관심이 있는 사람은 신경 쓰지 않을 수 있지만 Amazon의 투자자는 관심을 가질 것입니다.

Bing은 최대 2,000자의 텍스트 프롬프트만 지원하므로 전체 텍스트 블록을 제공할 수 없습니다. 텍스트를 요약하는 방법에 대한 웹 검색을 수행한 다음 명백한 오류 없이 여전히 괜찮은 답변을 제공했습니다.

Bing의 답변에는 한 가지 차이점이 있습니다. 요약은 ChatGPT가 제공하지 않는 방식으로 "텍스트"를 참조하는 요약이라는 점에서 더 명확합니다. 두 챗봇 모두 더 구체적으로 결과를 사용자 정의할 수 있습니다.

결론

ChatGPT와 Bing은 비슷하지만 모든 작업에 대해 둘 중 하나를 선택하는 것이 최선의 전략이 아니라는 충분한 차이점이 있습니다. Bing은 여전히 ​​완벽하지는 않지만 사실 찾기 및 최근에 대한 정보에 훨씬 뛰어납니다. Bing의 채팅 기반 인터페이스와 낮은 문자 제한은 주로 몇 문장 이하의 프롬프트로 제한하는 반면 ChatGPT는 훨씬 더 크고 긴 텍스트 및 코드 문자열을 사용할 수 있습니다. (Google Bard도 있지만 Bard의 초기 버전은 ChatGPT 및 Bing Chat만큼 인상적이지 않습니다.)

이러한 챗봇은 앞으로 몇 달, 몇 년 동안 계속 진화할 가능성이 높지만 현재로서는 올인원 솔루션이 없습니다.