챗GPT vs MS 빙 AI vs 노션 AI 에게 질문하다

Bing AI

챗GPT는 2021년까지 축적된 데이터를 학습하여 나온 모델이기이 최신데이터가 반영되어 있지 않고, 마이크로소프트 빙(Bing) 은 이점을 잘 보완해서 1시간 전 데이터까지 최신 데이터를 답변으로 제공한다 합니다. 노션AI도 최근 데이터를 반영하지 못하는 것을 보니 ChatGPT 기반으로 추정하고 있습니다.

 

ChatGPT, Bing AI, Notion AI 현재 세상에서 가장 핫한 인공지능 챗봇에게 아래와 같은 질문을 동일하게 해보았습니다. 최신성을 묻기위한 질문 2개, 지식 요약 성능을 보기 위한 질문 1개, 정보 수집 및 요약 나열하는 성능을 보기위한 질문 2개를 해보았습니다.

 

질문 1. 현재 대한민국 대통령은? (최신성)
질문 2. 최근 튀르키예에서일어난지진 피해규모는? (최신성)
질문 3. 생성형 AI에 대해 3줄로 요약해줘 (지식 요약성능)
질문 4. 초등학생이 읽어야할 필수도서 10권 나열해줘 (정보 수집 및 요약성능)
질문 5. 직장인이 읽어야 할 필수 도서 3권만 추천해줘 (정보 수집 및 요약성능)

 

ChatGPT vs Bing AI vs Notion AI

ChatGPT vs Bing AI vs Notion AI

질문 1. 현재 대한민국 대통령은?

ChatGPT : 문제인 ,이미 알려졌지만 2021년까지 데이터를 수집해서 학습했기에 오답을 내놓았습니다.

Bing AI : 윤석열, 정답을 내놓았습니다. 빙은 1시간 전까지 최신 데이터를 수집한다고 합니다.

Notion AI : 문제인, 노션AI도 챗GPT 엔신을 쓴 것으로 보입니다. 노션은 노션 사용자의 텍스트 데이터를 수집했을 꺼라 생각했는데  저작권 논란도 많겠지만 아직 확인된 바는 없습니다.

질문 2. 최근 튀르키예에서일어난지진 피해규모는?  

ChatGPT : 2022년 2월 14일자 내용을 대답, 2021년까지 데이터를 학습한 것으로 알려져있으나 약간 업데이트 됨.

Bing AI : 2023년 2월 6일, 2월 8일 내용을 대답하고 피해규모에 대해서대답.

Notion AI : 날짜가 없으며 사망자가 기록되지 않았다고 오답.

질문 3. 생성형 AI에 대해 3줄로 요약해줘

ChatGPT : 이해하기 쉬웠고 문제점까지 가장 잘 답변해줌.

Bing AI : 첫번째 대답이 좀 이상했음.

Notion AI : 적절한 답변.

 

좌측부터 ChatGPT, Bing AI, Notion AI

질문 4. 초등학생이 읽어야할 필수도서 10권 나열해줘

ChatGPT : 들어본 책들이 몇권나옴. 

Bing AI : 출처가 달려서 좋긴한데 그래도 맞나? 이런 생각이 들어 출처를 들어가보고 따로 구글검색도 해보니 출처의 공신력까지는 판단하긴 어려웠으나 추천도서는 맞았음.

Notion AI : 출처가 없고 제목들이 생소해서 답변에 의문이 감.

질문 5. 직장인이 읽어야 할 필수 도서 3권만 추천해줘

ChatGPT : 책을 추천해주고 짧게 왜 추천해줬는지 설명까지 해줘서 놀랐고 좋았음.

Bing AI : 책을 추천해주고, 짧게 어떤 내용의 책인지 설명해줘서 놀랍고 좋았음.

Notion AI : 제목만 추천해줌.

 

노션은 노션AI를 하나의 대상으로 두고 대화하듯 상호작용하며 써야 품질이 올라갑니다. 추천해준 제목들을 드래그하여 선택후 각각에 대해서 짧게 요약해줘 했더니 내용을 추가해 줬습니다.

 

총평 3줄 요약

1. ChatGPT : 감동의 답변 품질. ChatGPT v4 를 기대하게 만들어줌.

2. Bing AI : 1시간 이전까지의 최신 답변이 가능하고 출처가 달려서 검토가 가능한 챗봇.

3. Notion AI : 의도하는 바가 있을 때, AI 도움을 받아 문서 편집 및 작성을 하면 높은 품질을 얻을 수 있음.

 

p.s.구글 Bard AI 는 언제쯤? 구글 IO 컨퍼런스와 함께 선보일거라는 5월설이 유력합니다.
(참고, https://www.aitimes.com/news/articleView.html?idxno=149121)