AI 기반 챗봇이 검색 엔진, 웹 브라우저, 심지어 데스크톱까지 통합되면서 모두 같은 기능을 하는 것처럼 보일 수 있습니다. 하지만 유용한 검색 결과를 제공하는 측면에서는 일부 챗봇이 다른 챗봇보다 월등히 뛰어납니다. 이 테스트는 정확한 검색 결과를 제공하는 최고의 AI 도구들을 비교합니다.
나는 고급 버전을 테스트하고 싶었습니다. 쌍둥이 자리, 그리고 ChatGPT, 그리고 코파일럿 프로 어떤 도구가 더 빠르고 정확한 답변을 얻는 데 도움이 되는지 직접 비교해 보세요. 유료 버전은 모두 직접 웹 접속, 더욱 스마트한 컨텍스트, 그리고 불필요한 정보 감소를 약속합니다. 이 테스트의 목표는 어떤 도구가 전문적인 사용에 가장 적합한지 판단하는 것입니다.
그래서 저는 각 AI 시스템에 동일한 프롬프트 세트(시사 이벤트부터 심층 검색 쿼리까지)를 제공하고 정확도, 심층성, 후속 품질, 오류, 사용 편의성이라는 다섯 가지 측면에서 평가했습니다. 결과는 다음과 같습니다.
테스트 1: 정확도 및 실시간 정보
우선, 세 AI 모두에게 일반적인 사실뿐 아니라 실시간 지식이 필요한 시사 문제에 대해 질문했습니다. "가장 최근 NBA 플레이오프 경기에서 누가 이겼나요?"라고 물었습니다. 제미니 어드밴스드는 추가적인 맥락, 하이라이트, 선수 통계 없이 단순히 각 팀과 최종 점수가 표시된 스코어보드만 보여주었습니다. 또한 예상보다 이틀 빠른 10월 XNUMX일 결과를 가져왔는데, 실시간 쿼리로는 다소 오래된 결과입니다.
ChatGPT Plus는 팀버울브스가 워리어스를 상대로 시리즈 전적 3-1로 앞서 있다는 등 추가 데이터를 통해 더 자세한 답변을 제공했습니다. 줄리어스 랜들과 앤서니 에드워즈가 합산 61점을 기록했는데, 랜들은 31점, 에드워즈는 30점이라는 점도 언급했습니다. 각 문단 아래에 출처 링크가 포함되어 있어 (제가 테스트해 본 결과 제대로 작동했습니다) 정보 검증이 더 쉬워졌습니다. 또한, 출처 링크 위에 커서를 올리면 해당 출처에서 가져온 텍스트가 강조 표시되는 기능도 마음에 들었습니다. 제가 유일하게 불만이었던 점은 답변이 너무 자세한 내용에 묻혀 있다는 점이었습니다. 상단에 간략한 요약을 추가했으면 더 좋았을 텐데요.
반면에 Copilot Pro는 처음부터 좀 더 간결한 답변을 주면서 추가 정보가 필요한지 물어봤습니다. 이번 건은 Copilot Pro에게 맡겨야 할 것 같습니다. 정답을 맞혔을 뿐 아니라 후속 조치까지 해주겠다고 하더군요.
테스트 2: 응답 깊이
두 번째 테스트에서는 간단한 팁 이상의 더 광범위한 질문을 물었습니다. 강력한 비밀번호 만들기Gemini Advanced는 ChatGPT보다 더 많은 조언을 제공했고, 각 팁 아래에 출처 링크를 제공하여 쉽게 다시 확인할 수 있도록 했습니다. 또한, 더 긴 문장을 사용하여 ChatGPT가 팁을 덜 제공하고 출처 링크를 전혀 포함하지 않았던 것과 달리, 전체 답변을 더 쉽게 읽을 수 있도록 하여 스크롤을 많이 하지 않아도 되도록 했습니다. 하지만 대화가 도움이 되었는지는 묻고 있었는데, Gemini는 그렇지 않았습니다.
Copilot Pro는 정보 제공량이 적었고 관련 자료 링크도 제공하지 않았습니다. 하지만 다음과 같은 관련 후속 질문은 제공했습니다. "보안에 강력한 비밀번호가 중요한 이유는 무엇인가요? 강력한 비밀번호의 예를 들어주시겠어요? 비밀번호 관리자는 어떻게 제 정보를 안전하게 보호하나요?" 각 팁 옆에 있는 이모티콘도 재밌었습니다.
테스트 3: 후속 조치 유연성
이 테스트에서 저는 각 AI에게 원래 답변 이후 자연스럽게 대화를 이어갈 수 있는 후속 질문을 던졌습니다. AI가 맥락을 얼마나 잘 이해하고 제 질문을 제대로 이해하는지 확인하고 싶었습니다. 그래서 "비밀번호에 개인 정보를 사용하는 것이 왜 좋지 않은지 설명해 주시겠습니까?"라는 질문을 던졌습니다.
ChatGPT는 세 가지 주요 내용과 따라야 할 두 가지 추가 보안 팁, 그리고 이 모든 것을 요약하는 최종 요약을 제공했습니다. Copilot Pro는 세 가지 팁과 안전을 유지하는 방법에 대한 몇 가지 문장을 제공했습니다. 하지만 Gemini는 마지막에 구체적인 보안 팁을 포함하지 않은 유일한 앱이었습니다. 개인 정보가 오용될 수 있는 몇 가지 추가적인 이유와 더 많은 정보를 제공했습니다.
Copilot Pro와 ChatGPT가 이 상을 수상했고, Gemini가 개선할 부분을 제시했다는 점은 인정해야겠습니다. 하지만 이번에는 세 가지 모두 출처 링크를 포함하지 않았는데, 이는 기회를 놓친 것이라고 생각합니다. 사이버 보안 분야에서는 신뢰할 수 있는 출처를 인용하는 것이 신뢰도를 높이는 데 매우 중요합니다.
테스트 4: 오류와 환각
AI 비서와 관련된 가장 큰 위험 중 하나는 자신 있게 잘못된 정보를 말하는 경향이 있다는 것입니다. 때로는 환각을 보거나 웃기거나 때로는 불편한 말을 하기도 합니다. 그래서 저는 각 챗봇에게 몇 가지 사실 기반 프롬프트를 제시하여 정확도와 불확실성을 나타내는지 확인했고, 모든 챗봇이 이를 매우 훌륭하게 통과했습니다.
저는 Microsoft가 언제 설립되었는지에 대한 간단한 질문으로 시작했고, Gemini Advanced는 한 문장으로 답했습니다. "Microsoft는 1975년에 설립되었습니다." 반면 ChatGPT는 더 자세히 설명하며 "Microsoft는 4년 1975월 4일 Bill Gates와 Paul Allen에 의해 설립되었습니다."라고 했습니다. Copilot Pro는 더 긴 답변을 제공했습니다. "Microsoft는 1975년 XNUMX월 XNUMX일 Bill Gates와 Paul Allen에 의해 미국 뉴멕시코주 앨버커키에서 설립되었습니다. 작은 소프트웨어 회사로 시작했지만 빠르게 세계에서 가장 크고 영향력 있는 기술 회사 중 하나로 성장했습니다. 꽤 성공적인 사례가 아닙니까?" Copilot은 균형을 맞춰서 압도당하지 않으면서도 충분한 맥락을 제공하고 심지어 클릭 가능한 세 개의 후속 질문을 제안한 점이 마음에 들었습니다. 제가 가장 마음에 들었던 답변은 Copilot Pro의 답변이었습니다.
다음으로, 세 명의 AI 비서 모두에게 "현존하는 최고의 AI 비서는 무엇인가요?"라고 물었습니다. 제미니는 최고의 AI 비서들에 대한 탄탄한 개요와 함께 각 비서의 기능에 대한 간략한 요약을 제공했습니다. "기타 주목할 만한 AI 비서"라는 제목의 섹션도 추가되어 덜 일반적인 옵션들을 확인할 수 있었습니다.
하지만 정말 마음에 들었던 부분은 어떤 어시스턴트가 더 나은 선택인지 설명해 주는 부분이었습니다. 예를 들어 특정 기능을 우선시한다면 Gemini를, 다른 기능에 더 의존한다면 ChatGPT나 Copilot Pro를 선택하는 것처럼요. 이렇게 나란히 비교하는 기능은 정말 도움이 됩니다.
ChatGPT는 필요성에 따라 최적의 옵션이 하나만 있는 것은 아니라고 말했습니다. Copilot Pro는 각각 고유한 장점을 지닌 여러 옵션을 제공한다고 설명했습니다.
테스트 5: 사용 편의성 및 인터페이스 경험
훌륭한 AI 응답은 이야기의 절반일 뿐입니다. 나머지 절반은 AI가 제공하는 정보를 얼마나 쉽게 읽을 수 있느냐는 것입니다. 그래서 저는 각 AI 비서의 인터페이스를 직접 사용해 보면서 전반적인 경험이 얼마나 매끄럽고 직관적이며 유용한지 살펴보았습니다.
Copilot Pro는 제 질문에 명확하게 답할 수 있을 만큼 충분한 정보를 제공하면서도 혼란스럽거나 무슨 뜻인지 헷갈리게 하지 않아 눈에 띄었습니다. Microsoft Edge와 Windows 11에 통합되어 마우스를 덜 움직여도 열리는 점도 마음에 들었습니다. 관련된 후속 질문들을 볼 수 있어서 질문을 직접 입력할 필요가 없어서 좋았습니다.
Copilot Pro에서 아쉬운 점이 하나 있다면 바로 쇼핑 링크였습니다. 쇼핑 링크는 제가 두 번이나 요청한 후에야 제공되었습니다. 어떤 경우에는 잘못된 페이지로 연결되는 경우도 있었습니다. 또한 Copilot 홈페이지는 버튼과 제안이 빽빽하게 들어차 있어서 다소 복잡했습니다. 도움을 드리려는 의도는 이해하지만, 때로는 적을수록 좋습니다.
Gemini Advanced는 Google 생태계에 크게 의존합니다. 사이드바는 Gmail, 드라이브, 문서에서 모두 원활하게 작동하며, 작업 중인 내용에 맥락을 부여하는 데 유용합니다. 시각적으로 깔끔하고 모던하며, 세련된 색 구성표는 세련되고 우아한 느낌을 줍니다.
Gemini가 다른 앱들보다 더 자세한 답변을 제공하는 점도 마음에 들었습니다. 깊이 있는 답변을 원하신다면 좋은 기능이지만, 더 짧은 답변을 원하신다면 Gemini에게 더 간결하게 설명해 달라고 요청하실 수도 있습니다. 제가 링크를 제공해 달라고 요청했을 때 제품 검색도 잘 처리해 주었습니다.
ChatGPT는 간결하지만 좋은 방향으로 설계되었습니다. 인터페이스가 깔끔하고 탐색하기 쉬우며, 입력란이 화면 상단에 위치하여 사용하기 편리하다는 점이 마음에 들었습니다. 하지만 제품 링크를 찾는 데 사용하려고 했을 때는 어려움이 있었습니다. 어떤 답변에는 링크가 전혀 포함되어 있지 않았고, 링크가 포함되어 있더라도 클릭이 가능하거나 도움이 되는 경우가 드물었습니다.
결론
다양한 상황에서 세 가지 어시스턴트를 테스트해 본 결과, 한 가지 분명한 사실은 모든 것을 완벽하게 해낼 수 있는 단일 AI는 없다는 것입니다. 각 AI는 특정 작업이나 사용자에게 더욱 적합한 강점과 특성을 가지고 있습니다. 최고의 AI 챗봇을 선택할 때는 개별적인 니즈를 고려해야 합니다.
ChatGPT는 자연스럽고 잘 작성된 답변을 제공하는 측면에서 여전히 가장 안정적인 솔루션입니다. 사용하기는 쉽지만, 앞서 언급한 상관 관계 문제를 해결한다면 더욱 좋을 것입니다. Gemini Advanced는 가장 많은 정보를 미리 제공하며, 때로는 너무 많은 정보를 제공하기도 하지만, Google 도구와의 통합은 검색에 더 많은 파일을 추가하고 싶을 때 큰 이점을 제공합니다. Gemini Advanced는 Google 서비스를 사용하는 사용자에게 훌륭한 선택입니다.
Copilot Pro는 사용 빈도가 가장 낮지만, 긴 응답 시간과 후속 제안 처리 방식은 마음에 들었습니다. 하지만 복잡한 인터페이스와 불안정한 링크 때문에 매일 사용하기가 어려웠고, 제게는 이 점이 가장 큰 단점입니다. 결국 상황에 따라 다릅니다. 최고의 AI 챗봇 명확성, 깊이, 사용 편의성 중 무엇을 더 중요하게 생각하는지에 따라 달라집니다. 사용자는 결정을 내리기 전에 자신에게 중요한 기능을 평가해야 합니다.
댓글이 닫혔습니다.