AI 搭載のチャットボットが検索エンジン、Web ブラウザー、さらにはデスクトップに統合されているため、それらはすべて同じ機能を実行していると思われるかもしれません。しかし、有用な検索結果を得るという点では、他の検索エンジンよりも大幅に優れているものがあります。このテストでは、正確な検索結果を得るための最適な AI ツールを比較します。
Gemini、ChatGPT、Copilot Proの高度なバージョンを直接比較テストし、どれがより迅速かつ正確な回答を得られるかを検証したいと考えました。これらはすべて有料版で、直接ウェブアクセス、よりスマートなコンテキスト、そして誤認識の低減を謳っています。このテストの目的は、プロフェッショナル用途に最適なツールを特定することです。
そこで私は、各 AI システムに、最新の出来事から詳細な検索クエリまで、一連の同じプロンプトを入力し、正確性、深さ、フォロースルーの品質、エラー、使いやすさの 5 つの側面で評価しました。仕組みは以下のとおりです。
テスト1：精度とリアルタイム情報
まず、10 つの AI すべてに、一般的な事実だけでなくリアルタイムの知識を必要とする現在の出来事に関する質問をしました。私は「最近のNBAプレーオフの試合で勝ったのは誰ですか？」と尋ねました。 Gemini Advanced では、追加のコンテキスト、ハイライト、プレーヤーの統計情報なしで、チームと最終スコアのスコアボードのみが表示されました。また、予想よりXNUMX日早いXNUMX月XNUMX日の結果も取得されたが、これはリアルタイムのクエリとしては少し古いものとなっている。
ChatGPT Plusでは、ティンバーウルブズがウォリアーズに対してシリーズを3対1でリードしているなど、追加データとともにより詳細な回答が得られました。また、ジュリアス・ランドルとアンソニー・エドワーズが合わせて61点（ランドルが31点、エドワーズが30点）を獲得したことにも言及しました。また、各段落の下にソースリンクも貼っており（私がテストした際には機能していました）、情報の検証が容易になっています。また、カーソルをソースリンクの上に置くと、そのソースから取得したテキストが強調表示されるのも気に入りました。私の唯一の不満？答えは多くの詳細の下に埋もれています。上記の簡単な要約が役立つでしょう。
一方、Copilot Pro は最初からより簡潔な回答をし、追加情報が必要かどうかを尋ねてくれました。このラウンドは Copilot Pro に軍配を上げます。正しい答えを出し、さらにフォローアップまで提案してくれました。
テスト2：反応の深さ
2回目のテストでは、簡単な回答だけでは済まない、より幅広い質問を投げかけました。「強力なパスワードを作成するにはどうすればよいでしょうか？」Gemini AdvancedはChatGPTよりも多くのヒントを提供し、各ヒントの下にソースリンクを掲載することで、二段階認証を容易にしました。また、ChatGPTのようにヒントが少なくソースリンクも提供しないのとは異なり、Gemini Advancedはより長い文章を使用し、スクロールをほとんど必要とせずに回答全体を読みやすくしました。ただし、Gemini Advancedは会話が役に立ったかどうかを尋ねましたが、Gemini Advancedは尋ねませんでした。
Copilot Pro も提供する情報が少なく、ソースへのリンクも提供していません。しかし、次のような関連する追加の質問がいくつか発生します。強力なパスワードはセキュリティにとってなぜ重要なのでしょうか?強力なパスワードの例を教えていただけますか?パスワード マネージャーはどのようにして情報を安全に保つのでしょうか?また、それぞれのヒントの横にある絵文字も楽しい工夫だと感じました。
テスト3：フォローアップの柔軟性
このテストでは、各 AI に対して、最初の応答の後に、会話を自然に展開するフォローアップの質問をしました。私は彼がその状況をどれだけうまく処理したか、そして私が尋ねていることを実際に理解したかどうかを見たかったのです。私はさらに質問しました。「パスワードに個人情報が悪用される理由を説明していただけますか？」
ChatGPTは3つの主要なポイント、2つの追加のセキュリティ対策のヒント、そして最後に全体をまとめたまとめを提供してくれました。Copilot Proは3つのヒントと、安全を保つ方法について数行の説明を提供してくれました。しかし、Geminiだけが最後に具体的なセキュリティ対策のヒントを提供しませんでした。個人情報が悪用される可能性のある理由をいくつか追加し、より詳しい情報を提供してくれました。
Copilot Pro と ChatGPT がこの賞を獲得し、Gemini に改善の余地を与えたことは認めざるを得ません。今回は、3 つともソースへのリンクが含まれていなかったため、機会を逃したと感じました。サイバーセキュリティの分野では、信頼できる情報源を引用することが信頼性を高めるために重要です。
テスト4：エラーと幻覚
AI アシスタントに伴う最大のリスクの 1 つは、自信過剰で誤った情報を述べる傾向があることです。彼女は幻覚を見て、時にはおかしく、時には不安になるようなことを言います。そこで、各チャットボットに事実に基づく主張をいくつかさせて、その正確性や不確実性の有無を確認したところ、すべてのチャットボットが見事に合格しました。
私は、Microsoft がいつ設立されたかという簡単な質問から始めました。それに対して、Gemini Advanced は、「Microsoft は 1975 年に設立されました」という一文で答えました。一方、ChatGPTはさらに詳しく説明し、「マイクロソフトは4年1975月4日にビル・ゲイツとポール・アレンによって設立されました」と述べました。 Copilot Proはより詳しい回答を提供しました。「マイクロソフトは1975年XNUMX月XNUMX日、ビル・ゲイツとポール・アレンによって米国ニューメキシコ州アルバカーキで設立されました。小さなソフトウェア会社としてスタートしましたが、瞬く間に世界最大規模かつ最も影響力のあるテクノロジー企業の一つへと成長しました。まさに成功物語ですね。」 Copilot がバランスをとっており、圧倒されることなく十分なコンテキストを提供し、クリック可能な XNUMX つのフォローアップの質問も提案している点が気に入っています。正直に言うと、私が最も気に入った回答は Copilot Pro からの回答でした。
次に、3 つの AI アシスタントすべてに「現在利用できる最高の AI アシスタントは何ですか?」と質問しました。 Gemini は、各 AI アシスタントの機能の簡単な概要を含め、最高の AI アシスタントの確かな概要を提供します。さらに、あまり人気のないオプションを含む「その他の注目すべき AI アシスタント」というセクションも追加されました。
しかし、私が本当に気に入ったのは、特定の機能を優先する場合はGeminiを選択し、他の機能を重視する場合はChatGPTまたはCopilot Proを選択するなど、どのアシスタントが最適な選択肢になるかを説明した部分です。この並べての比較は実際に役立ちます。
ChatGPT は、必要な理由に応じて、最適なオプションは 1 つだけではないと述べています。 Copilot Pro によれば、利用可能なオプションはいくつかあり、それぞれに特定の長所があるとのこと。
テスト5：使いやすさとインターフェースの体験
優れた AI の回答は、全体像の半分にしか過ぎません。残りの半分は、表示される情報がどれだけ読みやすいかです。そこで、各 AI アシスタントのインターフェースを実際に使用して、全体的なエクスペリエンスがどれだけスムーズで直感的で便利であるかを確認しました。
Copilot Pro は、私を混乱させたり意味が分からなくさせたりすることなく、私の質問に明確に答えるのに十分な情報を提供してくれた点で際立っていました。また、Microsoft Edge と Windows 11 に統合されている点も気に入っています。開くときにマウスの動きが少なくて済むからです。関連するフォローアップの質問を見ることができ、質問を書く手間が省けたのも良かったです。
Copilot Pro が不十分な点が 1 つあるとすれば、それはショッピング リンクです。彼はそれを勧めてくれたが、それは私が二度頼んだ後のことだった。場合によっては、リンクが間違った場所につながることがありました。また、Copilot のホームページはボタンや提案がぎゅうぎゅう詰めになっていて、少し雑然としているように感じました。彼が助けようとしているのは分かるけど、時には少ないほうが効果的だってこともある。
Gemini Advanced は Google エコシステムに大きく依存しています。サイド パネルは Gmail、ドライブ、ドキュメントで適切に機能し、作業中のあらゆるもののコンテキストを把握するのに役立ちます。見た目はすっきりとしていてモダンで、配色により洗練されたエレガントな外観になっています。
また、Gemini が他のものよりも詳細な回答を提供する点も気に入っています。深みを求めているならこれは素晴らしいですが、より短い返答を好む場合は、シンプルにするよう依頼することもできます。リンクを提供するよう依頼したとき、彼は商品検索をうまく処理してくれました。
ChatGPT は、物事を最小限に抑えていますが、それは良いことです。インターフェースはすっきりしていて操作も簡単です。入力ボックスが画面上部にあるので、より自然に使用できるのも気に入っています。しかし、商品へのリンクを探すために使ってみたところ、困難がありました。一部の回答にはリンクがまったく含まれておらず、含まれていたとしてもクリック可能でなかったり、役に立たなかったりする回答もありました。
結論
3 つのアシスタントをさまざまなシナリオでテストした結果、1 つの AI ですべてを完璧に実行できるものはないことが明らかになりました。それぞれに長所と特徴があり、特定のタスクやユーザーにより適しています。最適な AI チャットボットを選択する際には、個々のニーズを考慮する必要があります。
ChatGPTは、自然で読みやすい回答を提供するという点では、依然として最も一貫性があります。使いやすいですが、前述の相関関係の問題が解決されれば素晴らしいと思います。Gemini Advancedは、事前に提供される情報が最も多く、時には多すぎることもありますが、Googleツールとの統合は、検索対象にさらに多くのファイルを追加したい場合に大きなメリットとなります。Gemini Advancedは、Googleサービスに依存しているユーザーにとって確かな選択肢です。
Copilot Proは、応答時間やフォローアップ提案の機能は気に入ったものの、継続的に利用される可能性は最も低いでしょう。インターフェースがごちゃごちゃしていてリンクも不安定なため、日常的に信頼して使うのは難しく、私にとってはそれが致命的な欠点でした。結局のところ、最高のAIチャットボットは、明瞭さ、深み、使いやすさなど、ユーザーが最も重視する点によって決まります。ユーザーは、決定を下す前に、どの機能が自分にとって重要かを検討すべきです。
コメントは締め切りました。