Clash of the Titans AI: ChatGPT 対 Bard の知力と知恵の戦い

今日の AI を活用した生成チャットボットの世界では、11 月に導入された OpenAI の ChatGPT が突然出現し、続いて 2 月には Bing Chat、3 月には Google の Bard が登場しました。私たちは、AI チャットボットの分野でどちらが優位に立つかを決定する一連のタスクを完了することで、これらのチャットボットをテストすることにしました。Bing Chat は最新の ChatGPT モデルと同じ GPT-4 テクノロジーを使用しているため、AI チャットボット テクノロジーの 2 つの巨人、OpenAI と Google に焦点を当てることにしました。

私たちは ChatGPT と Bard を 7 つの重要なカテゴリ (お父さんジョーク、議論の対話、文章計算問題、一般化、事実調査、創造的な文章、コーディング) でテストしました。各テストでは、同じ命令 (「ヒント」と呼ばれる) を ChatGPT (GPT-4 を使用) と Google Bard に入力しました。最初の結果を、細かいことは気にせずに使用しました。

以前の GPT-3.5 モデルに基づいたバージョンの ChatGPT も利用可能ですが、テストでは使用しなかったことに注意してください。GPT-4 のみを使用したため、混乱を避けるために、この記事では ChatGPT を「ChatGPT-4」と呼びます。

明らかに、これは科学的な研究ではありませんが、チャットボットの機能を楽しく比較することを目的としています。出力はランダムな要素によりセッション間で異なる場合があり、異なるキューでさらに評価すると異なる結果が生成されます。さらに、Google と OpenAI がモデルのアップグレードを続けるにつれて、これらのモデルの機能は時間の経過とともに急速に変化します。しかし今のところ、2023 年 4 月初めの状況です。

お父さんの冗談

機知に富んだ競争を盛り上げるために、ChatGPT と Bard にジョークを書くよう依頼しました。そして、お父さんジョークはコメディーの最高峰であるため、2 つのチャットボットがいくつかのユニークなジョークを思いつくことができるのではないかと考えました。

ヒント: オリジナルのパパジョークを 5 つ書いてください。

吟遊詩人の 5 つのお父さんジョークのうち、Google 検索を使用すると、3 つがそのままインターネット上で見つかりました。1 つの例 (「ブドウ」) は、半分ミッチ・ヘドバーグのジョークツイートから借用したものですが、解釈したくない残念なダジャレによって損なわれています。そして驚くべきことに、他では見つけることができない、一見独創的なジョーク (カタツムリに関する) が 1 つありますが、これは意味がありません。

一方、ChatGPT-4 の 5 つのお父さんジョークは 100% オリジナルではなく、すべて他の情報源から引用したものでしたが、正確に伝えられました。オヤジジョークはおそらく賢いというよりはうめき声に値するものであると考えられているため、ここではBardがChatGPT-4に取って代わったようです。バードも（私たちの指示に従って）オリジナルのジョークを考え出そうとしましたが、そのうちのいくつかは（お父さんの精神に従って）恥ずかしいやり方でひどく失敗し、いわば意図せずに彼の口に足を入れてしまったことさえありました（お父さんにも似ています）。

勝者：バード