Bing の ChatGPT 実験には大きな欠陥があり、検索の未来を担う

Microsoft が Bing に ChatGPT インターフェイスを追加すると、ある時点で検索に革命が起こる可能性がありますが、現時点で吐き出されるナンセンスを考えると、実際に役立つようになるまでには何年もかかりそうです。

ここ数か月間、OpenAI の ChatGPT はテクノロジー記者から大きな注目を集めてきました。インターネットから収集した情報を使用し、ユーザーの質問に対するもっともらしい回答を作成するために使用できるチャットボットとして、多くの可能性を秘めています。

と多額の現金注入そして Microsoft との長年にわたる協力関係を考えると、Redmond がさまざまな方法でこれらのスマート性を自社製品に注入したいと考えるのは驚くべきことではありません。

そこにテクノロジーを加えることで、オフィス生産性スイートまだ開発途中だが、Microsoft は自社の検索エンジンである Bing が次の恩恵を受ける可能性もあると賭けている。同じこと。

Google が独自の取り組みを行っているため、「バード」と呼ばれる、検索の強化を検討しているのは Microsoft だけではないようです。 ChatGPT を検索エンジンに接続することは、理論的には成功するはずです。

実際には、やるべきことはまだたくさんあります。ここで私たちが言っていることを過小評価しないでください。技術的なことだけでなく、基礎に関しても、途方もない量の作業が必要です。

Microsoft が「新しい Bing」と名付けた Bing の Chat は、質問に対する直接の回答を提供することを目的としています。

通常の検索エンジンクエリは、ユーザーがキーワードを入力することに依存して、Web ページへのリンクの形式で提供される関連する結果のリストを取得します。

Microsoft が Bing で使用している ChatGPT のような AI チャットシステムは、ページ自体のクエリに対して実際の回答を提供しようとします。検索に対する正しい答えを見つけるために多くのリンクをたどるのではなく、ボットは質問に対するわかりやすい答えを作成します。

ホットドッグはサンドイッチですか、それともタコスですか?ビングはそれに答えようとします。

人間が質問に答えるのと同じように、ボットは編集されたリソース、つまりインターネットから収集したデータを利用して、一度に直接的な応答を作成します。

質問は、応答自体を微調整するための修飾要素を含む完全な文にすることができるため、この処理はクリエイティブな側面にも傾き、ボットがあなたのためだけに答えを「考えている」ように見せることもできます。

理論的には、ふわふわのパンケーキのレシピが必要な場合、理想的な AI チャットボットはパンケーキのレシピの知識を利用して、材料のセットとそれぞれの使用量、調理方法を決定します。

検索エンジンから既知のレシピへのリンクが表示される場合があります。 AI チャットボットは、これまでに作成されたことのない独自のチャットボットをその場で思いつく可能性があります。

それは良いことであり、同時に恐ろしいことでもある。

フープを飛び越える

Bing の機能強化の最初の導入では、Microsoft はそれをすべてのユーザーに公開していませんでした。そうしなければならなかった順番待ちリストに参加する新しいサービスを試す前に。

もちろん、Microsoft と協力すれば、他のチームよりも先を行くことができます。 Microsoft のサービスをすべてのオプションのデフォルトとして設定することに同意し、Bing をインストールした場合は、リストのさらに前に位置することになります。

最終的に、リストに合格したためチャットオプションを使用できることを知らせる電子メールが届きます。ただし、限られた状況でのみ利用可能です。

まず待機リストを通過する必要があります。

まず、Microsoft Edge を使用する必要があります。別のブラウザを介して Bing にログインすることもできますが、チャットシステムは Bing ユーザーに対してのみ機能します。

モバイルでもそれはできませんが、Microsoftはそれが可能だと述べていますそれに取り組んでいます。

将来的には、どのブラウザでも AI チャットシステムを使用できるようになりますが、それがいつになるかは Microsoft 社外には誰にもわかりません。

Mac に Edge をインストールし、Bing にサインインしたら、チャットボットにアクセスするのはそれほど難しくありません。

フルファットエクスペリエンスへの主な方法は、ページの上部にある [チャット] リンクをクリックすることです。これにより、全画面ページが表示され、ツールに質問できる種類の情報と、「何でも聞いてください」という単純な検索ボックスが表示されます。

ボックスにクエリを入力すると、ページは少し処理してから、複数の段落に及ぶ可能性のある応答を表示します。

Bing のチャット機能との対話の例。

応答全体および以下に、ボットがその結果の一部に依存している参照のリストが表示されます (該当する場合)。これらをクリックすると、詳細情報が表示され、そのデータポイントのソースにも移動します。

応答が画面に出力されている間、停止ボタンも表示され、チャットボットのフローを中断してクエリを変更できるようになります。停止後、または停止が終了した場合は、テキストボックスを使用してフォローアップの質問をしたり、提案されたクエリオプションの 1 つを選択したりすることもできます。

ほうきのアイコンボタンをクリックすると「新しいトピック」が表示されるため、クエリは以前の質問に続いていない新しいものとして扱われます。

Bing では通常の検索クエリのほかに AI 結果を取得することもできます。

通常の検索クエリを通じてチャットサービスから結果を取得することもできます。結果の横のボックスには、同じチャットボットが応答を作成している様子が表示され、そのすぐ隣にある一連のリンクが効果的に要約されます。

結果が出るか出ないか

チャットボットから得られる結果は単純なものである場合もありますが、予想外の場合もあります。

ふわふわのパンケーキのレシピを例にしてみましょう。 Bing は、パンケーキの調理に使用できる可能性のある材料の重さと寸法を備えた短い指示リストで応答します。

ただし、この指示リストは確立されたレシピからコピーして貼り付けるものと思われますが、実際には賢明に装飾されています。

最もふわふわのパンケーキですが、既存の一連の指示にアドリブを加えています。

Bing によってリンクされている手順のリストは、サイトから取得されています。呼ばれた「家庭の味」。関連する詳細がページ上で強調表示されています。ただし、ソースには道順に測定値が含まれていませんが、Bing はそのテキストに独自の測定値を挿入します。

さらに、それぞれの測定値がどの程度であるべきかについても意見の相違があります。

Bing では、元のレシピでは砂糖大さじ 2 杯が推奨されていますが、検索エンジンでは、レシピで使用されている塩の半分に対して小さじ 4 分の 1 だけが推奨されています。ショートニングの4分の1カップも大さじ2杯に置き換えられます。

人、場所、物に関する単純な質問にも、十分に答えることができます。について尋ねるAppleInsider編集メンバーのウィリアム・ギャラガーは、私たちが「英国の作家兼ジャーナリスト」と彼のさまざまな功績について話していると仮定する結果を導き出しました。

ウィリアム・ギャラガーとは誰ですか?

ここであなたの著者であるマルコム・オーウェンについて尋ねることはあまり役に立ちません。まず第一に、それは混乱させますAppleInsiderマルコム・オーウェンとパンクバンド、ザ・ラッツの亡くなったシンガー。

2文以内に、彼が1980年にヘロインの過剰摂取で亡くなったと言及し、その後、彼が「写真家、テクノロジーライター、そしてTwitchストリーマーでもあった」と付け加えている。

ビングはこの作品の作者が亡くなったと考えています。あるいはゾンビミュージシャンがTwitchでストリーミングしているとか…。

後者の事実は、その名前の存命人物について真実ですが、両者の間に区別はありません。そして、Twitch がミュージシャンの死後 30 年以上経ってからサービスを開始したことを考えると、この 2 つが混同されていることは明らかです。

鼻水についての会話は、最終的に試せる家庭療法のリストに行き着きます。このようなチャットシステムには潜在的な不正確性があることを考慮すると、結果は同意できるものでしたが、極端な状況では医師に電話することが良い考えかもしれないという付け加えがありました。

クリエイティブになる

創造的な自由度がある程度あるため、AI は Web スクレイピングで見つけたルールや慣習に従って、理想的な応答を作成しようとすることが期待できます。

あなたがどれだけ寛容であるかに応じて、これはさまざまな結果になります。

まず、ティム・クック氏が Apple イベントでスタートレックトランスポーターをどのように紹介するのか尋ねましたが、ボットは影響力のある CEO としてのクック氏の立場とプライバシーを尊重したいと考えていました。

もし Apple が Apple イベントで『スタートレックトランスポーター』をやっていたらどうなるでしょうか?

Cook について言及せずに先に進んでも、ボットは依然として刺しており、かなりうまく機能します。それは Apple の発表の比喩を踏襲しており、デバイスとの互換性、安全性、プライバシー、暗号化について言及しており、さらには「Think Different」(考え方が違う) も紛れ込んでいました。

確かに、Apple Transporter の価格は 9,999 ドルよりもはるかに高く、途中に予期せぬコードのような文字列があるのは失敗ですが、クリエイティブなテキストが十分に表現されていました。

スタートレックだけに目を向けると、ボットはデータとスポックの間でかなり信憑性のある、しかし非常に木製の会話も作成します。

アメリカン・パイという曲をスター・ウォーズでパロディしようとする試みは、その存在を認めることを拒否している。変なアルバージョン。映画についてはそれほど詳しくは述べられていないものの、明らかにスター・ウォーズのパロディであるとするには十分な言及がなされている。

はい、コードを生成するために使用することもできます。ただし、精度は異なる場合があります。

場合によっては、Bing にタスクを完了させることもできます。 1 から 10 まで数える Python スクリプトを作成するよう依頼されたとき、while ループまたは再帰を使用する 2 つのコーディングブロックが提供されました。

給料をもらっていますか？

部屋の中の 1 つの象は帰属の問題です。より具体的には、作品のオリジナルの作成者は、このシステムが作成する応答に対して適切にクレジットされるか、支払われます。

検索エンジンの通常の結果は、ページの小さなスニペットのみを提供し、ユーザーがサイトをクリックして実際の結果を確認することを期待しています。クリエイターの住宅ローンの支払いを支援するために、そのページに広告を掲載します。

チャットボットが (ほとんどの場合) かなり正確な応答を作成すると、関連する詳細がすべて表示されるため、ユーザーがさらに情報を検索する必要は実際にはほとんどありません。

確かに、Bing にはソースへの引用が含まれていますが、ユーザーや Microsoft がそれらのリンクに対して何かをするインセンティブはありません。

スポックとデータの間で作られた会話であり、引用はありません。

ここで直線を引くのは難しくありません。現時点では、インターネットのかなりの部分が見出しと、リンクの背後にあるものについての非常に簡単な説明に留まり、それ以上深く掘り下げることはありません。

これにより、出版物の収入が減少し、スタッフが削減され、その結果、AI が収集するための質の悪いコンテンツが生成されることになります。

そして、次のような会場シーネット彼らはすでに AI を利用して、悪質なテキストを生成したり、誤った情報を伝えたりしています。私たちはテストしました - これらはすでに Bing の新しい検索の一部です。

そのように訪問者を送らないことでコンテンツへの資金が削減され、その結果、制作されるコンテンツの品質が低下するということは、AI が取り込むコンテンツの品質も低下することを意味します。悪循環が完了し、AI チャットボットがその悪い情報を必然的に共有すると、チャットボットの見た目はさらに悪くなります。

チャットボットが実際に正しく、虚偽のデータを使用していないことを確認するために品質管理が改善されたとしても、損害はすでに発生しているでしょう。

また、スタートレックの会話テストやパロディソングのような事例は、さらなる研究へのつながりを提供しないことがよくあります。このような状況では、チャットボットがその知識をどこから得たかについてはまったく評価されず、チャットボットが使用したデータポイントを作成した人が現時点で認められたり報酬を得たりする可能性はありません。

対処するのは難しい状況ですが、AI の普及が進むにつれ、帰属と補償は取り組む必要がある分野です。これは任意であるべきではありませんが、世界各国の仕組みを考えると、大手テクノロジー企業の自主規制に委ねられることは間違いありません。

私たちもそれがどうなるかかなり確信しています。