デジタルアシスタントのテストは、AppleのSiriが改善していることを示し、Googleアシスタントに遅れをとっています

Apple のデジタル アシスタント Siri は引き続き Google アシスタントに後れを取っており、グループ テストの報告によると、クエリを適切に理解し、正しい応答を提供する能力がすべてのデジタル アシスタント全体で全般的に向上していることが明らかになりました。

Loup Ventures によるデジタル アシスタント IQ テスト繰り返す2017年4月から同様の試験が行われ、AppleのSiriにタスクを課した。Googleアシスタント、アマゾンのアレクサ、 そしてマイクロソフトのコルタナ一連の質問に答えながら。昨年のテストではスマートフォンベースのアシスタントのみが使用されたが、AlexaのiOSアプリにより、アシスタントを名簿に含めることが可能となった。

各アシスタントに対して合計 800 の質問が行われ、質問が正しく解釈されたかどうか、正しい回答が提供されたかどうかに基づいて採点が行われました。

Google アシスタントが 85.5% の確率で正しい結果を提供し、リストの 1 位となり、Siri が 78.5% のクエリに正しく答えて 2 位となりました。 Alexa は 61.4% の正解率を記録しましたが、Cortana は 52.4% でリストを締めくくりました。

全体的に改善が見られ、Google アシスタントのスコアは昨年の 74.8 パーセントから上昇し、2017 年の Siri と Cortana のスコアはそれぞれ 66.1 と 48.8 でした。アシスタントがクエリを理解する能力も向上しており、Siri の理解率は 95 パーセントから 99 パーセントに、Google の理解率は 99 パーセントから 100 パーセントになりました。

アナリストのジーン・マンスター氏とウィル・トンプソン氏は、「デジタルアシスタントの音声認識と自然言語処理は全般的に向上し、理の範囲内でユーザーの言うことすべてを理解できるようになる」と書いている。

テストの一環として、質問は 5 つのカテゴリのいずれかに分類され、地域の知識、商業、ナビゲーション、情報、およびコマンドのクエリを解釈する能力がテストされました。今年のテストでは「AIアシスタントの能力の変化を反映する」ために質問が変更されたことが注目されており、その変更によりナビゲーションクエリの結果が低下したように見えたが、それでも他のカテゴリでは改善が見られた。

カテゴリベースでは、Siri が支配するコマンドクエリを除いて、Google アシスタントが他のすべてをリードしています。

「Siriは、携帯電話、スマートホーム、音楽などを制御する際に、（より柔軟な言語に対応して）若干便利で多用途であることがわかりました」と報告書には記載されています。 「私たちの質問セットには、かなりの量の音楽関連のクエリ（スマート スピーカーの最も一般的なアクション）が含まれています。Apple は、そのルーツに忠実に、Siri がモバイル デバイスとスマート スピーカーの両方で音楽に対応できることを保証しました。」

テストでは Cortana と Alexa 用の iOS アプリが使用されましたが、アナリストらは、他のプラットフォームで使用した場合の機能が完全には反映されていないと主張しています。一例として、Alexa アプリでリマインダー、アラームの設定、メールの送信ができないことが、コマンド カテゴリのパフォーマンスに影響を与えました。 Siri と Google アシスタントは iPhone と Android スマートフォンに組み込まれているため、スマートフォンで比較すると Cortana と Alexa が苦戦していることが示唆されています。

アナリストらは、音声ベースのコンピューティングはユーザーの立場からの摩擦を取り除く機能であるため、時間の経過とともに改善されることを期待している。相互に続く会話形式のクエリ、ルーチンやスマート ホーム シーンを理解する能力に加えて、Siriのショートカットコマンドによってトリガーできる「ミニオートメーション」を作成するための別の摩擦軽減機能としても強調されています。

Paymenta と配車サービスは、視覚的な出力をほとんどまたはまったく必要としないため、将来のボーカル開発にとって有望な 2 つの分野です。 Siri と Alexa は配車を呼び出すことができ、Siri と Google アシスタントは次のことが可能でした。送金同社は、そのような機能をまだ提供していない企業にも採用されることを期待している。