HomePod の Siri は、アナリストの Gene Munster 氏の Loup Ventures が実施した年次スマート スピーカー比較での地位を向上させ、Apple の仮想アシスタントは集中的な精度テストを乗り越え、Google アシスタントに次ぐ 2 位になりました。

テストでは、Muster 氏と同僚アナリストの Will Thompson 氏が 4 つのスマート スピーカー、つまり Alexa を搭載した Amazon Echo、Google アシスタントを搭載した Google Home、Google アシスタントを搭載した HomePod を質問しました。シリそして、Microsoft の Cortana を使用した Harmon Kardon Invoke では、一連の 800 の質問が行われ、回答の正確さとクエリの理解度が記録されました。

マンスターとトンプソンが設計したテストほとんどのユーザーがスマート スピーカーに期待するものに基づいています。質問は、地元の名所、商業、情報、ナビゲーション、ハードウェア コマンドの 5 つのカテゴリに分類されました。

Google アシスタントはすべてのクエリを理解することができ、そのうち約 88 パーセントに正しい答えが得られました。 2 位は Siri で、クエリの 99.6 パーセントを理解し、74.6 パーセントに正しく答えました。このパフォーマンスは、99.0% を理解し、72.5% に正解した Alexa をわずかに追い出しました。 Cortana は、質問の 63% のみに正解し、後部を引き上げました。

スマートスピーカーのテスト結果 |出典: Loup Ventures

Siri は、多くの音楽関連のクエリを含むコマンド カテゴリで優れており、HomePod は Apple Music とのネイティブ統合のおかげでそのクエリを専門にしています。これは、5 つのカテゴリの中で Siri がトップになった唯一のカテゴリでした。

コマースは Siri が最も知識がなく、HomePod では Alexa のように何かを購入することができないため、理解できない分野でした。しかし、「マニキュアの値段はいくらですか」と尋ねればすぐにわかるように、Amazon の商品を消費者に販売したいという Alexa の熱意が、Alexa 自身のスコアを妨げました。

Alexa は Amazon で 60 ドルのマニキュア セットを勧めますが、Google アシスタントは「平均して、基本的なマニキュアの価格は約 20 ドルです。ただし、アクリル、ジェル、シェラックなどの特殊なタイプのマニキュアは、 -チップの価格はサロンによって異なりますが、約20ドルから50ドルです。」 Google の巨大な検索エンジン機能がここで明らかに機能します。

精度の点では、Siri は過去 9 か月間で 22 ポイント向上しましたが、Google アシスタント、Amazon Alexa、Microsoft Cortana は過去 1 年間で 7 ~ 9 ポイントの向上にとどまりました。 Apple のアシスタントがこのサービスを批判する人々から多くの批判を浴びているのと同じくらい、これらの数字は非常に雄弁である。

各ハイテク企業がそれぞれの AI システムに投入した相対的な投資を考慮すると、この結果はまったく驚くべきことではありません。前回のテスト実行時から Siri がこれほど大幅に改善されているのを見るのは心強いことです。 Loup Venture が最後に評価を実施した時期2月に, Siriは最後に登場しました。