毎年、LoupVenturesは、Googleアシスタント、Alexa、Siriのパフォーマンスをランク付けするために何百もの質問をして、比較を行っています。 以前のテストでのSiriのパフォーマンスは却下されており、Google Assistantがパックをリードしています。
今年のテストの結果が出ており、Appleの仮想アシスタントにとって物事は最終的にバラ色に見えます。 Google Assistantが再び結果を導き、回答の86％を正しく回答しましたが、Siriはパフォーマンスの著しい改善を確認し、回答の79％を正しく回答しました。
それに比べて、Appleの仮想アシスタントは、2017年にこのテストが最後に行われたとき、66.1％のクラッカーにしか答えられませんでした。1年前の95％から、質問の99％を理解することができました。 これは、Siriが789の質問を理解でき、11のクエリを正しく理解できなかったことを意味します。
Siriの1年間での目覚ましい成長は間違いなく印象的でしたが、質問の100％が正しく回答し、回答した85.5％を理解していたGoogle Assistantの背後にはまだあります。 昨年、アシスタントはクエリの74.8％を適切に答えることができました。
Siriのパフォーマンスは、要求されたクエリの98％を理解したAmazonのAlexaを上回り、52.4％だけを正しく答えることができました。 MicrosoftのCortanaはSiri、Assistant、Alexaに大きく遅れており、クエリの52.4％しか適切に答えられませんでした。
デジタルアシスタントへの質問は、さまざまな機能をテストするために5つの異なるカテゴリに分類されました。
- ローカル–最寄りのコーヒーショップはどこですか？
- コマース-ペーパータオルをもっと注文できますか？
- ナビゲーション–バスでアップタウンに行くにはどうすればいいですか？
- 情報–双子は今夜誰とプレイしますか？
- コマンド-今日午後2時にスティーブに電話するように通知します。
Appleは過去1年間でSiriを確実に改善しましたが、Googleのコアストロングである検索のおかげで、Googleのアシスタントは多くのカテゴリで引き続き主要なリードを維持しています。
Googleアシスタントは、コマンドを除くすべてのカテゴリで優位に立ちます。 Siriがこのカテゴリのアシスタントをリードしているのは奇妙です。どちらもサードパーティのアプリではなく、CortanaやAlexaのように携帯電話のOSに組み込まれているからです。 携帯電話、スマートホーム、音楽などを制御する上で、Siriの方がやや便利で汎用性が高い（より柔軟な言語に対応する）ことがわかりました。質問セットには、音楽関連のクエリ（スマートスピーカーの最も一般的なアクション）。 Appleはそのルーツに忠実で、Siriがモバイルデバイスとスマートスピーカーの両方で音楽に対応できることを保証しています。
アシスタント間の最大の不一致の1つは情報カテゴリにあり、Googleがテストで見た正解の中で最も高い割合を達成しました（93％）。 これは会社の中核能力を考えると驚くことではありませんが、答えの深さと真の有用性に感銘を受けました。
AppleがSiriをHomePodに持ち込み、iOSとwatchOSの不可欠な部分にすることで、同社は音声アシスタントをさらに改善するために舞台裏で作業を続ける可能性があります。
テイク
LoupVenturesによって実施されたテストは、Siriのパフォーマンスの向上に関する洞察を確実に提供しますが、Appleの音声アシスタントがどのようにアクセントや他の言語で音声を認識するかについては言及していません。 Appleは主に米国向けにSiriの改善に注力しましたが、GoogleはAssistantがより多くの言語で動作し、他の言語の音声認識機能も時間とともに改善されることを着実に保証しました。
Siriの機能とパフォーマンスにどの程度満足していますか？ Google Assistantと同じくらい良いと思いますか？
[Via Loup Ventures]