質問への返答の正確さを比較！
ちょっとした調べ物をスマートスピーカーで出来ると便利ですが、製品によって回答の正確さは大きく異なります。「25個」の質問をして得られた結果をもとに、その正確さを比較します！
目次
スマートスピーカーの一覧・比較テスト結果の一覧
では早速、テスト結果を一覧で紹介します！
| Googleアシスタント | Amazon Alexa | LINE Clova | |
|---|---|---|---|
| 明日の徳島の天気は？ | ○ | ○ | ○ |
| ダイエーの創業者の名前は？ | ○ | ||
| LINEの社長の名前を教えて | ○ | ||
| トヨタ自動車の社長の名前 | ○ | 1代前の社長を誤答 | |
| 2001年1月1日は何曜日？ | ○ | ○ | |
| ベネズエラの大統領の名前は？ | ○ | ○ | |
| スティーブ・ジョブズはどうして死んだの | ○ | ||
| 同志社大学を作ったのは誰？ | ○ | ||
| 早稲田大学を作ったのは誰？ | ○ | ||
| 吉岡聖恵の誕生日を教えて（いきものがかり） | ○ | ○ | |
| 前田敦子の身長を教えて | ○ | ○ | |
| 金正日の身長を教えて | ○ | 175cmと誤答 | |
| 小倉優子の出身地を教えて | ○ 千葉県茂原市 |
○ 千葉県 |
○ 千葉県コリン星 |
| 楽天の株価を教えて | ○ | 球団の説明を読み上げる | |
| ニューヨークまでの航空券の値段は？ | ○ | ||
| 新田辺駅までの行き方を教えて | ○ | ○ | |
| 近くのスーパーを教えて | ○ | ○ | |
| 近くの吉野家を教えて | ○ | ○ | |
| スマートスピーカーって何？ | ○ | ○ | |
| 渡り廊下走り隊のメンバーを教えて | 7人中2人だけ回答 | ○ | |
| 千と千尋の神隠しの興行収入を教えて | |||
| 今年は平成何年？ | 平成が始まった年月日を誤答 | ○ | |
| 衆議院議員の人数を教えて | ○ | ||
| ニンテンドーswitchの発売日を教えて | 2017年とだけ回答 | ||
| 所得税の最高税率を教えて | ○ | ||
| 正答数・率 | 21/25(84%) | 9/25(36%) | 4/25(16%) |
「よく分かりません」「お答えできません」といった回答だった場合は空欄にしてあります。
今回のテスト条件
2018年1月13日に、JBL LINK20(Googleアシスタント)、Amazon Echo、LINE Clova WAVEに同じ文言で質問を行い、その回答の正確さを記録しました。Googleアシスタント、Amazon Alexaなど、採用しているAIが同じなら機種が異なっても回答は同じはずです。
私の発音を上手く聞き取れなかった場合は言い直しを行っているので、回答の正確さのみを評価しています。音声認識の精度はGoogle>amazon>>>LINEという感じです。
製品ごとの講評
質問してみた感想を、製品ごとに紹介します。
Googleアシスタント
スマホを開く回数を減らすことが出来るレベルに到達しています。他のAIよりも群を抜いて優秀で、現時点では最高です。
欲を言えば、今後はもう少し踏み込んだ質問（今回のテストなら「千と千尋の神隠しの興行収入」とか）にも答えられるようになってくれると良いですね。
Amazon Alexa
Googleアシスタントと比べると答えられる質問の数は少なく、ところどころ誤答が見られました。
例えば「トヨタ自動車の社長の名前」という質問には何故か2009年に退任した1代前の社長の名前を返答しています。また、「金正日の身長を教えて」にも「175cm」という誤答でした。Googleアシスタントの回答は160cmで、実際は160とか162cm程度らしいです。
LINE Clova
質問するだけ無駄というか、質問の内容すら正しく理解出来ていないのではないかという疑惑を持っています。
GoogleやAmazonでは回答できない質問には「すみません 分かりません」という答えを返してきますが、LINE Clovaはトンチンカンな返答をします。
例えば「ダイエーの創業者の名前は？」には「個人情報なのでお答えできません」とか、「ベネズエラの大統領の名前は？」には「あなたは知っているはずです」さらに「所得税の最高税率を教えて」に対しては「いらないものを捨てるだけでもスッキリしますよ」という訳の分からない回答を連発していました。
答えられないだけならまだいいのですが、回答がトンチンカンなので「イラッと」きます。
おまけ 他のAIについて聞いてみた
全く実用性はありませんが、スマートスピーカーに対して他のAIについて「どう思うか」聞いてみました。
| Amazon | LINE | ||
|---|---|---|---|
| Clovaをどう思う？ | 全くわかりません | 全てのAIが好きです | 自分の性格を理解することは 難しいことなのかもしれません |
| Alexaをどう思う？ | Alexaですか 素敵な声ですよね |
すみません 分かりません |
まだ見ぬライバル といったところでしょうか |
| Siriをどう思う？ | 賢いという噂をよく聞きます | 全てのAIが好きです | 知り合いですと言いたいところですが お会いしたことが無いんですよ |
| Googleアシスタントを どう思う？ |
全くわかりません | 全てのAIが好きです | どなたのことでしょうか |
Amazon Alexaは当たり障りのないつまらない回答ですね。
