发布 | ATYUN订阅号
Loup Ventures今天发布了其2019年智能助手智商测试的结果,如果你喜欢利用智能助手,那么有一个好消息是:所有领先的智能助手们变得越来越好。
对每个人工智能系统使用由相同的800个问题组成的测试,谷歌智能助手再次领先,就像去年一样,理解水平达到100%,并正确地回答了92.9%的问题。这比去年的85.5%有所提高。
相比之下,苹果的Siri在两个类别中都有所上升,理解水平从去年的99%上升到今年的99.8%,正确回答水平从78.5%达到了83.1%。尽管这可能与Siri的实际用户体验相冲突,但Siri今年的正确响应能力几乎与谷歌助手去年的水平相当。
亚马逊的Alexa再次获得第三名,但今年取得了重大进展,理解了99.9%的问题,正确率达到79.8%,比去年的Siri表现更好。Alexa的正确回答率急剧上升,去年才达到61.4%。Loup指出,这是自开始记录结果以来多年来的最大增幅。
值得注意的是,今年微软的Cortana缺席了,这并不奇怪,因为第四名AI已经从微软的产品和第三方配件中消失。Cortana去年只能正确回答52.4%的问题。
Loup测试的一个有趣的方面是它涵盖了五个不同的类别:“本地”,“商业”,“导航”,“信息”和“命令”,每个类别都旨在测试潜在AI帮助的不同领域。
因此,最佳的助手是全面的,而不仅仅是精通单一领域,因此,当Alexa专注于亚马逊的商务,而不是拨打本地信息或导航时,它将受到影响。
谷歌智能助手占据了这五个类别中的四个,尤其是商业领域,领先其他助手相当多,其92%的准确率超过了Alexa(71%)和Siri(68%)。“命令”部分,Siri以93%的成绩击败了它,它只有86%,也是唯一一次在正确回答中概率降到92%以下。
Alexa在“本地”,“导航”和“指挥”部门中排在竞争对手之后,而在“商业”方面仅略微超过Siri,除此之外,Siri两次获得第二名,两次获得第三名,在信息方面的差距位居第二,明显低于其他人工智能,只有76%的正确率,而Alexa和谷歌的正确率分别为93%和96%。
正如Loup之前提到的那样,继续向100%的分数迈进是令人印象深刻的,但不应该被认为是助手实际上是“聪明的”。
虽然他们能够理解在合理范围内,你对他们所说的一切,但他们只是在主要用例中得到了很好的回应,而且没有表现出更高级别的推理技巧。Loup表示,数字助理的下一步工作是添加语音特别适合解决的其他用例,并提供简单的用户体验来解决这些问题。
End