| 25 июля 2018 г. — 7:27 PT
Аналитики из The Loup Ventures опубликовали результаты своего последнего сравнительного теста голосовых помощников, который включает в себя 800 вопросов, охватывающих различные области. Хотя Siri по-прежнему уступает Google Assistant в точности, она значительно улучшилась.
В прошлом году Siri правильно отвечала на 66% вопросов. Новое тестирование показывает, что Siri становится умнее, достигнув 78,5% точности.
В отчете The Loup Ventures разбиваются запросы, на которые были даны правильные ответы, и запросы, которые были правильно проанализированы и поняты, но помощник не смог предоставить соответствующий ответ. По крайней мере, на 800 заданных в этом тесте вопросов Siri, по-видимому, поняла 99% из них, с точностью ответов 78,5%.
Google Assistant показал еще лучшие результаты, поняв 100% запросов и ответив на 85% из них соответствующим образом. Alexa и Cortana показали низкие результаты в этом опросе, но, справедливости ради, тесты Amazon и Microsoft проводились с использованием клиентских приложений iOS, а не собственного оборудования производителей.
Тест включает в себя различные вопросы, в том числе запросы для карт («Где ближайшая кофейня?»), покупок («Можешь заказать мне еще бумажных полотенец?»), викторины и команды (например, установка напоминаний или изменение настроек устройства).
Siri показала исключительные результаты в категории «Команды». Похоже, большая часть этого связана с обработкой Siri вопросов по умному дому и музыке, на что Apple, очевидно, обратила внимание недавно из-за дебюта HomePod.
Очевидно, эти результаты не означают, что Siri может отвечать на 80% вопросов успешно с первого раза. Оценка сильно зависит от заданных вопросов, и The Loup Ventures не публикуют список всех 800 опрошенных вопросов. Они лишь утверждают, что представляют выборку наиболее важных задач, которые клиенты ожидают от голосовых помощников. Несложно придумать эзотерические вопросы, которые ни один из ведущих умных помощников не смог бы понять, поэтому здесь всегда есть некоторая степень субъективности.
Самый лучший вывод, вероятно, заключается в том, что распознавание Siri растет, увеличившись на 13 процентных пунктов по сравнению с прошлым годом. Тем не менее, «Siri отстой» по-прежнему остается очень популярным мемом в сообществе.
Apple недавно наняла Джона Джаннандреа на должность вице-президента по машинному обучению и стратегии в области искусственного интеллекта, чтобы он курировал Siri и сопутствующие проекты. Джаннандреа ранее работал в Google над такими проектами, как Assistant, поэтому будет интересно посмотреть, как новые таланты смогут продвинуть усилия Apple в области персональных помощников.