В конкурсе приняли участие Google Home, Apple HomePod и Amazon Echo — три лидера американского рынка. Результаты получились любопытными. Как и в прошлый раз, победил Google Assistant, отвечавший через колонку Home Mini, набрав 100% баллов по шкале понимания и 87,9% — по правильности данных ответов. К слову, он улучшил свой же июльский результат — тогда было лишь 85,5%.
Ответы Assistant были самыми точными в четырех из пяти категорий: знании местности, торговле, навигации и информационных запросах. Второе место он занял только в категории «команды», справившись с заданиями с точностью лишь 73%.
Apple сообщала о значительном прогрессе, но через HomePod Siri не смогла повторить даже собственные достижения июля (78,5%). Она ответила правильно только на 74,6% вопросов, показав неплохое понимание — 99,6%. При этом HomePod лидировал в категории «команды», пишет VentureBeat.
На третьем и четвертом месте снова оказались Alexa и Cortana, но оба помощника выступили лучше по сравнению с летними тестами. Alexa через колонку Echo (которую в третьем квартале 2018 купили 6,3 млн раз, на 400 000 больше, чем Google Home) набрала в точности ответов 72,5%, Cortana через Harman Kardon Invoke — 63,4%.
Эксперты назвали и главную сложность для всех колонок — это имена существительные.
Помимо этого, можно отметить рост эрудиции у Siri и Alexa. Последняя, кстати, на днях подключилась к базе знаний WolframAlpha и научилась давать ответы на вопросы по математике и физике. Теперь она может решить уравнение или рассчитать силу ветра.
Впрочем, не исключено, что не принимавшие участия в испытаниях китайцы обошли Запад и в этой области. Есть мнение, что представленный недавно ассистент Alibaba общается гораздо человечнее, чем знаменитый Google Duplex. Он уже обслуживает миллионы клиентов ежедневно.