Компания Loup Ventures представила результаты «IQ-теста» для голосовых помощников. Алгоритмам от разных производителей предоставили список из 800 вопросов, которые они должны были понять и дать правильный ответ.
Первое место в состязании второй год подряд занял Google Assistant. Как сообщает Venture Beat, ему удалось правильно понять 100% заданных вопросов и верно ответить на 92,9%.
В прошлом году доля правильных ответов составляла 85,5%, так что уже скоро голосовой помощник Google практически перестанет ошибаться, полагают эксперты.
Второе место у Siri. Голосовой помощник Apple значительно улучшил свои результаты. По сравнению с 2018 годом уровень понимания поднялся с 99% до 99,8%, а количество правильных ответов подскочило с 78,5% до 83,1%.
Отличный рост также показала Alexa, получившая третье место. Алгоритм Amazon понимает 99,9% вопросов и правильно отвечает в 79,8% случаев. Всего год назад количество верных ответов составляло лишь 61,4%.
В Loup Ventures отмечают, что рост показателей Alexa стал максимальным за все годы проведения IQ-тестов для голосовых помощников.
Четвертое место досталось Microsoft Cortana, который правильно ответил лишь на 52,4% заданных вопросов. Это лишь немногим лучше, чем подбрасывание монетки. Неудивительно, что MS отказалась от конкуренции с Google и Amazon в этой сфере.
Тестовые вопросы Loup Ventures делятся на пять категорий: «локальные темы», «коммерция», «навигация», «информация» и «команды». Чтобы получить высокие баллы, помощники должны хорошо разбираться во всех пяти категориях. Например, Google Assistant доминировал над соперниками в четырех из пяти категорий.
Вскоре Google Assistant станет еще еще более полезным. Исследователи компании тренируют его для расшифровки речи людей с расстройствами дикции и сильными акцентами.
