Новое исследование показало, что Siri по общему «уровню IQ» уступает лишь Google Assistant

Ещё в начале года специалисты LoupVentures столкнули лбами ^[1] основных голосовых ассистентов в популярных умных колонках. В результате, как мы помним, выиграл Google Assistant, а Apple Siri оказался аутсайдером, хотя и не во всех режимах.

^[2]

В новом тестировании специалисты LoupVentures задали голосовым помощникам 800 вопросов. На сей раз использовались исключительно цифровые версии ИИ в смартфонах. В итоге оказалось, что все четыре ассистента улучшили свои результаты относительно аналогичного тестирования в прошлом году, что радует.

Как можно видеть по таблице, лидирует всё ещё Google Assistant. Этот ИИ сумел понять все 800 вопросов и ответил правильно на 85,5% из них. Отметим, что под вопросами подразумеваются также и команды. К примеру, запуск музыки или навигации.

В целом все ассистенты отлично понимают вопросы, а вот что касается ответов, аутсайдером оказался Cortana с показателем лишь 52,4%. То есть в половине случаев ИИ отвечает неверно либо не может ответить на вопрос. Siri, что интересно, занял второе место с показателем 78,5%, а Alexa — третье с показателем 61,4%. При этом стоит помнить, что в той же акустической системе HomePod ассистент Siri урезан по своим возможностям, поэтому выступает хуже.

Если говорить о тематиках вопросов и команд, то ситуацию можно оценить по диаграмме выше. Как видим, иногда картина может меняться весьма сильно. К примеру, у Cortana очень большие проблемы с задачами, связанными с покупками, Assistant проседает в различных командах (вроде создания заметок, напоминаний и так далее), а Alexa отлично показывает себя в информационной поддержке.

Напомним также, что пока Siri — единственный из современных голосовых ассистентов, понимающий русский язык. Но вскоре его начнёт поддерживать и Google Assistant.

Источник ^[3]