Содержание
Аналитики компании Loup Ventures провели независимое тестирование популярных голосовых ассистентов, по итогам которого Siri удалось верно ответить на 78% заданных вопросов. Этот результат на 12% лучше прошлогоднего, но по-прежнему далек от показателей Google Assistant.
В испытании приняли участие четыре голосовых ассистента: Siri, Google Assistant, Cortana и Alexa. Чтобы все помощники находились в равных условиях, было решено тестировать их на смартфонах под управлением актуальных для каждого экземпляра версий операционных систем.
Самый умный голосовой помощник
Siri против Google Assistant
С ответами на вопросы оказалось сложнее. Впрочем, первое место со значительным отрывом вновь занял Google Assistant, правильно ответивший на 85,5% вопросов. Siri, как отмечалось выше, дала 78,5% верных ответов, а Alexa и Cortana заняли третье и четвертое места, ответив на 61,4 и 52,4% вопросов соответственно.
Насколько умна Siri
Интересно, что самый большой скачок в развитии произошел у Siri. За год голосовая ассистентка Apple подтянулась как в понимании вопросов, так и в даче верных ответов. По крайней мере, прогресс заметен у англоязычной версии виртуального помощника, который и принимал участие в тесте.
Обсудить эту и другие новости Apple можно в нашем Telegram-чате.
Лучший комментарий
scibi, Мне гуглить проще, чем разговаривать с телефоном)) А вот участие Сири в организации жизни очень экономит время — ставить Напоминания, заводить таймер, будильник, звонки и смс через голосового помощника делаются в разы быстрее, особенно с часов. Если твои потребности ограничиваются вопросами гуглу — то да, Алиса лучшая!
Google, Apple, Amazon, Microsoft и другие компании постоянно работают над оптимизацией своих голосовых ассистентов, чтобы научить их лучше понимать человеческую речь и запросы пользователей. Аналитическая компания Perficiend Digital решила провести независимое исследование и выяснить, какой из помощников стоит признать самым продвинутым.
Серый — полные правильные ответы, красный — попытка ответить
В тесте приняли участие сразу несколько голосовых помощников: Cortana от Microsoft, Google Assistant, Alexa от Amazon, Siri от Apple. Оценивалось качество ответов и то, насколько хорошо ассистент адаптирован к речи и способен понимать запросы пользователя привычным языком.
Google Assistant ответил правильно практически на 90% вопросов. Его ответы были оценены как «полные и правильные». Вторую строчку заняла версия Google Assistant, предустановленная на умную колонку Google Home. Его результат — 85%. Замыкает тройку лидеров ещё одна версия помощника от Google на базе Home Hub. Результат Siri от Apple — 70%. Следом расположился голосовой ассистент Alexa от Amazon с результатом в 67% правильных ответов. Тяжелее всего ответы давались Cortana от Microsoft. Помощник сумел ответить правильно лишь на половину вопросов.
Количество неверных ответов
Авторы исследования также показали прогресс в развитии ассистентов за последние три года. Любопытно, что Siri стала отвечать неправильно намного чаще, чем ранее. Странная ситуация обстоит и с ассистентом Cortana. За последний год помощник начал хуже отвечать на поставленные вопросы практически в два раза.
Победителем тестирования был признан голосовой ассистент от Google, качество и точность ответов которого значительно улучшились за последние три года.
Принципы сравнения просты. Сначала мы будем задавать каждому из ассистентов вопросы, проверяющие их способность искать информацию в интернете и, что более важно, вычленять из всего найденного объема краткий ответ. Затем мы попросим помощников сделать для нас что-нибудь, причем задачи постараемся ставить такие, чтобы от них могла быть реальная польза в повседневной жизни.
Siri мы проверим на iPhone X и последней бете iOS 12 (на iOS 11 она выдает те же ответы), Google Assistant — на ZenFone Max Pro, работающем на «стоковом» Android 8.1. На нем же будем запускать и Алису через приложение «Яндекс».
Кроме того, разговаривать мы с ними будем на русском языке, хоть и проверим способность помощников на ходу переключатся с русской речи на английскую.
Вопросы
Начнем с парочки действительно сложных для ИИ вопросов
Почему небо голубое?
Ответил лишь Google Ассистент. Алиса выдала список ссылок из «Яндекса», а Сири вообще не поняла, чего от нее хотят.
Почему страусы прячут голову в песок?
Снова справились только Алиса и Ассистент. Сири лишь поделилась ссылками из Google.
Очередь более простых и конкретных вопросов:
Кто изобрел автомобиль?
Алиса и Ассистент не испытали никаких проблем, а помощник Google еще и приложил к ответу интересный бэкграунд.
Сири же выдала список ближайших автосалонов. «Блестяще»!
Теперь — несколько понятных и распространенных типов вопросов:
Права лишь Алиса! Ни Сири, ни Ассистент смысла вопроса не поняли. «Яндекс» — молодцы!
Алиса и Ассистент держат планку. Сири как всегда…