Итоги презентации «Алиса, что нового?»: Алиса AI, агенты и носимые устройства с нейросетями

в 13:23, , рубрики: агенты, алиса, алиса AI, гаджеты, искусственный интеллект, нейросети, презентация, яндекс

Мы побывали на презентации «Алиса, что нового?», на которой Яндекс представил новые нейросетевые функции. Показали универсальную нейросеть Алиса AI, которая доступна не только в чате, но и в браузере, и скоро появится в носимых устройствах. В этой статье рассказываем обо всех анонсах.

Итоги презентации «Алиса, что нового?»: Алиса AI, агенты и носимые устройства с нейросетями - 1

Алиса AI

Итоги презентации «Алиса, что нового?»: Алиса AI, агенты и носимые устройства с нейросетями - 2

Алиса AI — универсальная нейросеть, в чате с которой можно решать повседневные задачи. В ответ на запрос пользователь получает текст, картинки, видео и полезные данные из «Яндекс Карт». Новая нейросеть уже доступна в «Поиске», в приложении «Алиса» и на сайте alice.yandex.ru

В ближайшее время она научится помнить дела пользователя, напоминать о важных событиях и выполнять поручения с помощью агентов. Например, можно будет надиктовать голосом, что предстоит сделать, а Алиса разложит поток мыслей и списков в структурированную запись с напоминаниями. Для доступа к функции в числе первых надо зарегистрироваться в очереди.  

Итоги презентации «Алиса, что нового?»: Алиса AI, агенты и носимые устройства с нейросетями - 3

Кроме того, Алиса AI теперь лучше помогает по школьным предметам: русскому языку, литературе, истории, математике, геометрии и английскому языку. Например, с помощью нейросети можно проверить пунктуацию, разобрать слово по составу или решить систему уравнений. Она распознаёт таблицы, формулы и рукописный текст. Обучать нейросеть для образовательных задач помогали учителя.

Итоги презентации «Алиса, что нового?»: Алиса AI, агенты и носимые устройства с нейросетями - 4

Мы выяснили технические детали Алиса AI. Под капотом работают самые производительные модели «Яндекса» — теперь они называются Alice AI LLM, Alice AI Art и Alice AI VLM. Для улучшения и оценки качества ответов Алисы AI разработчики собрали корзину, состоящую из тысяч наиболее востребованных у пользователей ИИ-продуктов задач. Например, согласно внутренним замерам на собранной корзине, Алиса AI превзошла китайскую DeepSeek.

Alice AI LLM — языковая модель на базе архитектуры MoE (Mixture of Experts). В разработке использовали метод обучения с подкреплением с многокомпонентными наградами. Для этого компании потребовалось перестроить свою ML-архитектуру. В результате в попарном слепом сравнении ответов новая модель побеждает предыдущую в 70 из 100 случаев.

Технологию генеративного поиска и LLM объединили в новый пайплайн. Это позволяет нейросети использовать в инференсе не только текст, но и другие объекты — изображения, карточки организаций, карты, видео. LLM может отправлять последовательные запросы в «Поиск», чтобы собрать недостающую информацию для ответа.

Итоги презентации «Алиса, что нового?»: Алиса AI, агенты и носимые устройства с нейросетями - 5

Alice AI VLM — визуально-языковая модель, которая отвечает за распознавание образов. Для её обучения разработчики собрали новый датасет, состоящий из изображений, текстов и мультимодальных документов. Для тренировки использовали метод Reinforcement Learning (RL). В полной мере модель раскрывается в задачах по геометрии, которые обычно включают в себя как текст, так и схематичные иллюстрации, а также при распознавании рукописного текста. 

Alice AI ART — новая «картиночная» модель, в которой инженеры улучшили соответствие сгенерированных изображений запросам пользователей. Для этого пересобрали датасет, чтобы он содержал примеры картинок для всех популярных у пользователей стилей и направлений с подробными описаниями. Также разработчики добавили в модель механизм экспертов: одна копия модели дообучена на генерацию низкочастотных деталей (например, общая композиция), а другая — высокочастотных (детали, текстура). Всё это позволило повысить релевантность ответов модели на 40%. 

Итоги презентации «Алиса, что нового?»: Алиса AI, агенты и носимые устройства с нейросетями - 6

Агенты в Алисе AI

В раннем доступе появились ИИ-агенты, с помощью которых можно бронировать столики в ресторанах, записываться в салоны красоты, находить товары дешевле или проводить подробные исследования. Для доступа к агентам надо зарегистрироваться в очереди.

Для бронирования столика или слота в салоне красоты или парикмахерской достаточно написать в чате: «Забронируй на 19 часов стол для 4 человек в ресторане с римской пиццей на Парке Культуры» или «Запиши меня на женскую стрижку на завтра в 10 часов в тот же салон, что и в прошлый раз». Нейросеть проверит информацию, сопоставит её с историей посещений, уточнит детали и оформит бронь. Если указанное время уже занято или в заведении нет мест, то Алиса предложит альтернативные варианты с учётом предпочтений пользователя.

С помощью Алисы AI можно будет забронировать слот в 40 тысячах бьюти- и других организаций, а также стол в более чем 30 тысячах ресторанов России.

Итоги презентации «Алиса, что нового?»: Алиса AI, агенты и носимые устройства с нейросетями - 7

Для поиска более низкой цены в чат надо отправить ссылку на товар или нажать кнопку «Найти дешевле» на странице в «Яндекс Браузере». После этого Алиса изучит предложения от маркетплейсов и локальных сайтов, найдёт более выгодные позиции и выведет их в чат.

Итоги презентации «Алиса, что нового?»: Алиса AI, агенты и носимые устройства с нейросетями - 8

Если пользователю нужно детально разобраться в теме, сделать расчёты или анализ, поручить задачу можно будет агенту исследования. Нейросеть изучит и проанализирует множество сайтов и документов в интернете, а также файлы, изображения и ссылки, которые пользователь сможет добавить для более подробной оценки. Если для ответа нужно будет сделать расчёт или проверить итоги анализа, Алиса AI напишет и запустит код.

Итоги презентации «Алиса, что нового?»: Алиса AI, агенты и носимые устройства с нейросетями - 9

Алиса AI в «Яндекс Браузере»

В «Яндекс Браузере» также появилась поддержка Алисы AI. Она может решать задачи пользователей с текстовыми документами, видео, открытыми страницами, совершать действия во внешнем мире с помощью ИИ-агентов и отвечать на вопросы в умной строке на стартовом экране.

Алиса AI может работать с содержимым открытой вкладки. Например, можно попросить нейросеть найти все нужные цитаты о «Евгении Онегине» в 500-страничной PDF-статье или узнать, что лектор рассказал о чёрных дырах в видео про космос. Если пользователь захочет продолжить изучение темы, сделать это можно будет в том же чате.

Итоги презентации «Алиса, что нового?»: Алиса AI, агенты и носимые устройства с нейросетями - 10

Носимые устройства с Алисой AI

Финалом мероприятие стал анонс носимых устройств с поддержкой Алиса AI. Пользователи смогут проговаривать идеи, планы, заметки и любую информацию, которую важно не забыть. Нейросеть будет преобразовывать их в структурированные списки, заметки и напоминания. К ним можно будет в любой момент вернуться в чате с Алисой AI или через голосовой интерфейс носимого устройства. С помощью гаджета также можно будет создавать задачи для агентов. Например, попросить записать на стрижку.

Устройства поступят в продажу в следующем году.

Итоги презентации «Алиса, что нового?»: Алиса AI, агенты и носимые устройства с нейросетями - 11

Автор: daniilshat

Источник

* - обязательные к заполнению поля


https://ajax.googleapis.com/ajax/libs/jquery/3.4.1/jquery.min.js