Умный дом Яндекса с Алисой начал понимать естественную речь и сложные команды

Умный дом Яндекса начал понимать естественную речь

Пользователи умного дома Яндекса теперь могут обращаться к нему на естественном языке - так, как им удобно. Алиса в устройствах стала понимать не только стандартные команды, но и запросы, заданные в свободной форме. Например, если сказать «Алиса, пора прибраться», система запустит робот-пылесос. Это стало возможным благодаря технологии вызова функций (tool calling), которая сейчас работает в режиме тестирования.

Теперь пользователям не нужно вспоминать точные команды и названия устройств. Языковая модель анализирует запрос и определяет, какое действие нужно выполнить. Например, фраза «Алиса, мне завтра нужно встать в семь» приведёт к установке будильника, а «Алиса, слишком темно» – к увеличению яркости света.

Понимание синонимов, помещений и цветов

Умный дом лучше распознаёт бытовые формулировки и синонимы. Алиса понимает, что «включи свет на столе» – это то же самое, что «включи настольную лампу», а «гостиная» и «зал» могут означать одну и ту же комнату.

Аналогично работает и распознавание цветов. В частности, Алиса сможет включить «бирюзовый» свет даже в том случае, если в палитре умного дома этот оттенок обозначен иначе (например, как голубой).

Учет контекста разговора

Система стала учитывать контекст беседы, в рамках которой прозвучала команда. Например, можно спросить Алису, при какой температуре нужно заваривать чёрный чай, а затем сказать: «Включи чайник на эту температуру». Ранее для этого требовалась точная инструкция вроде «Алиса, включи чайник на температуру 90 градусов».

За счёт контекста управление умным домом становится более естественным продолжением диалога с Алисой, а не набором отдельных команд.

Составные команды и исключения

Одной фразой теперь можно задавать сразу несколько параметров. Если раньше приходилось говорить по шагам - «Алиса, включи жёлтый свет», затем «яркость - сорок процентов», - то теперь достаточно одной команды: «Алиса, включи жёлтый свет на сорок процентов».

Умный дом научился понимать и просьбы с исключениями. Например, команда «Алиса, выключи свет везде, кроме кухни» будет интерпретирована корректно без дополнительной детализации.

Как это работает: tool calling

Технология вызова функций (tool calling) выступает в роли «диспетчера», который координирует работу языковой модели и устройств умного дома. Модель анализирует запрос, при необходимости разбивает сложную задачу на простые шаги и определяет, какие устройства нужно задействовать.

По мере обучения нейросети умный дом будет понимать всё больше команд, заданных в разговорной форме, включая сложные сценарии и уточнения в ходе диалога.

Управлять умными устройствами, автоматизацией и сценариями можно в приложении «Дом с Алисой для Android» / «Дом с Алисой для iPhone».