ИИ-гаджет с голосовым управлением Rabbit R1

Rabbit R1 — это гаджет с микрофоном, с помощью которого можно пользоваться разными сервисами, отдавая голосовые команды на естественном языке. Встроенный искусственный интеллект, учитывая контекст, интерпретирует фразы пользователя и выполняет команды. Например, R1 можно задать запрос: «Вызови Uber домой и сообщи родным, что я опоздаю». ИИ сам определит геолокацию пользователя и подберет оптимальный вариант такси, а затем отправит уведомления членам его семьи из списка контактов. Если же навести камеру устройства на полки холодильника с продуктами и спросить, какое блюдо из них можно приготовить, то оно подберет варианты и предложит рецепты.


Устройство использует собственную операционную систему Rabbit OS, в которую встроены алгоритмы искусственного интеллекта. Для управления приложениями оно запускает «большую модель действий» (Large Action Model, или LAM), работа которой напоминает голосовых помощников Alexa и Google Assistant. Если LLM генерирует текст, опираясь на запрос пользователя, то LAM сразу создает последовательность шагов для его выполнения. Например, если попросить устройство заказать еду в определенном приложении, то модель сама сгенерирует шаги и выполнит их.






LAM обучается путем демонстрации: алгоритм «наблюдает» за человеком, использующим определенное приложение, а потом воспроизводит его действия, даже если интерфейс сервиса отличается. Со временем модель накапливает все больше знаний и глубже «понимает» разные аспекты взаимодействия с сервисом.

Еще одна особенность Rabbit R1 в том, что Rabbit OS предлагает единый интерфейс для управления музыкой, заказа такси и доставки продуктов, отправки сообщений и многого другого. На экране выводятся наборы карточек по разным категориям: музыка, транспорт, видеочаты и так далее. Это позволяет контролировать работу устройства. Создатели утверждают, что гаджет «не прослушивает» пользователя в неактивном режиме, а также автоматически переходит в этот режим, если лежит дисплеем вниз (R1 «понимает» свое положение в пространстве благодаря работе встроенного гироскопа).

Модель, на которой работает устройство, запускается через облачную платформу Rabbit Hole. Там пользователям предварительно понадобится авторизоваться во всех приложениях, с которыми они хотят работать. Вся информация будет храниться в приватном облаке, оттуда же можно будет запрашивать историю своих взаимодействий с сервисами. В Rabbit обещают, что не получат персональные данные пользователей, такие как имя, номер телефона или платежную информацию, а также не будут делиться иными данными, если клиент не даст на это своего согласия.

Помимо прочего на Rabbit Hole можно вручную настроить схемы сложных действий или работу с редкими приложениями. Для этого не обязательно иметь навыки программирования или разбираться в работе нейросетей — достаточно открыть простой визуальный редактор. Например, устройство можно обучить удалению водяных знаков с картинок в Photoshop. Для этого понадобится загрузить с портала на свой компьютер одну из виртуальных машин Rabbit и ввести внутри нее алгоритм действий, чтобы в дальнейшем не использовать для работы собственное устройство и программное обеспечение.