Google разработала ИИ-агент StreamVibe для помощи в бытовых задачах

Исследовательская команда под руководством специалистов Google представила экспериментальный видеоагент StreamVibe. Система создана для непрерывного анализа видеопотока при выполнении практических задач, таких как кулинария или сборка мебели.

Главная задача разработки — научить ИИ определять точный момент, когда пользователю действительно требуется подсказка или вмешательство. Агент призван подавать голос только в ситуациях, требующих помощи, не отвлекая человека лишними комментариями во время работы.

Проведенное исследователями тестирование показало серьезные ограничения существующих технологий. Ни одна из проверенных моделей не способна надежно фиксировать подходящие моменты для подсказок при анализе длинных видеозаписей.

В ходе экспериментов выяснилось, что со временем ошибки в распознавании накапливаются, из-за чего качество и релевантность ответов системы резко снижаются. Полученные данные демонстрируют сохраняющиеся трудности в создании автономных ассистентов для долгосрочных бытовых сценариев.