NVIDIA выпустила бета-фреймворк для ИИ-агентов в AR-очках: теперь разработчики могут делать мультимодальных ассистентов

NVIDIA запустила публичную бета-версию XR AI — фреймворка для разработки мультимодальных ИИ-агентов, которые будут работать прямо на AR-очках и XR-гарнитурах. Разработчики получают готовую инфраструктуру для интеграции зрения, речи и контекстного понимания в приложения дополненной реальности.

Фреймворк позволяет создавать агентов, которые видят окружающий мир через камеры очков, понимают голосовые команды и отвечают действиями — например, подсказывают маршрут или идентифицируют объекты. NVIDIA обещает, что всё работает на устройстве без постоянного облачного подключения.

Пока это бета, но уже сейчас можно скачать SDK и начать экспериментировать. Для тех, кто хочет сделать AR-очки по-настоящему умными, — отличная возможность попробовать технологию до финального релиза.