Google анонсировала Vibe Coding XR — инновационный рабочий процесс для быстрого прототипирования приложений дополненной и виртуальной реальности (XR). Этот инструмент позволяет разработчикам создавать интерактивные, пространственно-ориентированные приложения для Android XR, используя текстовые запросы. Основой технологии стали возможности модели Gemini и фреймворка XR Blocks.

Vibe Coding XR устраняет сложности, связанные с разработкой XR-приложений, таких как интеграция сенсоров и сложных движков. Система переводит текстовые запросы в функциональные приложения менее чем за минуту. Например, запрос «создать красивый одуванчик» превращается в интерактивную сцену Android XR.

Ключевым элементом является XR Blocks — фреймворк, построенный на WebXR, three.js и LiteRT.js. Он управляет пространственной логикой, включая восприятие окружающей среды, взаимодействие в XR и интеграцию ИИ. Для тестирования прототипов Google предлагает «реальность в Chrome», что позволяет проверять взаимодействия объектов и сцены до их развёртывания на XR-устройствах.

Gemini, как креативный партнёр, использует специализированные системные подсказки и шаблоны кода для автоматизации пространственной логики. Это делает процесс разработки доступным даже для тех, кто не имеет глубоких технических знаний. Примеры приложений включают интерактивные учебные пособия по физике, химии и геометрии, а также прототипы игр и спортивных приложений.

Для оценки эффективности Vibe Coding XR Google создала набор данных VCXR60, включающий 60 запросов. Тестирование показало, что система достигает 70% успеха при первом запуске, а после обновления фреймворка XR Blocks этот показатель значительно улучшился. Разработчики рекомендуют использовать «Pro Mode» для достижения наилучших результатов.

Google представит Vibe Coding XR на конференции ACM CHI 2026. Фреймворк открыт для разработчиков.