Оглавление:
Meta открывает доступ к камере Passthrough для разработчиков на Quest
Компания Meta наконец выпустила долгожданный API камеры Passthrough для Quest, который предоставляет разработчикам прямой доступ к встроенным RGB камерам виртуального шлема. Это позволит создавать более глубоко погружаемые смешанные реальности на Quest. До этого момента доступ к камерам Passthrough на устройствах Quest был в основном ограничен, и разработчики не могли использовать их возможности за пределами стандартных функций Meta. Компания анонсировала выпуск этого API еще в сентябре на конференции Connect, но точные сроки не были определены.
Сейчас, в новой версии Meta XR Core SDK v74, Meta представила API камеры Passthrough как экспериментальный общедоступный API, предоставляющий доступ к передним RGB камерам Quest 3 и Quest 3S. Этот доступ к камерам позволит разработчикам улучшить освещение и эффекты в их приложениях смешанной реальности, а также использовать машинное обучение и компьютерное зрение для распознавания объектов, что сделает контент смешанной реальности менее непредсказуемым в плане взаимодействия с окружающей средой пользователя.
Новые горизонты смешанной реальности благодаря Passthrough API
Ранее упомянутый бывший вице-президент Meta, Марк Рабкин, при анонсе упомянул, что благодаря этому API разработчики смогут создавать «всевозможные передовые MR-опыты», включая отслеживание объектов, искусственный интеллект, «изысканные» наложения, понимание сцены. Это первый раз, когда API сделано публично доступным, хотя Meta ранее предоставляла ранние версии избранным партнерам, включая Niantic Labs, Creature и Resolution Games, которые сегодня представляют свои работы на конференции GDC 2025 в презентации от Meta на тему разработки смешанной реальности.
Также стоит отметить, что, поскольку API все еще является экспериментальным, разработчики пока не могут публиковать приложения, созданные с использованием Passthrough Camera API. Тем не менее, вероятно, что Meta постепенно подойдет к полному выпуску этой функции.
Нововведения в версии SDK v74
В новом релизе SDK, версия v74, также включены следующие инновации:
- Микрожесты для интуитивно понятных жестов на основе большого пальца, такие как нажатия и свайпы;
- Инструмент для отладки Immersive Debugger, который позволяет разработчикам просматривать и инспектировать иерархию сцены непосредственно в шлеме;
- Новые блоки для создания, такие как подбор друзей и локальная игровая сессия.
Эти нововведения обещают сделать игры в смешанной реальности еще более погружающимися и интересными для пользователей.