Meta планирует выпустить браслет с отслеживанием движений пальцев

Генеральный директор Meta сообщил, что разрабатываемый компанией нейронный браслет для отслеживания движений пальцев будет выпущен в качестве продукта «в течение следующих нескольких лет».

Выступая в пятницу на ток-шоу Morning Brew Daily, Марк Цукерберг сказал, что «мы на самом деле близки к созданию чего-то, что мы сможем превратить в продукт в течение следующих нескольких лет».

Демонстрация исследования Meta по отслеживанию движений руки с помощью нейронного браслета, 2021 год.

Развитие технологии отслеживания движений

В конце 2019 года Facebook приобрела стартап из Нью-Йорка под названием CTRL Labs, который с 2015 года работал над идеей браслета для отслеживания движений пальцев. По данным одной из заявок на патент от начала 2019 года, можно предположить, что Facebook также вела собственные разработки в этом направлении. Генеральный директор и сооснователь CTRL Labs, Томас Реардон, возглавил проект в рамках Meta после приобретения.

Хотя такие шлемы, как Meta Quest и Apple Vision Pro, уже способны отслеживать движения пальцев оптически с использованием компьютерного зрения, этот подход имеет ограниченную точность и относительно высокую задержку. Он также подвержен проблемам с преградами и хуже работает в условиях слабого освещения.

Совершенно другой подход к отслеживанию движений пальцев заключается в обнаружении нейронных электрических сигналов, проходящих через ваш запястье к пальцам от вашего мозга, используя технику, называемую электромиографией (ЭМГ). Теоретически это может обеспечить нулевую или даже отрицательную задержку, идеальную точность, работать независимо от условий освещения и не подвергаться влиянию преград. Обсуждая технологию в 2021 году, Реардон заявил, что последнее прорывное достижение позволило декодировать активность отдельных нейронов для «почти бесконечного управления машинами».

Отслеживание движений пальцев без преград с такой точностью и надежностью может позволить точно управлять сложными интерфейсами с помощью чрезвычайно тонких движений вашей руки, спокойно лежащей на коленях, что делает его идеальным методом ввода для шлемов и очков дополненной реальности.

Конкурентные разработки и пути внедрения

Заявление Цукерберга прозвучало через несколько недель после того, как Apple запустила Vision Pro со своим видением будущего ввода данных, сочетающего отслеживание взгляда и пальцев, что позволяет производить выбор и «щелчки» с помощью руки, покоящейся на коленях. Это быстрый и интуитивно понятный метод выбора, однако более сложные взаимодействия, такие как прокрутка и изменение размеров, все еще требуют относительно драматичных движений рук, и ваши руки должны быть видны гарнитуре.

Meta, возможно, надеется, что ее нейронный браслет позволит точно манипулировать объектами с меньшими усилиями в любой ситуации, в некотором роде напоминая компьютерную мышь, но с дополнительным измерением. И, фактически, в сочетании с плоской поверхностью Meta ранее утверждала, что к 2028 году браслет будет достаточно точен, чтобы эмулировать клавиатуру.

Запланированные модели браслета и интеграция с устройствами

Как же этот продукт воплотится в жизнь в рамках продукции Meta?

В начале 2023 года детали внутреннего плана Meta по AR/VR аппаратуре были утечены к The Verge, раскрывая информацию о Quest 3, о существовании гарнитуры, которая теперь носит название Quest 3 Lite, и об отмене кандидата на Quest Pro 2 в 2024 году в пользу более амбициозной модели, реализация которой планируется позже. Но в этом плане также упоминалось, что Meta планирует выпустить нейронный браслет вместе с умными очками Ray-Ban третьего поколения в качестве метода ввода в 2025 году.

Согласно этому плану, будут предложены две модели браслета по разным ценам – одна только с технологией нейронного ввода, а другая также оснащенная экраном и камерой, которая может выполнять функции умных часов. Второе поколение браслета, по всей видимости, также будет использоваться в качестве устройства ввода для настоящих очков дополненной реальности, которые Meta планирует запустить к 2027 году. Однако стоит отметить, что этот план или временные рамки могли измениться с того времени.

Существует вероятность, что Apple также может внедрить эту технологию в будущие версии своей линейки продуктов Watch, хотя пока нет сообщений о том, что Apple работает над ЭМГ для запястья.