Отслеживание скелета с помощью JavaScript и скачок движения

Когда дело доходит до использования JavaScript с технологией следующего поколения, Leap Motion является одним из моих любимых устройств для работы. С Leap Motion, JavaScript не является запоздалой мыслью. Это не сторонний модуль, созданный энтузиастами, а тщательно разработанный и продуманный командой Leap Motion с каждым новым выпуском API. Их последняя версия V2.1, которая в настоящее время находится в бета-версии, чертовски захватывающая. В этой статье я дам обзор новых возможностей, доступных для разработчиков JavaScript.

Следите за этими руками с большей уверенностью

API предоставляет дополнительные данные для каждой общей руки. Данные о руках доступны в frame.hands же, как и в предыдущем API, однако в обновлениях мы получаем замечательную коллекцию новых данных, которая облегчит жизнь разработчикам Leap Motion.

Hand Confidence

Одно из моих любимых включений в новом API — это способность знать, насколько уверенно Leap Motion в своих данных. hand.confidence предоставляет значение от 0 до 1, которое позволяет узнать, насколько точно то, что он видит, соответствует модели руки, которую он понимает. Низкие значения могут означать, что они не являются точными для общих данных руки, или это может означать, что они не уверены в положении пальцев / кости. Это позволяет вам проверить, каково Leap Motion, прежде чем предпринимать какие-либо действия. Мне бы очень хотелось, чтобы это привело к гораздо более плавному взаимодействию, и, надеюсь, побудит пользователей быть предельно ясными в своих жестах.

Тип руки

hand.type определяет, думает ли Leap Motion, что видит левую или правую руку. Если ваша рука в кулаке, то с этим различием она будет немного бороться.

Щепотка сила

hand.pinchStrength — это замечательное новое свойство, которое дает значение от 0 до 1, которое показывает, насколько близко друг к другу большой палец и палец. Это может открыть некоторые интересные возможности для жестов и управления приложениями, так как щепотка — приятный и естественный человеческий жест.

Хватай силу

hand.grabStrength возвращает значение от 0 до 1 так же, как и сила hand.grabStrength , но оно hand.grabStrength является ли ваша рука открытой или закрытой в кулак. Возможности здесь одинаково захватывающие — заставьте своих пользователей сжимать виртуальный шарик стресса или хватать и бросать что-то в виртуальную комнату.

Новые данные о пальцах

В новых изменениях скелетного API у каждой руки всегда есть пять пальцев, и вы можете получить целый новый набор данных для каждого пальца, который может видеть Leap Motion.

Тип пальца

С помощью finger.type вы можете прочитать, какой тип пальца представляет каждый бит данных. Этот объект будет иметь значение от нуля до четырех:

• 0 это большой палец
• 1 указательный палец
• 2 — средний палец
• 3 безымянный палец
• 4 — мизинец

Каждый раз, когда Leap Motion считывает данные с руки, он считывает их всеми пятью пальцами.

Finger Extended

Если некоторые пальцы не направлены выше Leap Motion, устройство записывает их как finger.extended = false используя finger.extended = false .

Согласно названию «Скелет», мы получаем данные до костей

Я не очень хорошо разбираюсь в структуре кости руки, поэтому у меня была возможность узнать что-то новое здесь. Мой доктор гордился бы моими расширенными знаниями. Мы надеемся, что метакарп когда-нибудь заговорит.

Прыжковое движение предоставляет данные о четырех костях пальца в каждом пальце, упорядоченных от запястья до кончика каждого пальца: пястной кости, проксимальных фаланг, промежуточных фаланг и дистальных фаланг. Это не имеет смысла для большинства общества, поэтому вот прекрасная диаграмма, которую я нашел в Википедии :

Детали кости пальца

Это более подробно описано для каждой кости (я расположил их от запястья до кончика пальца):