Перчатка, распознающая жесты

Перчатка была сделана для игры «Есть такое ремесло» (2013).

Во время игры предполагалось немалое количество боевки, в том числе ночью. Поэтому была проблема — как монстру на расстоянии 20 метров в темноте определить, какой Знак сделал каждый из нескольких ведьмаков, и насколько правильно?

Эта задача и возложена на перчатку. Перчатка анализирует жесты, и, когда и если всё сделано правильно, зажигает соответствующий светодиод. Светодиод хорошо различим и ночью, и днём.

Каждый Знак состоит из трёх жестов:

  • инициирующий;
  • набор Силы;
  • завершающий.

Каждый жест делается пальцами, сложенными особым образом. Для обратной связи используется вибромотор: после инициирующего жеста перчатка начинает дрожать, после набора Силы дрожит сильнее, после инициирующего жеста - загорается светодиод соответствующего цвета и происходит короткий всплеск вибрации. Затем светодиод горит, а вибромотор слабо вибрирует, пока ведьмак не снимет знак.

Для распознавания жестов используется шесть трёхосевых акселерометров: по одному на каждом пальце и еще один на тыльной стороне ладони. Таким образом процессор определяет положения каждого пальца и ладони.

Алгоритм распознавания претерпел три итерации. С акселерометров снимались показания и отправлялись в Matlab, там проводился анализ и вычисление констант. Затем эти константы записывались в процессор перчатки. Для обучения алгоритма мы позвали около десяти игроков, они делали Знаки, а мы записывали логи.

Всего было сделано 25 перчаток.

Перчатки были переиспользованы в 2015 году для   РИ «Поколение» по сеттингу Mass Effect, прошедшей во Владивостоке (кадеты в школе изучали жестовую боевку). 

Перчатки были продемонстрированы стороннему зрителю в рамках олимпиады НТИ в Москве, а также в прямом эфире канала «Вечерняя Москва». 

 

 

В 2018 году перчатки вновь помогали моделировать боевые жесты юных ведьмаков на игре «Школа медведя» в Нарве. 

Магические жесты как вызов для электронщика — статья на Гиктаймс о перчатке.

Search

Tags
nfc волшебство всепроекты замок звук игротехника образование распознаваниежестов свет стимпанк удобныеприборы универсальныеустройства фантастика чуятьдругдруга