Перчатка, распознающая жесты

Перчатка была сделана для игры «Есть такое ремесло» (2013).

Во время игры предполагалось немалое количество боевки, в том числе ночью. Поэтому была проблема — как монстру на расстоянии 20 метров в темноте определить, какой Знак сделал каждый из нескольких ведьмаков, и насколько правильно?

Эта задача и возложена на перчатку. Перчатка анализирует жесты, и, когда и если всё сделано правильно, зажигает соответствующий светодиод. Светодиод хорошо различим и ночью, и днём.

Каждый Знак состоит из трёх жестов:

  • инициирующий;
  • набор Силы;
  • завершающий.

Каждый жест делается пальцами, сложенными особым образом. Для обратной связи используется вибромотор: после инициирующего жеста перчатка начинает дрожать, после набора Силы дрожит сильнее, после инициирующего жеста - загорается светодиод соответствующего цвета и происходит короткий всплеск вибрации. Затем светодиод горит, а вибромотор слабо вибрирует, пока ведьмак не снимет знак.

Для распознавания жестов используется шесть трёхосевых акселерометров: по одному на каждом пальце и еще один на тыльной стороне ладони. Таким образом процессор определяет положения каждого пальца и ладони.

Алгоритм распознавания претерпел три итерации. С акселерометров снимались показания и отправлялись в Matlab, там проводился анализ и вычисление констант. Затем эти константы записывались в процессор перчатки. Для обучения алгоритма мы позвали около десяти игроков, они делали Знаки, а мы записывали логи.

Всего было сделано 25 перчаток.

Перчатки были переиспользованы в 2015 году для   РИ «Поколение» по сеттингу Mass Effect, прошедшей во Владивостоке (кадеты в школе изучали жестовую боевку). 

Перчатки были продемонстрированы стороннему зрителю в рамках олимпиады НТИ в Москве, а также в прямом эфире канала «Вечерняя Москва». 

 

 

В 2018 году перчатки вновь помогали моделировать боевые жесты юных ведьмаков на игре «Школа медведя» в Нарве. 

Магические жесты как вызов для электронщика — статья на Гиктаймс о перчатке.

Search

Tags
klnfc nfc uart usb wifi антураж артефакт без корпуса браслет в корпусе ведьмак взлом вибро видео волшебство время все проекты грибы дверь дерево детектор для дома дорожка древа жесты замок заряжается звездные войны звук значки игроку игротехника ик как в сеттинге камни кинжал код косплей кристаллы лазер лайтсабер люстра мастеру медальон механика музыкальный движок на батарейках носимое обзор образование освещение от аккумулятора от сети отзывы отладка перчатка пилюли портрет проводная связь промышленное пульт радиация радио речь решения роботы свет светлячок станок статьи стационарное стимпанк телефон толкин удобные приборы универсальное устройства игрока фантастика фоллаут девайс цветы часы чуять друг друга экран