Новый VR-браслет отслеживает движения кисти и пальцев

Технологии захвата движений совершенствуются год от года, однако даже у самых современных систем возникают проблемы, когда дело доходит до мелкой моторики. Но недавно инженеры из Корнельского университета и Университета Висконсин-Мэдисон разработали новую портативную систему, которая использует термодатчики для отслеживания точного положения рук.

Устройство под названием FingerTrak – это браслет, оснащенный четырьмя небольшими тепловыми камерами, каждая размером с горошину. Благодаря им система может считывать изображения контуров запястья пользователя. Этой информации более чем достаточно для того, чтобы специальный алгоритм мог воспроизвести движение всей руки, включая положения каждого пальца.

«Главным открытиям нашей команды стал тот факт, что программе достаточно всего лишь отслеживать движения запястья, чтобы точно повторять моторику. Это первая система, воссоздающая движения пальцев в 3D-среде с помощью столь скоромного набора данных», рассказал Чен Чжан, один из авторов исследования.

Весь секрет кроется в система машинного обучения, которая прогнозирует положение суставов каждого пальца во время тех или иных движений. В дальнейшем подобные позы можно воссоздавать для любых целей – хоть в 3D-симуляции, хоть при разработке андроидов. В ходе испытаний FingerTrak доказал свою способность точно воспроизводить такие действия, как например перелистывание страниц книги, письмо от руки и использование тачскрина смартфона.