Исследователи Массачусетского технологического института (MIT) разработали браслет, который с помощью ультразвука отслеживает движения кисти и пальцев человека. Устройство позволяет управлять роботизированной рукой или взаимодействовать с объектами в виртуальной среде.
Браслет оснащён миниатюрным ультразвуковым датчиком, похожим на те, что используются в медицинских аппаратах. Датчик закреплён на гидрогелевой подложке, безопасной для кожи. Когда человек двигает рукой, устройство получает изображения мышц, сухожилий и связок запястья.
Искусственный интеллект, обученный на размеченных вручную ультразвуковых снимках, в реальном времени преобразует эти изображения в положение пальцев и ладони. «Сухожилия и мышцы запястья — как нити, управляющие пальцами-марионетками», — объясняет один из авторов исследования Гэнси Лу.
В демонстрациях участник в браслете управлял роботизированной рукой: та повторяла жесты, играла на пианино и забрасывала мини-баскетбольный мяч в корзину. Также с помощью браслета можно было увеличивать и уменьшать виртуальные объекты на экране, сжимая пальцы.
Сейчас устройство по размеру сравнимо с мобильным телефоном. Исследователи планируют сделать его компактнее и обучить ИИ на данных людей с разным размером кисти и формой пальцев. В перспективе технология может применяться для обучения роботов тонким операциям, включая хирургические, а также для управления в видеоиграх и дизайнерских приложениях.
«Мы считаем, что это самый продвинутый способ отслеживания движений кисти — через носимую визуализацию запястья», — говорит профессор механической инженерии MIT Сюаньхэ Чжао.