Для захвата движения хватит камер нескольких смартфонов

Учёные из Института интеллектуальных систем Макса Планка и Университета Карнеги — Меллона разработали технологию захвата движения без специальных костюмов и маркеров

Новая система под названием MAMMA (Markerless Accurate Multi-person Motion Acquisition) использует обычное видео с камер смартфонов, чтобы точно фиксировать движения людей. Она «видит» 512 виртуальных точек отслеживания прямо на теле человека, анализируя кадры видео. При этом система способна предсказывать позы, которых не было в обучающих данных.

Раньше для захвата движения актёры надевали специальные костюмы с маркерами, которые камеры отслеживали в студии. Процесс был долгим и дорогим: маркеры могли отпадать, а если люди подходили слишком близко друг к другу — точность падала. Существующие безмаркерные системы либо дорогие, либо менее точные.

По словам Ханца Куэваса Веласкеса, разница в точности поз между новой технологией и системами с костюмами и маркерами составляет менее одного миллиметра, при этом MAMMA обрабатывает данные почти в три раза быстрее, чем традиционные методы. Система справляется даже со сложными взаимодействиями — например, с танцами или боевыми искусствами.

Разработчики ожидают, что технология найдёт применение в медицине (для отслеживания движений пациентов в физиотерапии), виртуальной реальности, спорте, кино и игровой индустрии. Например, спортивные тренеры смогут анализировать технику нескольких атлетов одновременно, а разработчики игр — создавать реалистичные анимации без дорогостоящих студий захвата движения.

Учёные планируют поделиться данными и инструментами с научным сообществом, чтобы стимулировать новые разработки в области фиксации движений людей.

Источник: Max Planck Society