Новое приложение MobilePoser меняет представление о захвате движений, делая его доступным без дорогостоящего оборудования. Используя датчики, уже встроенные в смартфоны, наушники и смарт-часы, и дополняя их искусственным интеллектом, приложение отслеживает положение и позу человека с точностью до нескольких сантиметров. Это открывает двери для новых иммерсивных возможностей в играх, фитнесе и навигации в помещениях.
Приложение полагается на инерциальные измерительные блоки (IMU), включающие акселерометры, гироскопы и магнитометры. Эти датчики измеряют положение, ориентацию и движение тела. Однако точность обычных IMU недостаточна для моушн-кэпчер, поэтому разработчики применили многоступенчатый алгоритм машинного обучения. ИИ обучался на синтезированных данных, сгенерированных из качественных данных моушн-кэпчер, что позволило добиться высокой точности.
Ключевой особенностью MobilePoser является его адаптивность. Приложение способно отслеживать движения как при использовании нескольких устройств (например, смартфона и часов), так и только одного смартфона. Учитывается физика человеческого тела, что предотвращает нереалистичные движения, вроде сгибания суставов в обратную сторону.
Разработчики предоставили ИИ-модели и связанные данные в открытый доступ, чтобы другие исследователи могли продолжать развитие этой перспективной технологии. Это значит, что в будущем мы можем ожидать еще более точных и доступных систем моушн-кэпчер, основанных на простых потребительских устройствах.
Изображение носит иллюстративный характер
Приложение полагается на инерциальные измерительные блоки (IMU), включающие акселерометры, гироскопы и магнитометры. Эти датчики измеряют положение, ориентацию и движение тела. Однако точность обычных IMU недостаточна для моушн-кэпчер, поэтому разработчики применили многоступенчатый алгоритм машинного обучения. ИИ обучался на синтезированных данных, сгенерированных из качественных данных моушн-кэпчер, что позволило добиться высокой точности.
Ключевой особенностью MobilePoser является его адаптивность. Приложение способно отслеживать движения как при использовании нескольких устройств (например, смартфона и часов), так и только одного смартфона. Учитывается физика человеческого тела, что предотвращает нереалистичные движения, вроде сгибания суставов в обратную сторону.
Разработчики предоставили ИИ-модели и связанные данные в открытый доступ, чтобы другие исследователи могли продолжать развитие этой перспективной технологии. Это значит, что в будущем мы можем ожидать еще более точных и доступных систем моушн-кэпчер, основанных на простых потребительских устройствах.
