Apple научит VR отслеживать не только руки, но и положение всего тела
Точное отслеживание всего тела откроет новые возможности во множестве направлений: от приложений для здоровья до игр и виртуальной реальности. Однако, не многие пользователи будут готовы ради новых впечатлений от фитнеса примерить на себя полноценный костюм захвата движений. К счастью, в скором времени мы можем увидеть более простое решение, задействующее устройства, которые вы уже носите с собой ежедневно, например наушники или iPhone.
Группа Future Interfaces Group (FIG) Университета Карнеги-Меллона поделилась некоторыми новыми исследованиями в области отслеживания всего тела, и хотя они не могут конкурировать с точностью костюма захвата и студии стоимостью в миллион долларов, предложенный подход все же может быть достаточно точным, чтобы позволить пользователям переводить свои движения в мир виртуальной реальности без необходимости в каком-либо специальном оборудовании.
Исследование FIG на самом деле напоминает патенты, поданные Apple за последние несколько лет, потому что единственное оборудование, на которое она опирается, — это умные часы, смартфон и беспроводные наушники. Сейчас это не вызывает удивления, поскольку новые модели портативных устройств зачастую оснащены акселерометрами, гироскопами и другими датчиками обнаружения движения для облегчения работы, а иногда имеют и более продвинутые функции, такие как отслеживание фитнеса или даже Spacial Audio в Apple AirPods.
Данные с этих датчиков предоставляются разработчикам через SDK для использования в сторонних приложениях и аксессуарах, но исследователи FIG собирают их для интеллектуального расчета позы всего тела носителя с помощью инструмента под названием IMUPoser.
Чтобы достоверно зафиксировать игру актера и передать ее персонажу видеоигры или созданному с помощью компьютерной графики персонажу фильма, необходимо распознать движения сотен точек отслеживания. В нашем случае смартфон в кармане брюк, смарт-часы на запястье и наушник в ухе предоставляют ровно столько данных, сколько достаточно, чтобы сделать разумное предположение о положении тела пользователя, включая положение всех его конечностей или о том, стоит ли он в полный рост, или сутулится.
Подход не обещает 100% точности, поскольку алгоритму приходится делать некоторые допущения, чтобы компенсировать минимальный объем данных отслеживания. Например, если он обнаружит, что человек идет, он будет считать, что рука и нога, противоположная той, которую отслеживают смартфон и смарт-часы, двигаются также, но не синхронно (что является естественной походкой человека).
Конечно, точность падает еще больше, когда IMUPoser вынужден полагаться на данные только с двух устройств или даже с одного, однако есть определенная доля пользователей, которые почти никогда не расстаются со своими смарт-устройствами.
Заменит ли этот инструмент более надежные инструменты отслеживания тела? Определенно не в ближайшее время, но его можно использовать для улучшения и уточнения данных, собираемых с датчиков движения, уже используемых в интеллектуальных устройствах. Многие фитнес-трекеры попытаются угадать, какие действия вы выполняете, и этот инструмент может помочь сократить количество раз, когда пользователям необходимо вносить коррективы, без необходимости каким-либо образом модифицировать или обновлять физическое оборудование.
Группа Future Interfaces Group (FIG) Университета Карнеги-Меллона поделилась некоторыми новыми исследованиями в области отслеживания всего тела, и хотя они не могут конкурировать с точностью костюма захвата и студии стоимостью в миллион долларов, предложенный подход все же может быть достаточно точным, чтобы позволить пользователям переводить свои движения в мир виртуальной реальности без необходимости в каком-либо специальном оборудовании.
Исследование FIG на самом деле напоминает патенты, поданные Apple за последние несколько лет, потому что единственное оборудование, на которое она опирается, — это умные часы, смартфон и беспроводные наушники. Сейчас это не вызывает удивления, поскольку новые модели портативных устройств зачастую оснащены акселерометрами, гироскопами и другими датчиками обнаружения движения для облегчения работы, а иногда имеют и более продвинутые функции, такие как отслеживание фитнеса или даже Spacial Audio в Apple AirPods.
Данные с этих датчиков предоставляются разработчикам через SDK для использования в сторонних приложениях и аксессуарах, но исследователи FIG собирают их для интеллектуального расчета позы всего тела носителя с помощью инструмента под названием IMUPoser.
Чтобы достоверно зафиксировать игру актера и передать ее персонажу видеоигры или созданному с помощью компьютерной графики персонажу фильма, необходимо распознать движения сотен точек отслеживания. В нашем случае смартфон в кармане брюк, смарт-часы на запястье и наушник в ухе предоставляют ровно столько данных, сколько достаточно, чтобы сделать разумное предположение о положении тела пользователя, включая положение всех его конечностей или о том, стоит ли он в полный рост, или сутулится.
Подход не обещает 100% точности, поскольку алгоритму приходится делать некоторые допущения, чтобы компенсировать минимальный объем данных отслеживания. Например, если он обнаружит, что человек идет, он будет считать, что рука и нога, противоположная той, которую отслеживают смартфон и смарт-часы, двигаются также, но не синхронно (что является естественной походкой человека).
Конечно, точность падает еще больше, когда IMUPoser вынужден полагаться на данные только с двух устройств или даже с одного, однако есть определенная доля пользователей, которые почти никогда не расстаются со своими смарт-устройствами.
Заменит ли этот инструмент более надежные инструменты отслеживания тела? Определенно не в ближайшее время, но его можно использовать для улучшения и уточнения данных, собираемых с датчиков движения, уже используемых в интеллектуальных устройствах. Многие фитнес-трекеры попытаются угадать, какие действия вы выполняете, и этот инструмент может помочь сократить количество раз, когда пользователям необходимо вносить коррективы, без необходимости каким-либо образом модифицировать или обновлять физическое оборудование.
- Алексей Павлов
- https://youtu.be/hgpjbKv8XFY
Наши новостные каналы
Подписывайтесь и будьте в курсе свежих новостей и важнейших событиях дня.
Рекомендуем для вас
Тайна скифской ДНК: что поразило российских ученых, когда они заглянули в геном легендарных кочевников древности
Оказалось, что 2500 лет подряд историки ошибались в происхождении этого народа. Теории и учебники придется серьезно переписать...
Выход на новый уровень: почему Россия возрождает проводное радио, а Китай давно прокачал этот вид связи
У старой технологии обнаружился огромный потенциал, который поможет миллионам людей...
Новый рецепт апокалипсиса: даже небольшая ядерная боеголовка на орбите гарантировано выведет из игры 99% аппаратов за считаные дни
Однако самое опасное, по словам ученых, начнется позже. Почему космос будет фактически закрыт?...
Назад в будущее: в России вернут проводное радио. Зачем? Почему спорят эксперты?
В технологию уже вложено более миллиарда рублей, а МЧС называет проводное радио лучшим способом оповещения на сегодня...
Запретный остров у берегов Исландии: суша, появившаяся в 1963 году, до сих пор закрыта почти для всех
Но ученым надо поторопиться, уникальный объект исчезает в буквальном смысле на глазах...
Настоящий Ковчег Завета, возможно, спрятан в Эфиопии: почему его может видеть только один человек?
Этой истории 3000 лет, но она до сих пор далека от своего завершения...
Наша Вселенная скреплена невидимым галактическим клеем: и без него нас бы не было
По словам ученых, «склеивание» произошло уже в первые секунды существования мироздания...
Парадокс Древнего Перу: жили мирно, но при этом приносили массовые и жестокие человеческие жертвы. Почему?
Ученый рассказал, какую роль в истории сыграл Эль-Ниньо и почему ритуальные убийства совершали «без гнева и конфликта»...
Усиленно боролись за чистоту, но просчитались: как роковая ошибка властей поставила под угрозу целый средневековый город
Норвежский Тронхейм был самым чистым в Европе, однако руководству города этого показалось мало. Хотели как лучше, а получилось как всегда...
В России создана революционная упаковка: молоко будет свежим целый месяц
Разбираемся: не испортился ли вкус продукта и когда ожидать чудо-пачки в продаже...
Древние деревья помогли раскрыть дело 3500-летней давности: когда пал Вавилон?
Ученые до последнего момента не знали этой даты, потому что в великом городе не было… нормального календаря...
Неожиданный поворот в деле таинственного астероида 1998 KY26: он может быть… потерянным советским зондом
В этом уверен американский астрофизик Аве Лоеб. Какие доказательства предлагает известный ученый?...
Как же на самом деле умерла Клеопатра: почему даже древние историки не смогли прийти к согласию в этом вопросе
Скорее всего, историю об укусе змеи запустил лично император Октавиан, чтобы опорочить египетскую царицу...
Америка проигрывает болезни, которую когда-то победила с большим трудом
Положение США усугубляют действия президента Трампа и его чиновников...