[Работа с видео, Работа с 3D-графикой, Алгоритмы, Разработка под AR и VR, Искусственный интеллект] ИИ обучили выполнять 3D-захват движения с помощью любой камеры
Автор
Сообщение
news_bot ®
Стаж: 6 лет 9 месяцев
Сообщений: 27286
Исследователи из Института Макса Планка и Facebook Reality Labs утверждают, что они разработали алгоритм машинного обучения — PhysCap — для 3D-захвата движения. Алгоритм работает с любой зеркальной камерой, скорость съемки которой составляет 25 кадров в секунду.
Как утверждают исследователи, PhysCap осуществляет качественный захват движения с учетом всех физических показателей. До этого попытки создать систему motion capture варьировались от костюма стоимостью $2500 до платформы, которая использует глубинный сенсор Kinect от Microsoft. Однако даже лучшие системы оценки позы человека не позволяют создать плавную анимацию.
PhysCap же захватывает физически и анатомически правильные позы. Алгоритм оценивает 3D-позы тела кинематическим способом с помощью оверточной нейронной сети. На втором этапе положение тела и состояние движения для каждого кадра видео предсказывает другая оверточная сеть. На заключительном этапе оценки поза воспроизводятся как можно точнее, чтобы учесть такие вещи, как гравитация, размещение ног и другие факторы.
Извините, данный ресурс не поддреживается. :(
В ходе эксперимента исследователи протестировали PhysCap на камере Sony DSC-RX0 и ПК с 32 ГБ оперативной памяти, видеокартой GeForce RTX 2070 и восьмиядерным процессором Ryzen7, который они использовали для захвата и обработки шести последовательностей движения в сценах, разыгрываемых двумя исполнителями. Команда обнаружила, что PhysCap хорошо работает на сценах с разным фоном, но иногда неправильно интерпретирует скорость движения ног.
Чтобы устранить эти барьеры в работе, команда планирует исследовать модели взаимодействия рук и ног человека в сидячей и полулежачей позах. Исследователи говорят, что PhysCap подходит для анимации виртуальных персонажей без какой-либо дальнейшей постобработки.
===========
Источник:
habr.com
===========
Похожие новости:
- [Разработка для Office 365, Искусственный интеллект, Голосовые интерфейсы] MS Word из пакета Microsoft 365 научили переводить голос в текст в режиме реального времени
- [Искусственный интеллект] МКБ внедрил технологию распознавания клиентских данных с помощью искусственного интеллекта
- [Машинное обучение, Искусственный интеллект, Транспорт] Детектирование состояния светофоров на железнодорожных переездах для фиксации нарушений ПДД
- [Поисковые технологии, Машинное обучение, Искусственный интеллект] Нейросетевой визуальный поиск
- [Алгоритмы, Машинное обучение] Обратный перевод для Нейронного машинного перевода
- [Python, Работа с 3D-графикой, Искусственный интеллект] 3D ML. Часть 3: датасеты и фреймворки в 3D ML
- [Машинное обучение, Искусственный интеллект, Звук] Увольнения в Mozilla ставят под угрозу будущее проекта DeepSpeech
- [Python, Data Mining, Машинное обучение, Искусственный интеллект, Natural Language Processing] Проект Natasha. Набор качественных открытых инструментов для обработки естественного русского языка (NLP)
- [Тестирование IT-систем, Работа с видео, История IT, Старое железо] Как цветные полосы стали самым популярным тестовым паттерном для ТВ (перевод)
- [Алгоритмы, Node.JS, API, Финансы в IT] Поиски фундаментальных данных для акций через API Financial Modeling Prep
Теги для поиска: #_rabota_s_video (Работа с видео), #_rabota_s_3dgrafikoj (Работа с 3D-графикой), #_algoritmy (Алгоритмы), #_razrabotka_pod_ar_i_vr (Разработка под AR и VR), #_iskusstvennyj_intellekt (Искусственный интеллект), #_3dgrafika (3d-графика), #_motion_capture, #_algoritmy (алгоритмы), #_rabota_s_video (
Работа с видео
), #_rabota_s_3dgrafikoj (
Работа с 3D-графикой
), #_algoritmy (
Алгоритмы
), #_razrabotka_pod_ar_i_vr (
Разработка под AR и VR
), #_iskusstvennyj_intellekt (
Искусственный интеллект
)
Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете голосовать в опросах
Вы не можете прикреплять файлы к сообщениям
Вы не можете скачивать файлы
Текущее время: 22-Ноя 12:24
Часовой пояс: UTC + 5
| Автор | Сообщение |
|---|---|
|
news_bot ®
Стаж: 6 лет 9 месяцев |
|
 Исследователи из Института Макса Планка и Facebook Reality Labs утверждают, что они разработали алгоритм машинного обучения — PhysCap — для 3D-захвата движения. Алгоритм работает с любой зеркальной камерой, скорость съемки которой составляет 25 кадров в секунду. Как утверждают исследователи, PhysCap осуществляет качественный захват движения с учетом всех физических показателей. До этого попытки создать систему motion capture варьировались от костюма стоимостью $2500 до платформы, которая использует глубинный сенсор Kinect от Microsoft. Однако даже лучшие системы оценки позы человека не позволяют создать плавную анимацию.  PhysCap же захватывает физически и анатомически правильные позы. Алгоритм оценивает 3D-позы тела кинематическим способом с помощью оверточной нейронной сети. На втором этапе положение тела и состояние движения для каждого кадра видео предсказывает другая оверточная сеть. На заключительном этапе оценки поза воспроизводятся как можно точнее, чтобы учесть такие вещи, как гравитация, размещение ног и другие факторы. Извините, данный ресурс не поддреживается. :( В ходе эксперимента исследователи протестировали PhysCap на камере Sony DSC-RX0 и ПК с 32 ГБ оперативной памяти, видеокартой GeForce RTX 2070 и восьмиядерным процессором Ryzen7, который они использовали для захвата и обработки шести последовательностей движения в сценах, разыгрываемых двумя исполнителями. Команда обнаружила, что PhysCap хорошо работает на сценах с разным фоном, но иногда неправильно интерпретирует скорость движения ног. Чтобы устранить эти барьеры в работе, команда планирует исследовать модели взаимодействия рук и ног человека в сидячей и полулежачей позах. Исследователи говорят, что PhysCap подходит для анимации виртуальных персонажей без какой-либо дальнейшей постобработки. =========== Источник: habr.com =========== Похожие новости:
Работа с видео ), #_rabota_s_3dgrafikoj ( Работа с 3D-графикой ), #_algoritmy ( Алгоритмы ), #_razrabotka_pod_ar_i_vr ( Разработка под AR и VR ), #_iskusstvennyj_intellekt ( Искусственный интеллект ) |
|
Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете голосовать в опросах
Вы не можете прикреплять файлы к сообщениям
Вы не можете скачивать файлы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете голосовать в опросах
Вы не можете прикреплять файлы к сообщениям
Вы не можете скачивать файлы
Текущее время: 22-Ноя 12:24
Часовой пояс: UTC + 5