Нейросеть учится сложным движениям, просматривая видео на YouTube
Исследователи Калифорнийского Университета совместно с коллегами из Университета Британской Колумбии разработали нейросетевой фреймворк, позволяющий виртуальным персонажам обучаться сложным движениям напрямую с выложенных на YouTube видеороликов, где эти движения выполняют люди.
Процесс обучения происходит следующим образом. Система получает ролик, на котором человек выполняет необходимое действие, к примеру, обратное сальто. Затем алгоритм покадрово размечает перемещение элементов человеческого тела и «согласует» их, образуя плавно двигающуюся модель. После этого данные передаются нейросети, которая пытается повторить движения с помощью обучения с подкреплением (поощрение происходит, когда разница между движениями человека из видеоролика и движениями человеческой модели для каждого кадра минимальна).
Как видно в видео, нейросеть научилась качественно повторять множество достаточно сложных движений, причем алгоритм действует вариативно: например, он может подстраиваться под изменение строения виртуального персонажа, переключаясь с человеческой модели на модель человекоподобного робота Atlas, а также адаптироваться под окружающую среду и выполнять действия, двигаясь по сложному рельефу с ямами и другими препятствиями.
Здесь выдают
ставки
ставки
© 2008‒2025 Социально‐развлекательная сеть «Фотострана». Пользователей: 24 562 197 человек
ООО «Фотострана» ОГРН: 1157847426076 ИНН: 7813238556
197046, Санкт-Петербург, Певческий переулок, дом 12, лит. А
Следующая запись: Астрономы обнаружили 20 новых быстрых радиовспышек
Лучшие публикации