Нейросеть даже неумеху покажет профессиональным танцором на видео (2 фото + видео)
Специалисты Калифорнийского университета Беркли создали технологию глубокого обучения. Она способна заставить танцевать на видео любого человека, даже с нулевым уровнем подготовки. Один из алгоритмов, захватывая движения профессионального танцора, производит карту поз в формате "человечка из палочек". Ещё два алгоритма пользуются ей, перенося жесты на целевого человека. На время виртуального танца, лицу человека даже придают реалистичное выражение. Получается потрясающе реалистично. Если не верите, посмотрите представленное видео.
У авторов проекта впереди ещё много работы по доработке технологии, получившей название «Everybody Dance Now». Надо нивелировать размытие элементов, убрать случайную дрожь, исключить исчезание частей тела при выполнении определённых па. Однако и в текущем варианте возможности технологии впечатляют. Хотя, конечно, движения у эталонных "манекенов" пока должны быть просты и незамысловаты, брейкданс нейросети ещё не освоили. Так же неизвестно какой аппаратурой захватываются движения объекта — обычной камерой или контроллером движений в формате Kinect.
Источник: cnet.com, The University of California, Berkeley