Нейросеть научилась «переносить» движения из видео на недвижные фото людей

Команда разрабов из Impersonator опубликовала на веб-сайте информацию о новеньком проекте — Impersonator++. Его сущность заключается в переносе движений из видеоисточника на людей, запечатлённых на фото. В качестве 1-го из примеров работы технологии, компания показала, как она «принудила» Дональда Трампа играться с баскетбольным мячом, используя только одно фото с ним.

Пример работы Impersonator++ / Источник: Impersonator

Для сохранения начальной инфы о текстуре, цветах и т.д, создатели употребляли технологию Attentional Liquid Warping GAN вкупе с Attentional Liquid Warping Block (AttLWB). С помощью их им удалось достигнуть очень естественного «смешения» фото и видеоисточников при разработке итогового видео. Свою роль в улучшении финишного результата сыграло и внедрение состязательного обучения.

Наиболее детально с механизмом работы нейросети можно ознакомиться на GutHub-странице проекта. Там же можно отыскать аннотацию по запуску Impersonator++ (пока что проект работает только в консольном режиме).

Источник: Impersonator

Источник: tproger.ru

Поделиться с друзьями:
Андройд IT
Добавить комментарий