Группа исследователей из Вашингтонского института разработали новейшую технологию Background Matting V2, сообщается на веб-сайте учебного заведения. Они смогли достигнуть наиболее высококачественной подмены фона на видео, чем в приложениях по типу Zoom. В особенности очень разница кидается в глаза в фрагментах с волосами и очками.
Направьте внимание, как отменно «вырезаны» отдельные локоны волос / Источник: Вашингтонский институт
Инструмент способен подменять фон в 4К-видео при 30 к/сек и в HD-видео при 60 к/сек. В базу разработки легла разработка background matting. Её сущность заключается в использовании 2-ух вариантов 1-го и такого же кадра: с человеком и без него.
Чтоб достигнуть итогового результата, исследователи употребляли две нейросети. Одна занималась вычислением результатов с низким разрешением, а результат её работы уточняла 2-ая нейросеть, работавшая с материалами высочайшего качестве на выборочных участках.
У проекта имеется своя страничка на GitHub. Для использования инструмента, нужно иметь довольно современное железо. Речь идёт как минимум о видеоплате уровня NVIDIA RTX 2080 Ti и выше.
Источник: Вашингтонский институт
Источник: