Поделиться
Исследователи из Массачусетского технологического института (MIT) разработали метод на нейронных сетях Image2Lego, который составляет аннотацию по сборке 3D-модели из конструктора LEGO по 2D-изображению.
Как работает Image2Lego
1. Юзер загружает обыденное изображение: к примеру, с самолётом.
2. Метод распознаёт самолёт на фото и загружает его в нейросеть Image2Lego.
3. Натренированная Image2Lego преобразовывает 2D-картинку в 3D-модель самолёта при помощи нейронных сетей и указывает, как он должен смотреться, если собрать его из кубиков LEGO.
4. Метод создаёт аннотацию по сборке модели и докладывает, какие детали для этого пригодятся.
На что способен Image2Lego
Собрать самолёт — это ещё цветы. Image2Lego может по изображению лица сделать аннотацию для сборки детально проработанного 3D-лица.
Вот, какую аннотацию дает Image2Lego по сборке лица актёра Криса Прэтта:
Читать полный текст исследования →
Источник: GitHub
Источник: