Нейросеть научили моделировать лица (видео) [ Редагувати ]

Ученые из Университета Корнелла научили нейросеть создавать трехмерную модель лица по одной фотографии. В качестве эксперимента создали 3D-изображения Мохаммеда Али, Иэна Кертиса и Дональда Трампа.

Для обучения использовали фотографии из Chicago Face Database, где содержатся снимки сотен людей различных возрастов и рас.

Принцип действия таков: программа сначала распознает по фотографии форму лица и создает для него карту степень и количества отражения света. После этого нейросеть VGG-19 анализирует изображение, распознает отдельные части лица и подбирает к ним реалистичные текстуры.

Нехватку деталей система реконструирует самостоятельно на основе сравнения c другими фото, устраняя помехи и недостатки изображения в случае плохого качества исходников.

Хорошо обученная нейросеть пригодится для создания трехмерных аватаров, в том числе для виртуальной реальности, а также для реконструкции внешности исторических персонажей.

Ранее китайские ученые обучили нейросеть определять преступников по фотографиям.