Ученые нашли способ превратить вас в героя аниме

Совсем скоро мы сможем создавать аватары в стиле аниме из собственных фотографий — группа южнокорейских исследователей NCSoft предложила метод преобразования селфи в персонажа любимого жанра. 

Разработка названа U-GAT-IT (Unsupervised Generative Attentional Networks). В отличие от существующих нейросетей, новая не просто подбирает похожего персонажа, а превращает человека в уникального героя, учитывая мимику и индивидуальные черты. При обработке снимка можно изменить цвет глаз, волос и кожи.

Исходный код доступен на GitHub.

Генеративно-состязательные сети (GAN) появились еще в 2014 году и широко используются для работы с графической информацией. Нерешенной оставалась проблема, возникающая при преобразовании изображений, сильно отличающихся по форме: например, превратить реальное фото в мультяшное. Команда NCSoft нашла решение в интеграции модуля Адаптивной послойной нормализации (AdaLIN) в уже существующую систему. Эта деталь усиливает фокус на такие важные зоны, как рот и глаза.

В октябре 2018 года японская компания Crypko сообщила о новой разработке — нейросети, генерирующей анимешных персонажей, используя технику машинного обучения. Разработчики видеоигр и режиссеры фильмов соответствующего жанра планируют использовать сеть в своей работе.

Пока это некоммерческий эксперимент, но не исключено, что в будущем он станет доступен широким массам.