В августе 2020 был представлена удивительная нейронная сеть. С ее помощью удалось оживить известные портреты. Система превратила лица нарисованных людей в настоящие, которые проявляют эмоцию и меняют мимику.
Автором проекта стал российский программист Денис Ширяев. Для каждого полотна ему пришлось использовать от 6 до 7 различных нейронных сетей. Объединяя их, мужчине удалось создать новую систему, которая оживила знаменитые портреты. Эмоции он позаимствовал у реальных людей из «ТикТока».
Принцип работы
Каждая нейронная сеть отвечает за свою роль в системе. Одна определяет похожие черты лица из тысячи примеров, которые имеются в памяти. Другая проводит анализ портрета и создает модель эмоционального поведения объекта. Третья применяет считанные эмоции и модель поведения на деле.
Работоспособность системы зависит от ряда последовательно выстроенных процессов. Достичь такого результата энтузиасту удалось не сразу. Стоит сказать, что Денис Ширяев не является профессиональным программистом. Он самостоятельно на протяжении нескольких лет изучает технологию нейронных сетей.
Портреты превращенные в лица реальных людей
Автору удалось оживить лицо известной на весь мир Моны Лизы. Нейронная сеть показала, как девушка выглядела бы в реальной жизни. Ожившая Мона Лиза не просто преобразилась, но и начала проявлять эмоции – улыбаться, моргать и даже заигрывать со зрителями.
Среди прочих, под руку мастера попала «Девушка с жемчужной сережкой» и «Дама с горностая». Денис также оживил автопортрет знаменитой мексиканской художницы Фриды Кало. Ее образ в реальном времени оказался на удивление схож с картиной.
Также было оживленно творение Сандро Боттичелли – «Рождение Венеры». Красавица поразила своей улыбкой всех зрителей на презентации системы. Это стало вершиной творения
Прочие работы Дениса Ширяева
Ранее программист улучшил «Прибытие поезда» братьев Люмьер до разрешения в 4к. Он оживил в цвете кадры Нью-Йорка 1911 года. Это видео на YouTube набрало более 10 миллионов просмотров и тысячи восторженных отзывов.
В ближайшее время, Ширяев планирует оживить других известных личностей. Среди главных претендентов – Вольфганг Амадей Моцарт и другие. Нейросеть превращающая картины в лица реальных людей имеет большой потенциал для дальнейшего развития использования.
