Алгоритм сопоставляет предварительно записанное видео с фотографией в зависимости от позы субъекта и применяет к изображению естественные движения лица. Почти как анимированные, движущиеся портреты во франшизе о Гарри Поттере, фотографии, когда-то застывшие во времени, оживают с помощью программы искусственного интеллекта (ИИ) под названием «Глубокая ностальгия».
Технология, выпущенная 25 февраля генеалогическим сайтом MyHeritage, с тех пор стала вирусной. Пользователи социальных сетей создали реалистичные движущиеся портреты математика Алана Тьюринга, аболициониста Фредерика Дугласа и физика Марии Кюри, сообщает Минди Вайсбергер для Live Science. Исторические личности могут моргать, двигать головой из стороны в сторону и даже улыбаться. Технология также используется для анимации произведений искусства, статуй и фотографий предков. Также алгоритмом может быть создана анимированная картина по фото.
ИИ может создавать видеоматериалы или «дипфейки», используя генеративно-состязательные сети или GAN, сообщает Live Science. GAN состоит из двух A.I. системы, работающие вместе для создания контента, который кажется очень похожим на настоящий. Одна система, генератор, создает копию изображения, используя новые данные. Другая система, дискриминатор, определяет, являются ли данные реальными или фальшивыми. Со временем оба инструмента научатся создавать невероятно реалистичные изображения, которые трудно отличить от оригиналов, как сообщил Адам Манн для Live Science в 2019 году.
MyHeritage представил Deep Nostalgia, чтобы пользователи могли увидеть своих предков или покойных родственников в движении. Чтобы создать реалистичные движения, компания по распознаванию лиц D-ID, которая специализируется на технологии глубокого обучения, использует GAN для анимации загружаемых изображений. Видеозаписи реальных людей, демонстрирующих различные движения лица, были использованы для обучения алгоритма Deep Nostalgia применять движение к неподвижным фотографиям, сообщает Эд Браун для Newsweek.
Алгоритм может распознавать, какое предварительно записанное видео лучше всего подходит к фотографии, в зависимости от позы субъекта и применяет естественные движения лица к изображениям, которые ранее не двигались, сообщает Ким Лайонс для Verge.
«Наблюдение за тем, как лица наших любимых предков оживают в видеосимуляции, позволяет нам представить, какими они могли бы быть в действительности, и предоставляет новый способ связи с историей нашей семьи», — говорит Гилад Джафет, генеральный директор и основатель MyHeritage. Сегодняшняя Корал Мерфи Маркос.
Глубокие фейки в последние годы вызвали споры из-за их сверхъестественной способности создавать измененные видео или изображения политических деятелей и знаменитостей, которые невозможно отличить от настоящих. Глубокие подделки могут использоваться в злонамеренных целях, например, вставлять слова в чью-то речь, создавая впечатление, что они говорят то, чего никогда не говорили. В других случаях лица голливудских знаменитостей были смонтированы на телах актрис в порнографических видео, сообщает AJ Willingham для CNN.
Другие критики отмечают, что исторические деятели часто очень тщательно подбирали свою позу и выражение лица на фотографиях, например Фредерик Дуглас, которого называли «самым фотографируемым американцем 19 века». Он намеренно выбрал фотографию как средство изменения взглядов мира на чернокожих мужчин того времени. Образы чернокожих существовали, но часто в подчиненном, жестоком или скомпрометированном положении в контексте рабства. В книге 2015 года «Изображая Фредерика Дугласа» гарвардский историк Джон Штауффер объясняет, что Дуглас, как бывший порабощенный человек, считал, что фотография «подчеркивает человеческую сущность своих объектов», сообщила Рене Грэм для WBUR в 2016 году. Использование глубокой ностальгии, чтобы заставить Дугласа двигаться и эмоция меняет радикальное сообщение, которое он пытался передать.
«В частности, Дуглас — в печати он сказал, что не хочет — он не хочет, чтобы его изображали счастливым рабом, — сказал Штауффер NPR в 2015 году. — Улыбающийся чернокожий должен был подыграть расистской карикатуре. прекращение рабства и прекращение расизма имело серьезность, которая требовала сурового взгляда. И поэтому он был склонен противостоять зрителю, смотреть прямо в камеру».
К 4 марта на сайте уже было загружено и анимированно десять миллионов фотографий, сообщает Newsweek.
«Действительно, результаты могут быть спорными, и трудно остаться равнодушным к этой технологии. Эта функция предназначена для ностальгического использования, то есть для того, чтобы вернуть к жизни любимых предков. злоупотребление этим, например, создание «глубоких фальшивых» видео с живыми людьми», — говорится в MyHeritage.
