Нейросеть «оживляет» старую фотографию, сначала распознавая лицо и его ориентиры, а затем прогнозируя последовательность кадров с поворотом головы, морганием или улыбкой. Восстановление царапин и цвета выполняют отдельные модели. Получившийся ролик является правдоподобной реконструкцией, а не записью реальных движений человека.
Как готовят исходный снимок
Фотографию сканируют с достаточным разрешением, выравнивают и очищают от крупных повреждений. Модель восстановления может заполнить царапины, уменьшить шум и повысить чёткость. На отсутствующих участках она создаёт вероятные детали, которых в исходнике уже нет.
Колоризация оценивает подходящие цвета по серым оттенкам и обучающим примерам. Она не знает настоящий цвет одежды или глаз без дополнительной информации. Исторически точную версию приходится корректировать по архивным данным.
Откуда берётся движение
Система находит положение глаз, рта, носа и границы лица. Затем применяет траекторию движения, полученную из видео-образца или встроенного шаблона. Генератор синтезирует промежуточные кадры и пытается сохранять внешность.
Поворот раскрывает участки головы, которых на плоском снимке не видно. Их модель вынуждена придумать. Чем сильнее движение и хуже фотография, тем заметнее искажения.
Почему лица иногда меняются
Низкое разрешение не содержит точных ресниц, зубов и текстуры кожи. При повышении качества модель добавляет типичные детали. Они делают кадр резче, но могут изменить сходство.
Сложные причёски, очки, профиль и несколько перекрывающихся лиц увеличивают риск. Поэтому лучше обрабатывать каждый портрет отдельно и выбирать сдержанную амплитуду движения.
Как относиться к результату
Оживлённое фото может быть эмоциональным способом представить семейный архив, но его нужно обозначать как анимацию. Нельзя делать выводы о мимике, здоровье или характере человека по движениям, созданным моделью.
Учитывайте достоинство умерших и чувства родственников. Для публичного использования проверьте права на фотографию. Храните исходный скан без изменений.
Технология соединяет реставрацию и генерацию: часть информации берётся с бумаги, часть статистически достраивается. Чем яснее зрителю эта граница, тем бережнее «оживление» работает с исторической памятью и не превращает художественную реконструкцию в ложную хронику.
Сначала отделяют реставрацию от анимации
Удаление пыли, коррекция контраста и восстановление разрыва меняют неподвижный снимок. Анимация добавляет события, которых камера никогда не фиксировала: моргание, поворот головы, улыбку или движение фона. Даже правдоподобный ролик является художественной реконструкцией, а не найденной записью прошлого.
Перед работой сканируют оригинал в хорошем разрешении и сохраняют необработанную копию. Сильное повышение резкости на маленьком файле создаёт ложные детали, которые затем закрепятся в движении.
Как строится движение лица
Модель находит глаза, рот, нос и контур головы, оценивает примерную глубину и переносит последовательность мимики. Области, которых нет на снимке, приходится дорисовывать. При повороте могут появиться вымышленные ухо, причёска или часть одежды.
Чем фронтальнее и чётче лицо, тем устойчивее результат. Сложная шляпа, рука у щеки и сильная тень мешают разметке. Общие особенности видеообработки объясняет статья о том, как нейросеть анализирует видео покадрово.
Почему небольшое движение выглядит убедительнее
Лёгкое дыхание, моргание и едва заметный поворот требуют меньше догадок, чем речь или полный разворот. При большой амплитуде фон начинает тянуться за головой, зубы меняются между кадрами, а взгляд движется несогласованно.
Если фотография групповая, лица лучше обрабатывать по очереди и проверять, не изменились ли соседние люди. Автоматическое синхронное движение всей группы часто создаёт театральный эффект.
Как проверить готовый ролик
Сначала сравнивают первый кадр с отсканированным снимком: черты лица и важные детали одежды должны сохраниться. Затем смотрят видео медленно, отмечая контур подбородка, глаза, волосы и границы фона. Последний кадр не должен резко отличаться от первого, если ролик будет повторяться.
Для более общей реставрации полезен материал о том, как обработать фото нейросетью. Иногда аккуратно очищенная неподвижная фотография передаёт историю лучше эффектной анимации.
Как показать результат семье
Стоит заранее сказать, что движение создано алгоритмом. Для близких изображение умершего человека может быть эмоционально тяжёлым, поэтому неожиданный ролик не всегда воспринимается как подарок. Не следует добавлять речь от имени человека или приписывать ему слова без ясного художественного обозначения.
Оригинал, реставрацию и анимацию хранят раздельно. Так потомки смогут отличить документ от современной интерпретации. Бережное «оживление» сохраняет узнаваемость и контекст снимка, не выдавая сгенерированное движение за историческое свидетельство.
Цвет тоже является предположением
Если чёрно-белый снимок раскрашивают перед анимацией, модель подбирает вероятные оттенки кожи, ткани и окружения. Она не восстанавливает фактический цвет формы или автомобиля без дополнительного источника. Исторически значимые детали сверяют по архивным сведениям, а неподтверждённую раскраску обозначают как реконструкцию.
Цвет проверяют на устойчивость между кадрами: оттенок глаз, губ и одежды не должен мерцать. Иногда монохромная анимация выглядит достовернее и бережнее, потому что не добавляет ещё один слой догадок. Выбор эффекта должен поддерживать память о снимке, а не демонстрировать максимум возможностей сервиса.
