Вычислительная фотография – это способ создавать итоговый снимок не только объективом и сенсором, но и алгоритмами. Камера может быстро снять серию коротких экспозиций, выровнять их, отбросить испорченные участки, уменьшить шум, восстановить детали в тенях и светах, оценить глубину и лишь затем показать одну фотографию. Поэтому снимок смартфона часто не является единственным кадром, сделанным строго в момент нажатия кнопки.
Чем она отличается от обычной обработки
Редактирование начинается с уже готового файла. Человек открывает фотографию и меняет яркость, цвет или кадрирование. Вычислительная съёмка участвует раньше: программа решает, какие данные собрать и как объединить их ещё в процессе работы камеры.
Например, одно нажатие запускает серию кадров с короткой выдержкой. Система знает время каждого измерения, параметры сенсора и движение устройства. Она использует эту информацию совместно, а не улучшает один случайно выбранный JPEG.
Граница не абсолютно строгая. Шумоподавление и баланс белого давно выполняются процессором любой цифровой камеры. Термин становится особенно полезным, когда алгоритм преодолевает ограничение одного кадра или создаёт новый вид результата, например карту глубины.
Почему смартфону нужна серия
Маленький объектив пропускает меньше света, а небольшие пиксели сенсора собирают меньше фотонов. В темноте полезный сигнал становится сравним с случайными колебаниями. Длинная выдержка собрала бы больше света, но рука дрожит, люди двигаются, а автомобиль успевает проехать через кадр.
Смартфон делает несколько коротких снимков. Каждый немного шумный, зато менее смазанный. Алгоритм находит соответствующие детали, сдвигает кадры до совпадения и усредняет значения. Случайный шум различается, а настоящая сцена повторяется, поэтому итог становится чище.
Это продолжение принципа цифровой камеры, но файл собирается из нескольких чтений сенсора, а не из одного.
Как работает расширенный диапазон яркости
Сцена с человеком на фоне заката слишком контрастна для одного измерения. Если экспонировать лицо, небо станет белым. Если сохранить солнце и облака, лицо уйдёт в глубокую тень.
HDR-система собирает кадры так, чтобы получить информацию о разных уровнях яркости. Она может использовать одинаковые короткие экспозиции, намеренно не допуская пересвета, а затем поднять тени после объединения. Другой вариант добавляет несколько более длинных кадров для чистых тёмных участков.
После выравнивания программа строит внутреннее изображение с широким диапазоном, а затем переводит его к яркости экрана. Это не простое увеличение насыщенности. Хорошая тональная компрессия сохраняет естественное различие света и тени, не создавая ореолов вокруг веток и зданий.
Что происходит, если объект движется
Наивное сложение превращает идущего человека в несколько полупрозрачных фигур. Вода, листья и облака тоже меняются между экспозициями. Поэтому система выбирает опорный кадр и для каждого участка решает, можно ли безопасно использовать информацию из остальных.
Если соответствие найдено, значения объединяются. Если предмет переместился или оказался закрыт, алгоритм сохраняет данные опорного изображения. Такой выбор называют устранением призраков. Он не безошибочен: вокруг быстро движущейся руки могут появиться странные края или потерянная фактура.
Мелкое естественное дрожание иногда даже полезно. Сенсор видит сцену с чуть разными смещениями, и программа может собрать дополнительные цветовые и пространственные сведения. Так работает многокадровое повышение разрешения и цифровое приближение.
Откуда берётся размытый фон в портретном режиме
Настоящая малая глубина резкости возникает в оптике: предметы вне плоскости фокуса образуют размытые кружки. У маленькой камеры смартфона большая часть сцены обычно остаётся резкой. Чтобы имитировать портретный рисунок, устройству нужна карта расстояний.
Её получают двумя камерами, специальным датчиком, разницей между элементами одного сенсора или анализом изображения. Алгоритм отделяет человека от фона и применяет размытие, усиливая его с расстоянием.
Ошибки заметны на волосах, прозрачных предметах, тонких ветках и отверстиях между пальцами. Программа может принять часть фона за героя или размыть край очков. Это показывает, что результат является оценкой сцены, а не прямой оптической записью.
Где здесь машинное обучение
Модели машинного обучения помогают распознавать лица, находить небо, оценивать глубину, выбирать баланс белого и подавлять сложный шум. Но вычислительная фотография шире нейросетей. Выравнивание кадров, физическая модель сенсора, тональная компрессия и классические фильтры существовали без них.
Важно также отличать восстановление от выдумывания. При объединении серии камера использует несколько реальных измерений одной сцены. Генеративная система способна нарисовать правдоподобную деталь, которой в данных не было. Статья о том, как распознать сгенерированное изображение, разбирает эту границу отдельно.
Некоторые функции увеличения резкости тоже используют обученные модели. Они могут быть полезны, но не превращают нечитаемый номер или далёкое лицо в надёжное доказательство. Подробность на выходе не всегда равна информации, пришедшей через объектив.
Почему результат иногда выглядит неестественно
Если алгоритм слишком поднимает тени, ночь становится похожей на день. Сильное шумоподавление стирает траву и кожу, локальный контраст рисует светлые контуры, автоматический цвет делает закат чрезмерно оранжевым. Разные производители выбирают собственный визуальный характер.
Пользователь видит не нейтральную истину, а результат множества решений: какой кадр взять за основу, насколько высветлить лицо, оставить ли шум, каким считать белый цвет. Плёночная эмульсия тоже передавала мир не идеально, но цифровая интерпретация меняется программным обновлением.
Инструменты, которые повышают качество фотографии нейросетью, продолжают обработку уже после съёмки. Они полезны для старых или маленьких файлов, но должны применяться осторожно, если важна документальная точность.
Остаётся ли фотограф автором
Автоматика выполняет больше технической работы, но не выбирает за человека причину снимка. Фотограф решает, где стоять, что включить в рамку, когда нажать кнопку и какой результат сохранить. Знание алгоритма помогает понимать ограничения: ночному режиму нужна короткая неподвижность, портретному – чистое отделение силуэта, серии HDR – сцена без слишком хаотичного движения.
Вычислительная фотография не отменяет оптику и свет. Она использует несколько несовершенных измерений, чтобы получить результат, который одна маленькая камера не смогла бы записать за одну экспозицию. Главный переход состоит в том, что снимок теперь становится выводом из набора данных. Чем сильнее программа участвует в этом выводе, тем важнее отличать измеренную деталь от убедительной догадки.
