Вычислительная фотография: что это такое и почему она меняет камеры
Вычислительная фотография - это подход к созданию изображений, при котором результат зависит не только от объектива и матрицы, но и от программной обработки. Камера снимает сцену, а затем использует алгоритмы, нейронные сети и возможности процессора, чтобы скорректировать экспозицию, цвет, резкость, шумы и детализацию.
Особенно заметно технология проявила себя в смартфонах. Компактный корпус не позволяет установить большую матрицу и крупный светосильный объектив, поэтому физические ограничения компенсируются серийной съёмкой, анализом кадров и интеллектуальной обработкой. Современный телефон может сделать несколько экспозиций за доли секунды, объединить их и выдать фотографию, которая превосходит отдельный исходный кадр по динамическому диапазону и уровню детализации.
При этом вычислительная фотография не отменяет классическую оптику. Она работает вместе с объективом, сенсором и системой автофокусировки. Чем качественнее исходные данные, тем убедительнее итоговый результат. Разница лишь в том, что значительная часть "фотографической работы" теперь выполняется не только светом, но и вычислениями.
Портретный режим и цифровое боке
В профессиональных камерах размытие фона появляется благодаря большой матрице, длиннофокусному объективу и широкой диафрагме. У смартфонов объективы обычно имеют фиксированную диафрагму, а небольшой сенсор даёт большую глубину резкости. Поэтому естественное боке получить сложнее.
Портретный режим решает эту задачу программно. Камера определяет человека или другой объект, анализирует его контуры и отделяет передний план от фона. Затем задняя часть изображения размывается, имитируя съёмку на светосильную оптику. Предварительный результат часто виден прямо на экране, однако окончательная обработка выполняется после нажатия кнопки спуска.
Современные алгоритмы учитывают волосы, очки, мелкие детали одежды и сложные границы объектов. Тем не менее ошибки всё ещё возможны: программное размытие может затронуть отдельные пряди, пальцы или элементы фона, похожие по цвету на объект.
Подобные возможности одними из первых активно развивали смартфоны HUAWEI. Например, HUAWEI P30 Pro получил известность благодаря качественному портретному режиму, ночной съёмке и сильному зуму. В числе заметных решений также остаются смартфоны Google Pixel и актуальные модели iPhone.
В iPhone появился "Кинорежим" для видео. Он позволяет записывать ролики с размытым фоном, выбирать объект для фокусировки и менять точку резкости уже после съёмки. В моделях iPhone 14 Pro и 14 Pro Max такая запись поддерживает разрешение до 4K и частоту до 60 кадров в секунду.
Панорамная съёмка
Панорама - ещё один пример вычислительной обработки. Камера последовательно делает серию кадров, пока пользователь плавно перемещает смартфон или фотоаппарат вдоль направляющей линии. Затем изображения автоматически совмещаются в один широкий снимок.
Алгоритмы находят совпадающие детали, исправляют небольшие смещения и стараются скрыть следы склейки. Благодаря высокой скорости считывания современных сенсоров смартфон получает большое количество исходных кадров. Это позволяет создавать панорамы почти в реальном времени.
Однако результат зависит от техники съёмки. Резкие движения, движущиеся люди, автомобили и ветви деревьев могут привести к искажениям. Чтобы избежать ошибок, лучше двигать устройство равномерно и удерживать его на одной высоте.
HDR и расширение динамического диапазона
Режим HDR предназначен для сцен, где одновременно присутствуют очень светлые и глубокие тёмные участки. Например, при съёмке человека на фоне окна обычный кадр часто даёт либо выбитое небо, либо слишком тёмное лицо.
В HDR-режиме камера делает несколько снимков с разной экспозицией. Один кадр сохраняет детали в тенях, другой - информацию в светлых областях. После этого процессор объединяет данные, формируя изображение с более широким динамическим диапазоном.
Современные системы анализируют сцену автоматически: определяют небо, лица, контровой свет и контрастные объекты. Если в кадре есть движение, алгоритмы пытаются устранить раздвоения и другие артефакты. В некоторых камерах HDR работает практически незаметно и включается без отдельного действия пользователя.
Ночной режим
Ночная съёмка особенно наглядно показывает пользу вычислительной фотографии. В условиях слабого света отдельный кадр часто получается шумным, смазанным и недостаточно детализированным. Смартфон делает серию коротких экспозиций, выравнивает их и объединяет информацию в один снимок.
Такой способ позволяет уменьшить шум, восстановить детали в тенях и сохранить цвет. Дополнительные алгоритмы анализируют яркие источники света, чтобы фонари и вывески не превращались в крупные пересвеченные пятна.
Для успешной работы ночного режима устройство желательно держать неподвижно. При съёмке движущихся объектов возможны размытость и неестественные контуры. Кроме того, чрезмерная обработка иногда делает изображение слишком светлым и далёким от реальной атмосферы сцены.
Нейронные сети и машинное обучение
Нейросети помогают камере понимать содержание кадра. Они распознают лица, животных, растения, еду, архитектуру, небо и другие объекты, после чего выбирают подходящие параметры обработки.
Машинное обучение используется для улучшения автофокуса, определения глаз, подавления шума, восстановления деталей и коррекции оттенков кожи. Камера может отличать лицо от фона, прогнозировать движение объекта и удерживать на нём резкость.
Иногда алгоритмы работают непосредственно во время съёмки, а иногда - уже после сохранения файла. Это позволяет, например, убрать лишние объекты, изменить размытие или улучшить освещение портрета в галерее.
Смещение и объединение пикселей
Смещение пикселей применяется в некоторых камерах для повышения детализации. Устройство делает несколько снимков, каждый раз слегка меняя положение сенсора. Затем изображения объединяются, и итоговый файл получает больше информации о мелких структурах.
Другой распространённый метод - биннинг пикселей. Несколько соседних пикселей объединяются в один виртуальный. Это уменьшает разрешение, но повышает светочувствительность и снижает шум. Поэтому камера может использовать сенсор с большим количеством элементов, а при слабом освещении формировать более чистый снимок с меньшим итоговым разрешением.
Фокус-стекинг
Фокус-стекинг применяется, когда необходимо получить большую глубину резкости. Камера делает несколько фотографий с разными точками фокусировки, а затем объединяет резкие участки в один кадр.
Метод востребован в макросъёмке, предметной фотографии и пейзажах. При близкой дистанции невозможно одновременно резко показать передний и задний планы обычным способом, но серия кадров решает эту проблему.
Фокус-стекинг требует относительной неподвижности сцены. Если объект или камера перемещаются, на границах объединённых областей могут появиться артефакты.
Зачем вычислительная фотография нужна владельцу камеры
Главное преимущество технологии - возможность получить качественное изображение без громоздкого оборудования. Смартфон способен компенсировать небольшой сенсор, слабую оптику и ограниченное фокусное расстояние.
Вычислительная обработка также ускоряет рабочий процесс. Пользователю не нужно вручную снимать серию экспозиций, собирать панораму или корректировать отдельные участки фотографии. Многие операции выполняются автоматически и занимают секунды.
Однако у подхода есть и недостатки. Излишняя обработка способна сделать фотографию неестественной: усилить резкость, изменить оттенки кожи, чрезмерно осветлить тени или стереть мелкие детали. Иногда камера создаёт визуально привлекательный, но не вполне точный результат.
Чем смартфон отличается от фотокамеры
Смартфоны делают ставку на скорость, автоматизацию и алгоритмы. Они удобны в повседневной съёмке, хорошо справляются с портретами, ночными сценами и сложным освещением. Фотокамеры располагают более крупными матрицами, сменной оптикой и большими физическими возможностями, поэтому чаще обеспечивают естественную передачу деталей, пластичное размытие и высокое качество RAW-файлов.
В будущем вычислительные технологии будут активнее использоваться и в беззеркальных камерах. Они помогут улучшать автофокус, стабилизацию, шумоподавление и обработку видео, не заменяя оптику, а расширяя её возможности.
Таким образом, вычислительная фотография - не отдельный эффект и не простая функция смартфона. Это целая система, объединяющая съёмку, анализ сцены и последующую обработку. Именно она во многом определяет, каким будет современное изображение: не только зафиксированным сенсором, но и рассчитанным программой с учётом содержания кадра, условий освещения и задачи фотографа.

