Вычислительная фотография: как смартфон фотографирует лучше своей оптики

Вычислительная фотография - это подход, когда качество фото создает не только оптика, но и программы: смартфон снимает несколько кадров, анализирует их нейросетями и склеивает в одно фото с лучшими деталями, цветами и меньшим шумом.

Несколько кадров объединяются в одно фото

Простыми словами

Представь, что ты рисуешь портрет друга, но он постоянно моргает и двигается. Ты делаешь десять быстрых набросков и из каждого берешь лучшее: глаза из одного, улыбку из другого, свет из третьего. Получается идеальный портрет. Телефон делает так же - за долю секунды, пока ты нажимаешь кнопку.

Как это работает

Еще до нажатия кнопки камера непрерывно снимает кадры в буфер.
После нажатия она берет серию кадров с разной экспозицией.
Алгоритмы выравнивают кадры и объединяют лучшие части.
Нейросети убирают шум, подтягивают детали, распознают небо, кожу, текст.
Зоны кадра обрабатываются отдельно: небо - одно, лицо - другое.

Лучшее из каждого кадра, как в серии набросков

Где ты это увидишь

В каждом современном смартфоне: HDR-фото, ночной режим, портретное размытие, суперзум, «снимок в движении», улучшение селфи, ИИ-редактирование. У производителей свои названия: Deep Fusion, Smart HDR, Night Sight и т. д.

Важно ли это при выборе

Очень. Именно обработка объясняет, почему телефоны с похожей оптикой фотографируют совсем по-разному. Я советую смотреть реальные фото из нужных тебе сцен - вечер, движение, портреты - а не только характеристики камер. И знать, что «слишком идеальные» фото - тоже результат работы алгоритмов.

Мифы

Миф: Хорошее фото - только от хорошей оптики. На самом деле: В смартфонах обработка важна не меньше оптики.
Миф: Вычислительная фотография - то же самое, что фильтры. На самом деле: Фильтры меняют стиль, а вычислительная фотография собирает больше информации из нескольких кадров.

Частые вопросы

Почему фото на экране камеры и в галерее отличаются?

Обработка завершается уже после снимка - за несколько секунд.

Можно ли отключить обработку?

Частично - режимы RAW или «Pro» дают менее обработанное фото.

Дорисовывает ли ИИ детали на фото?

Иногда да, особенно на большом зуме. Поэтому фото с суперзумом не всегда точно передают реальность.

Связанные термины

Ночной режим, Процессор обработки изображений (ISP), ИИ-редактирование фото, HDR, HDR10+ и Dolby Vision, Биннинг пикселей