Как сделать качественные фото в ночном режиме на смартфоне
Содержание
Содержание
Съемка ночью — настоящее испытание даже для опытного фотографа. Недостаток освещения обнажает абсолютно все проблемы, связанные как с техническим несовершенством камеры, так и с недостатком навыков самого фотографа. В этой статье мы расскажем: насколько пригодны для ночной фотосъемки современные смартфоны, как сделать качественные фотографии в ночном режиме, как работает HDR, как использовать выдержку и ISO для получения четких кадров в темноте.
Ночная съемка на смартфон: реально ли
Со времен первых матриц 0.3 Мп прошли десятки лет: увеличивалось количество мегапикселей, появлялись новые типы матриц, повышалась производительность процессоров, совершенствовались иные технологии. Как результат — делать вполне приличные ночные снимки можно практически на любой смартфон.
Чтобы фотографии получались более-менее качественными, необходимо знать простейшие законы классической фотографии. Чтобы не перегружать вас лишней информацией, пройдемся по основным понятиям и правилам, которые помогут снимать качественно даже в сложных условиях освещения.
Что такое «ночной режим»
Практически на всех смартфонах есть так называемый «ночной» режим — это автоматическая программа, которая сама определяет параметры съемки с поправкой на плохие условия освещения. Другими словами, вам не нужно ковыряться в настройках — программа сделает все сама. Про ручные настройки при ночной съемке мы говорили здесь.
Какие параметры настраивает камера
ISO — это светочувствительность матрицы, важнейший параметр, определяющий общее качество снимка. Наверняка вам не нужны зернистые «шумные» фотографии, тем более ночью. Чтобы шума не было, нужны минимальные доступные значения ISO — 50, 100, 150.
Днем на улице камера смартфона может прекрасно фотографировать и без задирания ISO. Но ночью приходится чем-то жертвовать: или значениями диафрагмы, или выдержкой, или ISO. Автоматика в первую очередь будет увеличивать ISO, чтобы получить четкие и правильно экспонированные снимки в ночных сценах. Увы, при этом добавляются шумы, но это лучше, чем темная или смазанная фотография.
Чаще всего значения подобраны вполне адекватно. Но если же света всовсем мало — смартфон может поднять ISO до рекордных значений и тем самым испортить снимок. В этом случае придется подсветить объект фонариком или переключиться на ручной режим, чтобы убавить значение.
Если в камере вашего смартфона нет ручных настроек — скачайте любое приложение с такой функцией. Например, для Android — Camera ZOOM FX Premium, для iOS — Pro Camera.
Выдержка. Ее еще называют скоростью затвора (shutter speed). В ночном режиме смартфон настраивает выдержку так, чтобы объект был лучше проработан при сложных условиях освещения. На практике — из-за высокой выдержки фотографии часто смазаны, так как на снимке отражаются все движения — и объектов съемки, и камеры в руках.
Если автоматика смартфона выставила слишком долгую выдержку, то придется использовать штатив или другую опору, чтобы смартфон оставался неподвижным во время съемки.
Певрое фото — использовали штатив, второе — нет.
Что такое HDR и как это работает
HDR — это расширенный динамический диапазон. HDR делает правильную экспозицию для всех объектов снимка: как самых темных, так и самых ярких, как бы уравнивая их освещенность. Без применения HDR основной объект останется темным пятном — смартфон при замере экспозиции сцены ориентируется на самые яркие источники света в кадре.
На смартфоне HDR незаменим. И все из-за матрицы: в смартфонах она очень миниатюрна, если сравнивать с сенсором фотокамер. Маленькие матрицы хорошо справляются только в равномерно освещенных сценах, например — днем на улице или в помещении при свете люминесцентных ламп, но не ночью. А HDR доделывает то, что не смог сделать сенсор, — тени становятся проработанными. Из-за этого фотография может выглядеть неестественно, так что нужно соблюдать баланс, чтобы не испортить снимок излишней обработкой.
Как работает HDR
Камера смартфона делает несколько кадров подряд. Для каждого их них автоматика подбирает различные параметры — отличающуюся экспозицию, ISO, выдержку, иногда — значение диафрагмы. На первом кадре: максимально прорабатываются только детали в тенях, на втором — корректно экспонируются только детали в среднем диапазоне, на третьем — только детали самых ярких участков сцены. В итоге — мы получаем фотографию, в которой сохранены абсолютно все детали: как в самых ярких, так и в самых темных участках изображения.
Активируя HDR, вы с большей долей вероятности сделаете максимально качественную ночную фотографию даже с рук, ведь затвор будет «стрелять» сериями. Как понять, нужно ли активировать HDR? Просто откройте камеру и посмотрите на экран смартфона — если на предпросмотре вы не видите никаких деталей, изображение темное и объекты в сцене едва различимы — HDR точно нужен.
Дорисовка при помощи ИИ
Относительно новая технология, которая нашла применение именно в ночных режимах некоторых смартфонов. Самый известный пример сегодня — это смартфон Xiaomi Mi 11.
В нем реализована технология искусственного интеллекта BlinkAL. Производитель обещает, что ИИ удаляет шумы на видео и фотографиях, которые были сняты в ночном режиме, в считанные секунды. Судя по всему Xiaomi лишь первая ласточка, и в ближайшем будущем количество смартфонов, которые используют дорисовку кадра при съемке в неблагоприятных условиях освещения, значительно вырастет.
В свое время много шума наделал и ночной режим на Pixel 3. Night Sight — это специальный алгоритм, используемый в Pixel 3. Он позволяет делать высококачественные ночные фотографии с мельчайшей проработкой деталей в тенях.
Вкупе с оптической стабилизацией гугловский смартфон стал действительно легендарным устройством, который оценили именно фотографы. Подобный Night Sight алгоритм использовался и в Huawei P20 Pro, ночные снимки на этом смартфоне получались действительно впечатляющими.
С уществуют и приложения с похожим функционалом, например, NeuralCam. Оно работает на айфонах практически всех поколений. Единственное его назначение — делать качественные фотографии при плохом освещении.
NeuralCam использует самообучающийся алгоритм. Принцип работы следующий: камера делает несколько кадров подряд — по аналогии с HDR. Затем AI-алгоритм объединяет все отснятые кадры в один, в итоге — мы получаем фотографию с максимальной проработкой теней, без лишних шумов и шевеленки. NeuralCam использует ИИ не только для дорисовки «шумных» пикселей, но и для выравнивания общей яркости снимка, а также для повышения общей резкости изображения без увеличения шумов.
12 лайфхаков по съемке в ночном режиме
Советы по выстраиванию кадра
Выстраивать кадр ночью гораздо интереснее, чем днем. Посмотрите на ночной город: сотни вывесок, огней, разноцветных иллюминаций. Используйте это, ищите интересный свет — освещение витрин, свет из баров и даже от уличных столбов.
Ночью особенно эффектными получаются портреты и здания. Выстраивайте кадр так, чтобы показать то, что сложно увидеть при свете дня. Например — ночные отражения в витринах магазинов или на водной поверхности, огонь, фейерверки или молнии, дождь.
Обязательно экспериментируйте со скоростью затвора. Даже если вы не планировали снимать на длинных выдержках, все равно попробуйте это сделать. Вы можете получить весьма эффектный результат — длинная выдержка сделает видимым след от проезжающего автомобиля или фейерверка, а вода и облака — станут мистическими и потусторонними.
Снимаете пейзаж? Тогда прикройте диафрагму хотя бы до 5 единиц (а лучше до 7-8) и получите максимальную проработку деталей всей композиции. Если же вы фотографируете портрет, то, наоборот, открйте ее, чтобы сконцентрировтаь внимание на человеке и размыть фон.
Выстраивайте кадр таким образом, чтобы в нем существовал реальный перевес в сторону ярких огней, а не темных участков. Самые привлекательные кадры получаются во время заката и рассвета, когда солнечные лучи падают горизонтально и под небольшим углом.
Идеальное фото. Что такое HDR+ и как активировать его на своем смартфоне
Содержание статьи
Что такое HDR
Для полного понимания принципа работы HDR+ придется для начала разобраться с обычным HDR.
Основная проблема всех камер смартфонов — маленький размер матрицы (а точнее — фотоячеек) и, как следствие, недостаточный охват динамического диапазона. Чтобы исправить этот недостаток, был разработан алгоритм HDR (High-Dynamic Range), принцип работы которого следующий: камера делает кадр со стандартным для данной сцены уровнем экспозиции, затем делает недоэкспонированный кадр, на котором будут четко видны лишь пересвеченные области изначального снимка, далее выполняется переэкспонированный снимок, на котором видны только затемненные детали изначального снимка, а все остальное пересвечено. Далее снимки накладываются друг на друга и объединяются при помощи специальных алгоритмов, качество которых зависит от производителя софта камеры. В результате получается снимок с хорошей проработкой деталей как в тенях, так и в более светлых местах.
Недостатки HDR очевидны: долгое время съемки приводит к тому, что попавшие в кадр движущиеся объекты будут двоиться, а даже небольшая тряска смажет картинку.
Что такое HDR+
Умные головы придумали алгоритм, лишенный недостатков HDR. Впрочем, общее с HDR у него одно лишь название.
HDR+ расшифровывается как High-Dynamic Range + Low Noise. Свою известность он получил за ряд выдающихся возможностей: алгоритм способен устранять шумы практически без потери детализации, повышать качество цветопередачи, что крайне важно при плохом освещении и по краям кадра, вместе с этим он сильно расширяет динамический диапазон фотографии. HDR+, в отличие от стандартного HDR, почти не боится тряски смартфона и движения в кадре.
Первым смартфоном с поддержкой HDR+ стал Nexus 5. Из-за не самого лучшего баланса белого и маленького отверстия диафрагмы (f2.4) камера этого смартфона считалась не более чем крепким середнячком. Все изменилось с выходом обновления Android 4.4.2. Именно оно принесло с собой поддержку режима HDR+ и изумительное качество ночных снимков. Они хоть и не отличались большой яркостью по всему полю кадра, но благодаря HDR+ практически не содержали шума при сохранении мелких деталей и обладали превосходной (для смартфонов 2013 года) передачей цветов.
Xakep #232. Опасный IoT
История создания HDR+
Как же компания, никогда не занимавшаяся камерами, создала алгоритм, который творит чудеса, используя обычные, по меркам флагманов, камеры Nexus и Pixel?
Все началось в 2011 году, когда Себастьян Трун (Sebastian Thrun), глава компании Google X (теперь уже просто X), подыскивал камеру для очков дополненной реальности Google Glass. Массогабаритные требования предъявлялись очень жесткие. Размер матрицы камеры должен был быть еще меньше, чем в смартфонах, что крайне плохо сказывалось бы на динамическом диапазоне и приводило бы к появлению множества шумов на фотографии.
Выход оставался один — попытаться улучшить фотографию программно, с помощью алгоритмов. Эту задачу должен был решить Марк Левой (Marc Levoy), преподаватель факультета информатики Стэнфордского университета, эксперт в области вычислительной фотографии. Он занимался технологией захвата и обработки изображений на базе программного обеспечения.
Марк сформировал команду, известную как Gcam, которая занялась изучением метода Image Fusion (сплавление изображений), основанного на объединении серии снимков в один кадр. Фотографии, обработанные при помощи этого метода, получались более яркими и резкими, имели малое количество шумов. В 2013 году технология дебютировала в Google Glass, а затем, в этом же году, переименованная в HDR+, появилась в Nexus 5.
Еще один ночной снимок с Nexus 5
Как работает HDR+
HDR+ — чрезвычайно сложная технология, детально разобрать которую в рамках данной статьи невозможно. Поэтому мы рассмотрим общий принцип работы, не останавливаясь на деталях.
Фундаментальный принцип
После нажатия кнопки спуска затвора камера захватывает серию недоэкспонированных (с короткой выдержкой) кадров (это нужно для сохранения максимального количества деталей на снимке). Количество кадров зависит от сложности условий освещения. Чем темнее сцена или чем больше деталей в тени нужно осветить, тем больше кадров выполняет смартфон.
Когда серия снимков будет сделана, она объединяется в один снимок. Тут выручает заниженная выдержка, благодаря которой каждая фотография в серии выглядит относительно четко. Из трех первых кадров выбирается самый приемлемый в плане как резкости, так и детализации для использования в качестве основы. Затем полученные снимки разделяются на фрагменты и система проверяет, можно ли совместить соседние фрагменты и как это сделать. Обнаружив лишние предметы в одном из фрагментов, алгоритм удаляет этот фрагмент и выбирает похожий с другого кадра. Полученные снимки обрабатываются с помощью специального алгоритма, основанного на методе удачных экспозиций (в основном он применяется в астрофотографии для уменьшения размытости изображений, вызванной мерцающей атмосферой Земли).
Далее в дело вступает сложная система подавления шумов, которая включает в себя как простой метод усреднения цвета пикселей на основе нескольких снимков, так и систему предсказания появления шумов. Алгоритм работает очень мягко на границах переходов тональностей, чтобы минимизировать потерю детализации, пусть даже и ценой наличия небольшого количества шума в таких местах. А вот на участках с равномерной текстурой «шумодав» выравнивает картинку вплоть до почти идеально равномерного тона с сохранением перехода оттенков.
Работа шумодава в сложных условиях. Слева до обработки, а справа — после
А как же расширение динамического диапазона? Как мы уже знаем, использование короткой выдержки избавляет нас от пересвеченных мест. Осталось только удалить шумы на темном участке ранее описанным алгоритмом.
На завершающем этапе выполняется постобработка полученного изображения: алгоритм делает минимизацию виньетирования, обусловленного попаданием света на матрицу под наклонным углом, корректирует хроматическую аберрацию заменой пикселей у высококонтрастных краев на соседние, увеличивает насыщенность зелени, синие и пурпурные оттенки смещает в сторону голубого, усиливает резкость (шарпинг) и выполняет ряд других шагов, повышающих качество фотографии.
Иллюстрация работы конвейерного алгоритма HDR+ из доклада разработчиков
Слева фотография из стоковой камеры Samsung в HDR, а справа фотография, созданная в Gcam в HDR+. Видно, что алгоритм принес в жертву детализацию неба для прорисовки объектов на земле.
Обновление HDR+ в Google Pixel
В Google Pixel алгоритм претерпел существенные изменения. Теперь смартфон начинает снимать сразу после запуска камеры и в зависимости от степени освещения делает от 15 до 30 кадров в секунду. Эта технология называется ZSL (Zero Shutting Lag) и была придумана для того, чтобы делать моментальные снимки. Но Pixel использует ее для работы HDR+: при нажатии на кнопку спуска смартфон выбирает от 2 до 10 кадров из буфера ZSL (в зависимости от условий освещения и наличия движущихся объектов). Затем из первых двух-трех кадров выбирается лучший, а остальные, как и в предыдущей версии алгоритма, слоями накладываются на основной.
Наряду с этим появилось разделение на два режима: HDR+ Auto и HDR+. Последний берет максимально большое количество снимков для создания итоговой фотографии. Она получается более сочной и яркой.
HDR+ Auto делает меньше фотографий, благодаря чему движущиеся объекты становятся менее размытыми, влияние тряски рук ниже, а фотография готова практически мгновенно после нажатия на кнопку съемки.
В версии Google Камеры для Pixel 2/2XL режим HDR+ Auto был переименован в HDR+ On, а HDR+ стал называться HDR+ Enhanced.
Во втором поколении Google Pixel появился специальный сопроцессор, называемый Pixel Visual Core. В настоящее время чип применяется только для ускоренной обработки фотографий в режиме HDR+, а также предоставляет сторонним приложениям возможность выполнять снимки в HDR+. На качестве фотографий, сделанных Google Камерой, его наличие или отсутствие никак не сказывается.
Google использует HDR+ даже для устранения проблем с железом. Из-за конструктивной ошибки Google Pixel / Pixel XL мог сделать фотографию с сильным засветом. Google выпустила обновление, которое использует HDR+, чтобы убрать этот засвет, комбинируя снимки.
Преимущества и недостатки
Выделим основные достоинства HDR+:
На ниже размещенных иллюстрациях слева расположена фотография со стоковой камеры Galaxy S7, а в правой части — фото в HDR+ через Google Камеру на том же устройстве.
Ночные фотографии города. Тут прекрасно видно, что HDR+ дает нам возможность получить отчетливое изображение группы граждан, расположившихся под вывеской Билайн. Небо выглядит чисто, дорожный знак отчетливо. Трава, как и должна быть, зеленая. Вывеска Билайн с правильной передачей цветов. Отчетливая прорисовка балконов, проводов и крон деревьев. Важно — проработка деталей на деревьях справа (в тени) у HDR+ несколько хуже, чем у стоковой камеры.
Обрати внимание на прорисовку лиц скульптур, сочность красок одежды, отсутствие критичных шумов. Однако прорисовка объектов в тени опять оставляет желать лучшего.
Городская окраина. Тусклого света фонарей достаточно для прорисовки HDR+ поверхности стены здания.
Утренние фотографии. В сложных условиях утренней съемки при ярко выраженном контровом свете цвета выглядят естественно, рисунок на стволах деревьев отчетлив, изображение куста и травы в тени дерева просматривается в глубину.
Недостатков у HDR+ мало, да и носят они несущественный характер для большинства сюжетов. Во-первых, для создания HDR+ фотографии требуется много ресурсов процессора и оперативной памяти, что приводит к ряду негативных последствий:
Частично эти проблемы уже решены с помощью Pixel Visual Core. Но этот сопроцессор, скорее всего, так и останется козырем Google Pixel.
Во-вторых, для работы алгоритму необходимо как минимум две фотографии, а в среднем происходит захват четырех-пяти кадров. Поэтому:
На каких устройствах работает HDR+
Чисто теоретически HDR+ может работать на любом смартфоне с версией Android не ниже 5.0 (необходим Camera2 API). Но по соображениям маркетинга, а также из-за наличия некоторых оптимизаций, требующих специальных железных компонентов (сопроцессор Hexagon в Snapdragon), Google намеренно заблокировала включение HDR+ на любом устройстве, кроме Pixel. Однако Android не был бы Android’ом, если бы энтузиасты не нашли способ обойти это ограничение.
В августе 2017 года один из пользователей 4PDA сумел модифицировать приложение Google Camera таким образом, чтобы режим HDR+ можно было использовать на любом смартфоне с сигнальным процессором Hexagon 680+ (Snapdragon 820+) и включенным Camera2 API. Первое время мод не поддерживал ZSL, да и в целом выглядел сыро. Но и этого было достаточно, чтобы улучшить качество фотосъемки смартфонов Xiaomi Mi5S, OnePlus 3 и прочих до ранее недостижимого для них уровня, а HTC U11 так и вовсе получил возможность на равных соревноваться с Google Pixel.
Позже к адаптации Google Camera на телефоны сторонних вендоров подключились другие разработчики. Спустя некоторое время HDR+ заработал даже на устройствах со Snapdragon 808 и 810. На сегодняшний день практически для каждого смартфона, основанного на Snapdragon ARMv8, работающего на Android 7+ (в некоторых случаях и Android 6) и имеющего возможность использовать Camera2 API, существует портированная версия Google Camera. Частенько она поддерживается отдельным энтузиастом, но обычно таких разработчиков сразу несколько.
В начале января 2018-го пользователь XDA miniuser123 сумел запустить Google Camera с HDR+ на своем Galaxy S7 с процессором Exynos. Немного позже выяснилось, что Google Camera работала также на Galaxy S8 и Note 8. Первые версии для Exynos были нестабильны, часто падали и зависали, в них не работала оптическая стабилизация изображения и ZSL. Версия 3.3 уже достаточно стабильна, поддерживает оптическую стабилизацию изображения и ZSL и все функции Google Camera, за исключением портретного режима. А в число поддерживаемых устройств теперь входят несколько смартфонов Samsung серии A.
Как получить HDR+ на своем устройстве
Если у тебя смартфон на Exynos, то выбор невелик. Переходи в тему обсуждения на XDA, открывай спойлер V8.3b Base (если у тебя Android 8) или Pixe2Mod Base (для Android 7) и качай последнюю версию. Также можешь посетить группу в Telegram, где оперативно выкладывают все обновления Google Камеры.
Владельцам смартфонов с процессом Qualcomm придется поискать. Энтузиасты активно поддерживают версии Google Camera с HDR+ для множества смартфонов. Приведу наиболее известные модели:
Если в списке нет твоей модели, рекомендую прогуляться по темам обсуждения камеры и самого устройства на 4PDA и XDA. Как минимум там будут пользователи, пытавшиеся запустить HDR+.
Ко всему вышесказанному упомяну, что в интернете есть страница, где собраны практически все версии Google Camera, на которой удобно тестировать различные Gcam на малоизвестных устройствах.
Заключение
Алгоритм HDR+ служит яркой демонстрацией возможностей мобильной цифровой фотографии. Пожалуй, на сегодняшний день это самый эффективный из доступных алгоритмов обработки изображений. HDR+ достаточно одного фотомодуля для создания снимка, по качеству обходящего двойные фотомодули некоторых гаджетов.
