Все, что вы хотели знать про Dual Pixel. Эволюция мобильного автофокуса: от контрастного до Dual Pixel

Анонсированная в августе зеркальная фотокамера получила целый ряд усовершенствований по сравнению с предшественницей. Впрочем, большинство улучшений для такого класса камеры были вполне ожидаемыми, а сами улучшения можно назвать эволюционными.

Принципиально новое в зеркальных камерах встретить уже довольно сложно, но компании Canon все же удалось немного удивить фотографов.

Технология Dual Pixel RAW - это действительно что-то абсолютно невиданное, и ранее в камерах она не встречалась.

Что это за технология и для чего может быть использована?

Во многих системных современных камерах Canon используются светоприемные матрицы, где каждый пиксель состоит из двух отдельных фотодиодов A и B, информация с которых считывается раздельно. Такое раздельное считывание позволяет реализовать быструю фазовую фокусировку Dual Pixel AF при помощи самой матрицы.

За счет этого в зеркальных камерах Canon обеспечивается высокоскоростная автофокусировка при видеосъемке и при съемке с использованием экрана для визирования (LiveView).

Обычно при формировании снимка информация с фотодиодов A и B каждого пикселя объединяется, но в Canon EOS 5D Mark IV реализовали также дополнительную возможность записи файлов в особом формате Dual Pixel RAW.

В файлах Dual Pixel RAW содержатся два «изображения». Первое изображение сформировано на базе информации из фотодиодов A, а второе - на базе объединения информации из фотодиодов A и B. Получается, что к обычному кадру добавляется информация о параллаксе.

В теории все выглядит очень интересно, но попробуем Dual Pixel RAW на практике.

Как использовать Dual Pixel RAW?

На данный момент функция Dual Pixel RAW доступна только в камере Canon EOS 5D Mark IV. Для получения RAW-файлов формата Dual Pixel RAW необходимо в меню активировать соответствующую настройку.

При этом возникают некоторые не очень приятные особенности:

  • размер RAW-файла формата Dual Pixel RAW имеет почти удвоенный объем (примерно 60 МБ против 35 МБ в обычных RAW-файлах);
  • снижение скорости серийной съемки;
  • в режиме LiveView серийная съемка будет недоступна;
  • возможен рост шумов на изображении.

Также очень важным моментом при работе с RAW-файлами Dual Pixel RAW является то, что дополнительная функциональность формата обеспечивается только в фирменном редакторе Digital Photo Professional (DPP) .

А при использовании, например, популярного приложения Adobe Lightroom или RAW-конвертера Adobe Camera Raw файлы Dual Pixel RAW откроются (если установлены последние версии приложений), но функционально работа с ними не будет отличатся от работы с обычными RAW-файлами. Никаких дополнительных возможностей вы не получите.

По крайней мере, на данный момент ситуация именно такова.

Для получения большего эффекта от манипуляций с Dual Pixel RAW производитель приводит ряд рекомендаций. Они сводятся примерно к тому, чтобы при съемке обеспечивались небольшая глубина резкости (ГРИП) и существенное размытие фона.

Для файлов Dual Pixel RAW в редакторе Digital Photo Professional предусмотрен специальный режим обработки, в котором, собственно и осуществляются микроподстройка фокуса, сдвиг боке и подавление засветок.

Сдвиг точки фокусировки

Поэкспериментировав с несколькими файлами, должен сказать, что эффект от регулировки фокусировки настолько минимальный, что его очень трудно заметить . Да, при 100%-ном увеличении какое-то влияние ползунков видно, но оно очень незначительное и вряд ли дает реальную пользу фотографу.

Фото без редактирования (100-процентное увеличение)
Сдвиг зоны фокусировки максимально вперед (100-процентное увеличение)
Сдвиг зоны фокусировки максимально назад (100-процентное увеличение)

Признаться, ожидал несколько большего. Если вы рассчитываете перевести фокусировку с одного глаза на другой на портретном фото (разве что глаза будут находиться практически на одном расстоянии по отношению к камере), выбрать нужный объект на макроснимке, «перевести резкость» с одного участка на другой на предметном фото, то это не тот случай. Подстройка фокуса действительно микроскопическая.

Регулировка боке

При регулировке сдвига боке сам рисунок зоны размытия не меняется. Получаемый эффект на фото можно сравнить с тем, что вы получили бы, сдвигая чуть-чуть камеру вправо или влево относительно изначальной точки съемки.

Влияние на итоговое изображение настройки незначительное.

Фото без редактирования
Сдвиг боке максимально влево
Сдвиг боке максимально вправо

Надо заметить, что регулировка засветки очень влияет на боке. Причем, влияние негативное. На кадре появляются неприятные двоения объектов в зоне нерезкости. Видимо, не зря в данном режиме доступна возможность выбора зоны на фото, к которой будет применяться эффект. Кстати, выбор зоны на фото предусмотрен и для регулировки сдвига боке.

Со всем ажиотажем вокруг анонса Google Pixel 2 и Pixel 2 XL и их самой лучшей в мире камеры в мобильных устройствах по рейтингу DxO Mark легко потерять суть. Что важно знать об этом новом телефоне? Где Google оставил недоработки? Чем камера этого телефона лучше, чем его предшественника? Почему фотографы заинтригованы технологией новой камеры.

Dual Pixel AF

Новые смартфоны Pixel имеют технологию, которая используется в зеркальных и беззеркальных камерах Canon. Также данная технология использовалась в смартфоне Samsung Galaxy S7. Dual Pixel позволяет камере видеть объёмное изображение без использования двух модулей. Разделение под каждой микролинзой пикселей на два имитирует левый и правый глаз человека. Благодаря этому объекты видны с небольшим смещением между левым и правым пикселем, что даёт возможность построить карту глубины. Также эта информация используется для очень быстрой автофокусировки.

Данная технология официально называется Dual Pixel. У неё есть несколько преимуществ над двойными камерами, которые используются во флагмане 2017 года Apple iPhone 8 и 8Plus. Также ожидается iPhone X с двойным модулем камеры.

Автофокус Dual Pixel AF очень быстрый и точный. Он работает даже в условиях плохой освещённости. Перемещение фокуса в видео происходит плавно. Учитывая то, насколько хорошо Pixel 2 может выполнять стабилизацию при съёмке 4K-видео, вы можете даже делать ролики профессионального качества при наличии должного освещения и навыков построения сцены.

Dual Pixel + машинное обучение

Смещение пикселей позволяет построить карту глубины резко изображаемого пространства. В построении карты также участвуют алгоритмы, анализирующие сцену, определяющие объекты.

Система умная. Тем не менее, стерео несоответствие между двумя изображениями, вероятно, будет очень мало по сравнению с двойной камерой, где смещение между модулями гораздо более существенно. Это может сделать трудным для камеры отделять объект от фона. Также это объясняет плохие результаты тестов DxO, показывающие недочёты работы алгоритмов Google, размывающих фон. Наилучшим образом отделение фона работает, когда объект съёмки находится близко к камере.

Также следует заметить, что новый смартфон может делать снимки в портретном режиме, сохраняя разрешение 12MP. Предыдущее поколение смартфонов могло только лишь генерировать файлы в разрешении 5MP.

«Размытие» Google происходит по более сложному алгоритму, чем просто смазывание по Гауссу у Apple. Выглядит область размытия более приятно, но за это приходится платить. Если Apple предлагает работу алгоритма в реальном времени, то для вычисления всех параметров смартфон Pixel 2 требует некоторого времени. Вы можете продолжать снимать, но результат увидите только спустя несколько секунд.

Защита аппаратного обеспечения

Неудивительно, но начинка новых телефонов Pixel 2 не особо впечатляет, так как не отличается от других флагманов 2017 года. Обе версии смартфона получили топовый набор элементов, которые скрыты в корпусе, обеспечивающем защиту уровня IP67. Это очень хорошо по сравнению с предыдущим поколением, которое имело защиту IP53, но не дотягивает до того, что предложил Apple. Корпус устойчивый к износу и очень хорошо защищён.

Мы потеряли разъем для наушников, но получили стереодинамики в передней части. XL имеет меньше ободок, но он ещё не так тонок, как на телефонах Samsung. Нет двойной-камеры. Оперативная память RAM и процессор аналогичны тем, что используются на других телефонах под управлением Android. Вы можете вызвать помощника простым сжиманием корпуса в руке.

Ничего на самом деле не выделяется. Но подождите, есть ещё кое что.

Первый AI

Генеральный директор Google Сундар Пичай постоянно делает в своих выступлениях заявление о том, что они внедрили что-то впервые. Теперь компания Google переходит к стратегии от первых в мире смартфонов с инновационными технологиями к первым в мире интеллектуальным помощникам. Теперь Google предлагает не просто карманные устройства с хорошей вычислительной мощностью, а интеллектуальные устройства, которые могут адаптироваться к нашим потребностям и делают нашу жизнь проще. И Google является лидером в этой сфере благодаря собственным разработкам и данным, которые компания получает от собственного поискового сервиса.

Искусственный интеллект всё чаще используется во многих сервисах, чтобы сделать их лучше. Генеральный директор Пичай недавно привел пример из фитнес-приложения: каждый раз, когда он открывает его, он переходит на другую страницу. Но вместо того, чтобы иметь команду в приложении, которая позволит изменить стартовую страницу по умолчанию, или добавить опцию, он полагает, что искусственный интеллект должен просто сам узнать ваши предпочтения и сделать так, как вы обычно делаете.

Что это значит для фотографии и видеографии? На данный момент это только размышления, но, представьте себе камеру, которая знает ваш вкус в фотографии, знает как вы редактируете фото, в каком стиле фотографии делаете или какие фильтры применяете. Как насчет обучения вашего вкуса в музыке, так что, когда Google Assistant автоматически строит видео из библиотеки фотографий и видео, он выбирает вашу любимую музыку для ролика.

Возможности безграничны, и мы, вероятно, увидим много интересного в новых телефонах Pixel.

Google Lens

Сундар Пичай впервые говорил о Google Lens на конференции разработчиков I/O в начале этого года. Он рассказал об объединении машинного зрения и искусственного интеллекта. Теперь это доступно в первый раз в приложении Фотографии и в Google Assistant на новых телефонах Pixel. Алгоритмы машинного зрения Google могут проанализировать то, что видит камера, и использовать искусственный интеллект, чтобы делать классные вещи, такие как определение, какой тип цветка находится в кадре.

Такой тип технологии применим к фотографии. Пичай говорил о том, как автоматическое распознавание объектов в сцене улучшилось. Всё, от забора до мотоцикла, еды и животных, всё стало понятнее для алгоритма. Google всё лучше определяет этих объекты и понимает их взаимодействие.

И как только вы понимаете, что за объект в кадре, вы можете сделать с ним практически что угодно. Удаление, изменение освещения, поиск по содержимому. Сейчас не нужно предварительно вводить описания снимков, чтобы искать, например, животных, еду, небо, птиц, самолёты, людей и т.д. Приложение Фотографии уже давно может делать такой поиск. Также выполняется поиск не только по объектам, но и по событиям, например, день рождения, отпуск, путешествие и многое другое. Многие с нетерпением ждут того, чтобы увидеть, как добавление Google Lens в новых телефонах сделает фотографии и помощника лучше.

Может быть, интеллектуальное распознавание объекта может даже устранить проблему с бликами на предыдущем Google Pixel, но у нового смартфона такой проблемы нет.

До свидания уродливые блики

К счастью, неприятные погрешности с бликами, которые свирепствовали в телефонах Pixel первого, по всей видимости, можно устранить путем поднятия модуля камеры над стеклянной подложкой, которая также была уменьшена и стала обтекаемой, чтобы улечься заподлицо с остальной частью телефона.

Модуль камеры поднимается сзади немного, хотя, это тот компромисс, на который пришлось пойти, чтобы устранить все проблемы и уместить наилучшие технологии.

Невероятно плавное видео

Когда первая версия Pixel была выпущена, Google утверждал, что его камера справляется с другими устройствами благодаря своей цифровой стабилизации и в оптической стабилизации не нуждается. Это было так, несмотря на отсутствие OIS (оптической стабилизации изображения). Программное обеспечение позволяло очень эффективно корректировать дрожания камеры. С тех пор алгоритмы стали лучше. Но Google на этом не остановился. OIS имеет решающее значение при выборе размера камеры. Стабилизация делает модули более громоздкими.

В этом году Google пошли по другому пути. OIS объединена с электронной стабилизацией изображения (EIS). Большей блок камеры смог уместить всё это. Результаты представляются весьма впечатляющими. Оригинальные Pixel имели очень хорошую стабилизацию в видео, даже при съёмке в 4K, но сочетание OIS + EIS дало невероятный результат. Видеозапись стала ещё более гладкой. Об этом свидетельствует видео, предоставленное Google.

Для съёмки при слабой освещённости стабилизация имеет решающее значение. Она позволяет снимать с более длинной выдержкой и получать чёткие изображения. Вы также получите более качественные результаты в макросъёмке.

Где управление цветом

Плохой новостью стало то, что Google ничего не сказали о правильном управлении цветом на новых телефонах. Предыдущие Pixel имели красивые OLED-дисплеи, но цвета были дико неточными и часто слишком насыщенными из-за отсутствия какого-либо управления цветом или соответствующих калиброванных режимов отображения.

iPhone имеют одни из самых точных экранов. Их дисплеи с поддержкой широкой цветовой гаммы и специальной калибровкой отображают очень точный цвет. Они охватывают большую часть цветового пространства DCI-P3, но, что более важно, iOS может автоматически переключаться между двумя режимами отображения гаммы. Используется правильно откалиброванный режим стандартной цветовой гаммы SRGB и DCI-P3. Переключение происходит на лету без задержек в зависимости от того, какой тип контента просматривается в данный момент.

Это означает, что вы будете просматривать фотографии и видео с такими цветами, какие заложили разработчики, а не как захотелось отобразить смартфону. Это также означает, что, когда вы отправите изображения с вашего iPhone на печать, вы получите такие же цвета, как на дисплее, разве только немного темнее, потому что у бумаги нет такой подсветки, как у дисплеев.

Samsung Galaxy S8 также откалиброван для работы в режимах DCI-P3 и SRGB, хотя вам придется вручную переключаться между ними. Новые телефоны Pixel не предоставляют никакой калибровки и управления цветовыми профилями, хотя эта возможность реализована на программном уровне новой версии Android Oreo. Хотя как и в системе Windows, это возлагается на приложения. При этом стоит учитывать, что наличие возможности управления цветовым профилем не гарантирует точной цветопередачи без калибровки дисплея, а это должно выполняться производителем. По крайней мере появилась надежда, что разработчики смартфонов займутся этим, как Samsung со своим Galaxy S8.

HDR дисплей?

К сожалению, об этом также никакого упоминания не было, как и о 10-битных изображениях или HDR-отображении фотографий и видео с использованием HDR10 или стандартов Dolby Vision. Это оставляет желать лучшего.

IPhone X будет воспроизводить HDR-видео с использованием нескольких сервисов потокового вещания, но что более важно для фотографов, он будет (в первый раз когда-либо в любом устройстве) показывать фотографии в режиме HDR. Apple толкает индустрию вперёд, говоря об отображении HDR на фото, а не только в видео. Помните, что это не имеет ничего общего со съёмкой HDR, но, вместо этого, собственно отображение фотографий на дисплеях OLED может воспроизводить более широкий диапазон тонов.

Проще говоря: фотографии, сделанные на iPhone X и просмотренные на iPhone X будут выглядеть более качественно, чем если вы будете рассматривать их на другом устройстве благодаря поддержке HDR-дисплеев и точной цветопередачи. Это важно, и Google, похоже, упустил полностью этот нюанс.

HDR-дисплеи требуют меньше редактирования и меньше воздействия на снимки. Съёмка HDR полезна благодаря тому, что она позволяет сохранить детализацию в тенях, уменьшив количество шума. При этом на обычных дисплеях нужно сильно увеличивать яркость тёмных зон, чтобы детали были видны на дисплее. iPhone X позволяет отображать широкий спектр тонов без агрессивной корректировки снимков.

Неограниченное хранилище ограничено

Обещание компании Google предоставить неограниченное облачное хранилище владельцам Pixel 2 и Pixel 2 XL для снимков и видео в полном разрешении оказалось с подвохом. Иначе и быть не могло.

Компания сообщила, что владельцы любого телефона Pixel будет иметь возможность хранить все фотографии и видео, которые они хотят онлайн в Google Фото, пока они используют телефон Pixel. Каждый снимок будет сохранён в полном разрешении, как и видео.

На данный момент бесплатное неограниченное хранилище доступно только при условии перекодирования снимков в разрешение до 16Мп, а видео до Full HD. Также можно загружать данные в оригинальном разрешении, но они займут бесплатный ограниченный объём, который составляет 15GB и распространяется также на Gmail и Google Drive.

Владельцы Pixel получат небольшую отсрочку. Их безлимитное хранилище в полном разрешении будет доступно до 2020 года включительно. После этого ситуация изменится. Новые фото и видео, снятые на любой телефон Pixel после 2020 года, будут сжиматься до «высокого качества» (16Мп фото и видео 1080p).

Эта информация написана мелким шрифтом:

«Свободное, неограниченное хранение оригинального качеств фотографий и видео, снятых с Pixel до конца 2020 года, а также бесплатное неограниченное хранение высокого качества для фотографий, сделанных с Pixel впоследствии.» Это высказывание немного сбивает с толку.

Google заявил, что после истечения срока бесплатного хранилища в максимальном разрешении файлы останутся не тронуты, но новые будут загружаться со сжатием.

Google делает ставку на качество камеры в Pixel 2, и безлимитное хранилище, чтобы выделить свой смартфон из массы аналогичных устройств, в том числе конкурентов iPhone X и Samsung Galaxy Note 8. На самом деле, Google считает, что его единственная 12-мегапиксельная камера лучше, чем двойные камеры конкурентов. Pixel 2 также набрал больше очков в тестах DxOMark. Но стоит знать, что его 98 баллов - это обобщённое число. Если рассматривать отдельные категории, можно увидеть, что Szmsung и Apple выигрывают во многих пунктах.

Со всем ажиотажем вокруг анонса Google Pixel 2 и Pixel 2 XL и их самого высокого рейтинга среди камер смартфонов в мире легко потерять мелкие нюансы. Что важно знать об этом новом телефоне? Где Google оставили нам что-то, где мы будем желать большего? Чем камера этого телефона лучше, чем его предшественника?

Dual Pixel AF

Новые смартфоны Pixel оборудованы датчиками изображения, Работающими с технологией, подобной той, что используется в камерах Canon. Под массивом микролиз на сенсоре находятся двойные пиксели. Это позволяет камере видеть объёмное изображение, как мы видим двумя глазами. Это может быть использовано для очень быстрой фокусировки. Данная технология является разновидностью фазовой автофокусировки.

Это официально называется Dual Pixel AF и у данной технологии есть потенциал, чтобы предложить целый ряд преимуществ по сравнению со смартфонами Apple. В традиционной системе для фокусировки используются не все пиксели, но в случае с Dual Pixel, работает вся матрица. Такой же механизм используется на Samsung Galaxy S7 и на камерах Canon. Таким образом, быстрый автофокус для фото будет реализован даже в условиях низкой освещенности. Также фокусировка будет очень плавной в видео. Учитывая то, насколько хороша стабилизация в Pixel 2 при съёмке 4K-видео, вы можете даже создавать видео профессионального качества, снятое на телефон.

Dual Pixel + машинное обучение

Двойные пиксели имеют другую функцию. Левые и правые пиксели под каждой микролинзой по существу получают изображение с двух различных точек обзора. Картинка получается слегка сдвинута соответственно левым и правым пикселям. Алгоритм Google затем строит элементарную карту глубины, используя этот набор разных изображений и некоторую помощь своих алгоритмов машинного обучения.

Несоответствие между двумя изображениями, вероятно, будет очень мало по сравнению с тем, что получают смартфоны с двойной камерой. Из-за этого Pixel 2 сложнее отличить фон от субъекта для более удаленных объектов. Это могло бы объяснить плохие результаты имитации размытия фона в тестах DxO, но результаты становятся намного лучше, когда объект приближается к камере.


Портретный режим iPhone 8 Plus (кликните для поросмотра в полном разрешении)
Портретный режим Google Pixel 2 (кликните для поросмотра в полном разрешении)

В Pixel 2 в портретном режиме на выходе создаются файлы разрешением 12MP. Первая версия смартфона могла генерировать фото в разрешении только лишь 5MP. Эффект размытия стал более реалистичным. Кроме того, алгоритм размытия от Google использует более сложный процесс создания малой глубины резкости, чем размытие по Гауссу на смартфонах Apple. За лучшее качество приходится платить. Алгоритм размытия не может создавать снимки в реальном времени, как смартфоны Apple. Придётся немного подождать, пока происходит обработка файла.

Выносливое аппаратное обеспечение

Аппаратные характеристики на новых телефонах Pixel 2 не лучше, того, что мы видели в других телефонах. Это хорошие устройства. Корпус выполнен по стандарту IP67, что даёт защиту от пыли и кпель воды. Это большой шаг по сравнению с предыдущей моделью Pixel, которая имела корпус с защитой IP53.

Мы потеряли разъем для наушников, но получили стереодинамики в передней части. XL имеет меньше рамку вокруг дисплея, но она ещё не так мала, как в смартфонах Samsung. Нет двойной-камеры. RAM и процессор аналогичны тем, что используются в других телефонах на Android.

Ничего на самом деле не выделяется. Но подождите, есть ещё кое что.

AI

Если есть одна вещь, о которой постоянно в своих выступлениях говорит генеральный директор Google Сундар Пичай. Он пытается заставить людей думать о смартфонах не как о карманных устройствах, а интеллектуальных помощниках, которые могут адаптироваться к нашим потребностям и делают нашу жизнь проще. И в этом Google является лидером благодаря данным, которые он приобретает от своих поисковых сервисов и приложений, таких как карты и фотографии.

AI все чаще используется во многих сервисах, чтобы сделать их лучше. Генеральный директор Пичай недавно привел пример из фитнес-приложения: каждый раз, когда он открывает его, он переходит на другую страницу. Но вместо того, чтобы иметь команду приложения для изменения страницы по умолчанию, он полагает, что ИИ должен просто узнать ваши предпочтения и сделать то, что вы делаете обычно вручную.

Что это значит для фотографии и видеографии? Представьте себе камеру, обученную вашему вкусу в фотографии. Камера может знать, как вы обрабатываете фото, какие снимки создаёте и какие фильтры используете. Как насчёт обучения вашего вкуса в музыке. Когда Google Assistant автоматически делает видео из библиотеки фотографий он сможет использовать ту музыку, которую вы любите.

Возможности безграничны, и мы, вероятно, увидим много интересных вещей в новых телефонах Pixel.

Google Lens

Сундар Пичай впервые говорил о Google Lens на конференции разработчиков I/O в начале этого года. Это объединение машинного зрения и искусственного интеллекта. Теперь данный механизм впервые доступен в приложении Фотографии и в Google Assistant на новых телефонах Pixel. Алгоритмы машинного зрения Google могут проанализировать то, что видит камера, и использовать искусственный интеллект, чтобы делать классные вещи, как определить, какой тип цветка у вас в кадре. Благодаря искусственному интеллекту улучшилась способность автоматической идентификации объектов в сцене.

Как только устройство понимает, что это за объект в кадре, какова его форма, он может сделать с ним интересные вещей: убрать его, изменить освещение, найти его среди множества снимков. Приложение Фотографии уже может находить снимки самолетов, дней рождения, еды, животных, вина и многого другого.

Интеллектуальное распознавание объекта может даже устранить блики, с корторыми были проблемы в предыдущей версии смартфона… хотя это не является проблемой нового Pixel 2.

До свидания уродливые блики


К счастью, неприятные проблемы с бликами, которыми грешили предыдущие смартфоны Pixel, по всей видимости, можно устранить путем выдвижения модуля камеры над стеклянной подложкой, которая также была уменьшена и стала обтекаемой.


Проблемы с бликами Pixel первого поколения

Модуль камеры немного выступает. Это не слишком хорошо для современного смартфона, но данное решение позволило сделать камеру лучше. На этот компромисс мы готовы пойти.

Невероятно плавное видео

Когда был выпущен первый Pixel, Google утверждал, что их камера по стабилизации станет более качественной, чем у других смартфонов с оптической стабилизацией изображения (OIS), несмотря на отсутствие OIS. Также отсутствие оптической стабилизации в смартфоне первого поколения позволило сделать модуль камеры меньше и уместить его в тонкий корпус.

В этом году Google поёт другую песню. Программное обеспечение для стабилизации эволюционировало и стало лучше, но в дополнение к электронной стабилизации изображения (EIS) в большом блоке камеры нашлось место для OIS. Но это дало впечатляющие результаты. Оригинальные Pixel уже имели очень хорошую стабилизацию. в видео, даже 4K, но сочетание OIS + EIS позволило сделать видео ещё более гладким.

При съёмке в условиях низкой освещённости OIS должен помочь стабилизировать камеру для более длинных выдержек. Вы должны также получить лучшие результаты в макросъёмке.

Управление цветом?

Сейчас всё чаще поднимается вопрос о цветопередаче дисплеев и о правильном управлении цветом на новых телефонах. Предыдущие Pixel имели красивые OLED дисплеи, но цвета были дико неточными и часто слишком насыщенными из-за отсутствия какого-либо управления цветом или соответствующих калиброванных режимов отображения.

У iPhone одни из самых точных экранов в плане цветопередачи. Их экраны с широкой цветовой передачей покрывают большую часть гаммы DCI-P3, но, что более важно, iOS может автоматически переключаться между различными режимами для правильного отображения цветов. Переключение происходит между SRGB и DCI-P3 на лету.

Это означает, что вы будите просматривать фотографии и фильмы с теми цветами, которые были задуманы изначально создателями. Это также означает, что когда вы отправляете изображение с вашего iPhone для печати, напечатанные снимки будут содержать такие же цвета. Хотя на бумаге всё будет выглядеть немного темнее, но это только потому что напечатанные фото не подсвечиваются так же как дисплеи.

Samsung Galaxy S8 также откалиброван для режимов DCI-P3 и SRGB, хотя вам придется вручную переключаться между ними. Касательно Pixel 2 не было никаких заявлений об управлении цветом, хотя новая версия Android Oreo предоставляет возможность управления цветом, хотя, как и Windows, оставляет это для приложений. Но без правильного профиля дисплея непонятно как можно будет получить точные цвета.

HDR дисплей?

К сожалению, не было никакого упоминания о 10-битных изображениях или HDR отображении фотографий или видео с использованием HDR10 или стандартов Dolby Vision. Это оставляет желать лучшего.

iPhone X будет воспроизводить HDR-видео с использованием нескольких потоковых сервисов, но что более важно для фотографов, он будет отображать фотографии в режиме HDR. Помните, что это не имеет ничего общего со съёмкой HDR.

Проще говоря: фотографии, сделанные на iPhone X и просмотренные на iPhone X будут выглядеть более качественными и иметь больше тонов, чем на других устройствах благодаря поддержке HDR-дисплеев и точной цветопередачи. Это важно и Google, похоже, упустил это.

HDR дисплеи требуют меньше усилий в работе со светом и тенью. Вместо того, чтобы осветлять тёмные участки и опускать яркость светлых, такие дисплеи могут сразу отображать полный спектр деталей в разных участках.

Ограниченное неограниченное хранилище Google Photo

Когда Google объявила смартфон Pixel 2 с наивысшим рейтингом камеры по тестам DxO, компания также сказала, что все владельцы новых устройств получат неограниченное хранилище для снимков с Pixel 2 в Google Фото. Но оказывается, что есть кое что, написанное мелким шрифтом: вы получите безлимитное хранилище только до 2020 года.

«Свободное, неограниченное хранение оригинального качества фотографий и видео, снятых с Pixel доступно до конца 2020 года, и свободное, неограниченное хранение высокого качество для фотографий, сделанных с Pixel впоследствии.»

Google Фотографии уже предлагает бесплатное и неограниченное хранилище для тех, кто прямо сейчас его использует, давая согласие сжимать фотографии до 16 мегапикселей и видео до 1080p. Если вы решили загрузить данные в полном разрешении, файлы будут засчитываться в 15GB лимита для бесплатного хранения на все службы Google.

Если вы покупаете Google Pixel 2, вы получите возможность обойти эти пределы разрешения и хранить неограниченное количество фотографий и видео в оригинальном разрешении независимо от того, насколько велики файлы. Но это будет доступно только на протяжении трёх лет.

При наступлении 2021 года фото, сделанные на Pixel 2 останутся в прежнем разрешении, но все новые снимки будут загружаться с уменьшением размера до 16MP.

«После 2020 года не будет никаких изменений в фотографиях, которые вы сделали до 2020 года, и вы всегда будете иметь доступ к ним в оригинальном качестве,» сообщает представитель Google. «Мы знаем, что люди, как правило, меняют свой телефон каждые 2-3 года, поэтому для Pixel 2 мы предлагаем хранение данных в соответствии с этим».

Так что если вы готовы приобрести Pixel 2 или Pixel 2 XL, просто знайте, что владение телефоном не даст вам бесплатный вечный архив всех воспоминаний вашей жизни в полном разрешении.

Google Pixel 2 (XL) стал смартфоном, который создавался с упором на искусственный интеллект. И даже камера Pixel 2 получила выгоду от подобного переосмысления. Например, с помощью ИИ компании удалось создать портретный режим, который способен обрабатывать фотографии программно без использования дополнительной камеры. И Pixel 2 — первый в мире смартфон, который способен делать подобное. Но как это возможно? С коллегами из phonearena мы попытаемся разобраться в данном вопросе.

Так работает портретный режим 12-Мп камеры Pixel 2:

Такой результат удалось получить с помощью трех этапов:

  • Маска сегментации
  • Карта глубины

HDR+

HDR — высокий динамический диапазон. Режим HDR работает с двумя изображениями, которые имеют различную экспозицию (светлый кадр и темный кадр), комбинируя два кадра в один. Режим HDR+ гораздо сложнее. Он берет не две, а до десяти фотографий, которые сделаны при недостаточной экспозиции, чтобы на выходе при комбинации всех изображений получилась картинка без пересветов. Именно поэтому режим HDR+ работает так долго.

В случае с портретным режимом сделанная фотография первым делом проходит через режим HDR+, а дальше за дело берется ИИ.

Искусственный интеллект

Чтобы выбрать, какая область должна быть в фокусе, а какая нет, смартфон использует искусственный интеллект. Google натренировала нейронную сеть с помощью миллиона фотографий таким образом, чтобы она могла различать людей, животных, цветы и другие подобные объекты, задавая веса каждому нейрону.

Карта глубины

Выделить объект на изображении недостаточно. Нужно знать, как сильно размывать объекты в фоне, ведь одни могут располагаться ближе, другие, наоборот, дальше. То есть нужна карта глубины.

Удалось ее получить с помощью технологии Dual Pixel. Суть технологии заключается в том, что каждый пиксель разделен на два субпикселя, каждый из которых получает информацию под незначительно иным углом. Разница в углах позволяет определить расстояние до объекта. Эту же технологию использует Samsung в S7 и S8, чтобы быстро фокусироваться на объекте. И с технической точки зрения Samsung может реализовать портретный режим в S7 и S8, опираясь на аппаратные особенности камер данных смартфонов.

На выходе получаем такой результат:

Чем область светлее, тем она ближе к объективу камеры, и наоборот

Итоговый результат радует глаз. Но есть один небольшой нюанс. В случае с фронтальной камерой карту глубины получить не удастся, так как она не использует технологию Dual Pixel, поэтому результат будет не таким хорошим, как с основным модулем.

Google можно похвалить за то, что им удалось реализовать подобное без использования второго модуля камеры, а ведь это куда сложнее, нежели попросту внедрить второй модуль.

По материалам phonearena

27.08.2016 5722 Справочная информация 0

недавно представленной зеркальной фотокамере появилась новая функция — Dual Pixel RAW. Давайте попробуем разобраться в том, что на самом деле предлагает использовать компания Canon в своей новинке.

Как уже стало понятно из анонса, никаких принципиальных изменений в пост-обработке не появилось. Новая функция только немного расширяет возможности для редактирования фотографий. Изначально многие сделали вывод, что двойная запись позволит произвольно менять точку фокусировки. Конечно, в действительности, ничего подобного нет. Dual Pixel RAW позволяет делать две манипуляции:

1) микро-подстройку фокуса;

2) сдвиг боке.

Эти слова означают именно то, что кажется. Зону нерезкости действительно можно «сдвинуть» влево и вправо на некоторое расстояние, которое зависит от нескольких факторов, например от расстояния до фона. Конечно, в связи с некоторым изменением ракурса, можно даже сказать, что меняется рисунок боке. Но это не совсем так. Объектив дает определенную картину, которую нельзя изменить.

Микро-подстройка фокуса работает примерно так же: появляется возможность выбрать чуть другую «точку съемки», которая позволит изменить резкость в определенных зонах изображения.

Вместе с данными изображения записывается информация о работе привода фокусировки. Такая информация дает возможность определять точку фокусировки проще. Не совсем понятно: насколько много такой дополнительной информации сохраняется, ведь и в предыдущих моделях, в том числе и в компактах, можно было посмотреть, по какой точке сфокусировалась камера.

В общем и целом все это приводит к тому, что для качественного использования Dual Pixel RAW нужно выполнять ряд условий:

1) объектив с фокусным расстоянием более 50 мм;

2) значение диафрагме от f/5.6 и больше (меньше значение f/...);

3) чувствительность ниже ISO 1600.

Для объектива с ФР 50 мм — дистанция 1...10 метров

Для объектива 100 мм — дистанция 2...20 метров

Для объектива 200 мм — дистанция 4...40 метров

Каждая двойная точка в Dual Pixel RAW формируется из двух разных фотоприемников (пикселов), которые расположены на матрице. Изначально технология использовалась для ускорения работы автофокуса. В данный момент камера 5D Mark IV позволяет записывать отдельные данные для получения фактически двух изображений для одного снимка. Со временем это может развиться, и появятся интересные алгоритмы обработки, которые анализируя зону резкости позволят менять силу применения эффекта в зависимости от "расстояния" до объекта, которое косвенно можно получить из двух разных кадров, снятых как бы с немного разных ракурсов. В теории это позволит очень легко определять зону размытия и размыть ее еще больше. Хотя производители портретных объективов с большой диафрагмой вряд ли будут прилагать усилия к развитию этой технологии.

К сожалению, за новые дополнительные возможности приходится расплачиваться огромным объемом данных. При использовании Dual Pixel RAW фотоаппарат записывает два файла для одного снимка, поэтому место на карте памяти расходуется в два раза быстрее.

В видеоролике ниже показана работа программы микро-коррекции фокуса. Отчетливо видно, что есть два положения фокуса — по количеству кадров.