Каков принцип работы портретного режима Google Pixel 2?

Google Pixel 2 (XL) стал смартфоном, который создавался с упором на искусственный интеллект. И даже камера Pixel 2 получила выгоду от подобного переосмысления. Например, с помощью ИИ компании удалось создать портретный режим, который способен обрабатывать фотографии программно без использования дополнительной камеры. И Pixel 2 — первый в мире смартфон, который способен делать подобное. Но как это возможно? С коллегами из phonearena мы попытаемся разобраться в данном вопросе.

Каков принцип работы портретного режима Google Pixel 2? Фото.

Так работает портретный режим 12-Мп камеры Pixel 2:

Каков принцип работы портретного режима Google Pixel 2? Фото.

Такой результат удалось получить с помощью трех этапов:

  • HDR+
  • Маска сегментации
  • Карта глубины

HDR+

Каков принцип работы портретного режима Google Pixel 2? HDR+. Фото.

HDR — высокий динамический диапазон. Режим HDR работает с двумя изображениями, которые имеют различную экспозицию (светлый кадр и темный кадр), комбинируя два кадра в один. Режим HDR+ гораздо сложнее. Он берет не две, а до десяти фотографий, которые сделаны при недостаточной экспозиции, чтобы на выходе при комбинации всех изображений получилась картинка без пересветов. Именно поэтому режим HDR+ работает так долго.

В случае с портретным режимом сделанная фотография первым делом проходит через режим HDR+, а дальше за дело берется ИИ.

Искусственный интеллект

Каков принцип работы портретного режима Google Pixel 2? Искусственный интеллект. Фото.

Чтобы выбрать, какая область должна быть в фокусе, а какая нет, смартфон использует искусственный интеллект. Google натренировала нейронную сеть с помощью миллиона фотографий таким образом, чтобы она могла различать людей, животных, цветы и другие подобные объекты, задавая веса каждому нейрону.

Карта глубины

Выделить объект на изображении недостаточно. Нужно знать, как сильно размывать объекты в фоне, ведь одни могут располагаться ближе, другие, наоборот, дальше. То есть нужна карта глубины.

Удалось ее получить с помощью технологии Dual Pixel. Суть технологии заключается в том, что каждый пиксель разделен на два субпикселя, каждый из которых получает информацию под незначительно иным углом. Разница в углах позволяет определить расстояние до объекта. Эту же технологию использует Samsung в S7 и S8, чтобы быстро фокусироваться на объекте. И с технической точки зрения Samsung может реализовать портретный режим в S7 и S8, опираясь на аппаратные особенности камер данных смартфонов.

На выходе получаем такой результат:

Каков принцип работы портретного режима Google Pixel 2? Карта глубины. Фото.

Чем область светлее, тем она ближе к объективу камеры, и наоборот

Итоговый результат радует глаз. Но есть один небольшой нюанс. В случае с фронтальной камерой карту глубины получить не удастся, так как она не использует технологию Dual Pixel, поэтому результат будет не таким хорошим, как с основным модулем.

Каков принцип работы портретного режима Google Pixel 2? Карта глубины. Фото.

Google можно похвалить за то, что им удалось реализовать подобное без использования второго модуля камеры, а ведь это куда сложнее, нежели попросту внедрить второй модуль.

По материалам phonearena

Теги
Лонгриды для вас
Сравниваем две горячие новинки — Samsung Galaxy S23 FE против Google Pixel 8

После нескольких месяцев слухов и утечек Google Pixel 8 и Samsung Galaxy S23 FE наконец-то официально представлены и вскоре появятся на прилавках магазинов. Оба смартфона предлагают характеристики, близкие к флагманским, без обычной для этой категории устройств высокой цены. Тем не менее, они используют разные подходы для достижения своего уровня, попутно идя на некоторые компромиссы в производительности и камере. Так какой же доступный, но высококлассный Android-смартфон больше всего заслуживает ваших денег? Чтобы это понять, давайте сравним между собой две горячие новинки последнего времени — Pixel 8 и Galaxy S23 FE.

Читать далее
4 отличных смартфона для студентов и не только

Многие не согласятся с таким понятием, как ”смартфон для студента”. Больше всего вопросов вызовет стоимость смартфона. Одни студенты могут себе позволить раскладной Huawei Mate X3, а другим нужен максимально бюджетный смартфон. Чтобы нам было проще разобраться в вопросе, давайте возьмем за основу стильный внешний вид, хорошую камеру и среднюю ценовую категорию. От этого мы будем отталкиваться в сегодняшней подборке, которую мы условно назовем подборкой смартфонов для студентов.

Читать далее
Провел тест камеры HONOR 90. Реальность отличается от ожиданий

Если вы хотя бы более-менее знакомы с нашим сайтом, то знаете, что мы редко подробно останавливаемся на том, как работает камера конкретных смартфонов. В большом подробном обзоре или опыте использования эта информация обычно есть и там мы говорим не только о характеристиках, но и делимся своим мнением. На этот раз у меня в руках оказался слишком интересный телефон, чтобы о нем промолчать. Поэтому я и решил отдельно рассказать о его камере, ведь стоит он совсем недорого и до сих пор продается со стартовой скидкой, а на выходе мы получаем камеру с разрешением 200 Мп. Нужно ли это или нет? Сейчас разберемся.

Читать далее