Каков принцип работы портретного режима Google Pixel 2?

Google Pixel 2 (XL) стал смартфоном, который создавался с упором на искусственный интеллект. И даже камера Pixel 2 получила выгоду от подобного переосмысления. Например, с помощью ИИ компании удалось создать портретный режим, который способен обрабатывать фотографии программно без использования дополнительной камеры. И Pixel 2 — первый в мире смартфон, который способен делать подобное. Но как это возможно? С коллегами из phonearena мы попытаемся разобраться в данном вопросе.

Каков принцип работы портретного режима Google Pixel 2? Фото.

Так работает портретный режим 12-Мп камеры Pixel 2:

Каков принцип работы портретного режима Google Pixel 2? Фото.

Такой результат удалось получить с помощью трех этапов:

  • HDR+
  • Маска сегментации
  • Карта глубины

HDR+

Каков принцип работы портретного режима Google Pixel 2? HDR+. Фото.

HDR — высокий динамический диапазон. Режим HDR работает с двумя изображениями, которые имеют различную экспозицию (светлый кадр и темный кадр), комбинируя два кадра в один. Режим HDR+ гораздо сложнее. Он берет не две, а до десяти фотографий, которые сделаны при недостаточной экспозиции, чтобы на выходе при комбинации всех изображений получилась картинка без пересветов. Именно поэтому режим HDR+ работает так долго.

В случае с портретным режимом сделанная фотография первым делом проходит через режим HDR+, а дальше за дело берется ИИ.

Искусственный интеллект

Каков принцип работы портретного режима Google Pixel 2? Искусственный интеллект. Фото.

Чтобы выбрать, какая область должна быть в фокусе, а какая нет, смартфон использует искусственный интеллект. Google натренировала нейронную сеть с помощью миллиона фотографий таким образом, чтобы она могла различать людей, животных, цветы и другие подобные объекты, задавая веса каждому нейрону.

Карта глубины

Выделить объект на изображении недостаточно. Нужно знать, как сильно размывать объекты в фоне, ведь одни могут располагаться ближе, другие, наоборот, дальше. То есть нужна карта глубины.

Удалось ее получить с помощью технологии Dual Pixel. Суть технологии заключается в том, что каждый пиксель разделен на два субпикселя, каждый из которых получает информацию под незначительно иным углом. Разница в углах позволяет определить расстояние до объекта. Эту же технологию использует Samsung в S7 и S8, чтобы быстро фокусироваться на объекте. И с технической точки зрения Samsung может реализовать портретный режим в S7 и S8, опираясь на аппаратные особенности камер данных смартфонов.

На выходе получаем такой результат:

Каков принцип работы портретного режима Google Pixel 2? Карта глубины. Фото.

Чем область светлее, тем она ближе к объективу камеры, и наоборот

Итоговый результат радует глаз. Но есть один небольшой нюанс. В случае с фронтальной камерой карту глубины получить не удастся, так как она не использует технологию Dual Pixel, поэтому результат будет не таким хорошим, как с основным модулем.

Каков принцип работы портретного режима Google Pixel 2? Карта глубины. Фото.

Google можно похвалить за то, что им удалось реализовать подобное без использования второго модуля камеры, а ведь это куда сложнее, нежели попросту внедрить второй модуль.

По материалам phonearena

Теги
Оставить комментарий в Telegram. Поделитесь мнением в чате читателей Androidinsider.ru
Лонгриды для вас
Чего мы ждем от Google в 2023 году

С аппаратной точки зрения у Google был отличный 2022 год. Серия Pixel 7 поразила всех своим выходом, а Pixel 7 Pro для многих и вовсе стал лучшим телефоном года. Наконец-то появились Pixel Watch, даже если они и не оправдали ожидание некоторых пользователей и не принесли функций, которых многие ждали. А еще мы узнали о новом умном гибридном дисплее и планшете, который появится в 2023 году. Были и другие новости, в частности об умном доме компании, который, впрочем, не так полезен и популярен в нашей стране. Но все вместе это говорит о том, что компания действительно решила сделать ставку на гаджеты и сместить акцент своей деятельности с программной составляющей. Давайте подумаем, чего бы мы хотели от компании в 2023 году.

Читать далее
Хотите купить iPhone 14 Pro Max? Одумайтесь! Вот вам 5 причин купить Google Pixel 7 Pro

Это правда, что iPhone уже много лет доминирует во многих областях индустрии смартфонов. В отличие от других брендов, Apple не снабжает свои смартфоны крутыми аппаратными характеристиками. Тем не менее, iPhone может сравниться по производительности практически с любым телефоном вне зависимости от его начинки. Это задевает многих фанатов Android, которые при любом удобном случае начинают говорить о недостаточной емкости батареи, малом объеме оперативной памяти или 12 Мп камере. Но это происходит только среди той части аудитории, которая не знает, как это работает, и не догадывается, что такое оптимизация. Впрочем, сейчас не об этом. Лучше поговорим о том, что не стоит покупать iPhone 14 Pro Max и лучше купить вместо него не самый частый в наших краях аппарат.

Читать далее
Почему Google Pixel 6a — лучший бюджетный смартфон прямо сейчас? Объясняем на пальцах

Производители смартфонов заваливают нас новыми устройствами каждый год. Их настолько много, что выбрать какой-то один невероятно сложно. Если речь о китайских смартфонах, то тут все очень сложно: в линейки Realme сам черт ногу сломит! Еще сложнее, если хочется купить недорогой смартфон с хорошим процессором, отличной камерой и от известного бренда - тут точно придется сильно переплатить. Однако в 2022 году проблема решена, ибо Google Pixel 6a - идеальный вариант для тех, кто присматривает смартфон на Android себе или в подарок. Рассказываем, почему стоит купить Pixel 6a в 2022 году.

Читать далее