Как искусственный интеллект изменил мобильную фотографию

Можно смотреть на развитие технологий как со стороны «железок», так и со стороны софта. Думаем, что «железо» важнее ПО? Но это заблуждение. Без качественного софта аппаратное обеспечение становится бесполезным. Это касается не только процессоров, но и камер. Хороший модуль — это не залог качественных фотографий. Технически смартфоны ограничены в размерах, поэтому сегодня важен именно софт, отвечающий за обработку фотографий, а под софтом стоит понимать в том числе искусственный интеллект.

Идеально, когда софт улучшают совместно железом. Примером такого взаимодействия является технология компании Light. С помощью софта и множества камер, которые расположены под разным углом и имеют различное фокусное расстояние и другие характеристики, происходит магия. За этим определенно будущее, но пока мы остановимся лишь на софте.

Google Фото — это хороший пример работы AI. Google в 2013 году купила компанию DNNresearch, совместно с которой ей удалось натренировать нейросеть на основе изображении, вручную проанализированных обычными людьми. Например, перед нами фото озера, человек отмечает, что на фото озеро. В дальнейшем это фото пропускают через нейросеть, которая понимает, что перед ней озеро с помощью маркера и запоминает, как выглядит фотография.

Таким образом ребята обучили нейросеть, которая в облаке анализирует фотографии Google Фото и разбивает их на категории. Кроме того, за счёт постоянного распознавания нейросеть становится умнее, увеличивается точность, поэтому со временем стало возможной разбивка не по конкретным животным, например, а по типам объектов: «животные», «обед» и так далее.

Спустя год Apple выпустила аналогичное решение, но так как компания беспокоится о приватности, все фотографии анализирует не облачный сервис, а сам смартфон пользователя,  который в течение дня производит разбивку на категории. И это лишь часть применения нейросети. Например, её применяют при создании эффекта размытия. Сначала нейросеть определяет объект в кадре, затем вторая камера создаёт карту глубины. Интересно это потому, что процесс распознавания человека в кадре происходит в реальном времени.

Но главным примером работы нейросети можно назвать различные режимы HDR. В случае с Google речь идёт об HDR+. Например, вот так фотографирует уже старый Google Pixel 2 XL благодаря нейросети (исходники):

Но еще более показательным является режим Night Sight на основе ИИ. Он анализирует фото и изменяет баланс белого и цвета, чтобы на выходе получился отличный результат. В последнее время компании стали использовать специальные процессоры, адаптированные под ИИ. В Apple A12 Bionic ИИ чип на 8 ядер! Неплохой рывок в этой области получился у Snapdragon 855, процессор в синтетических ИИ тестах сумел значительно обойти Snapdragon 845 и Kirin 980.

Вывод

Роль софта и ИИ растёт, а качество модуля камеры больше не так важно. Благодаря постоянному улучшению алгоритмов режимы на основе ИИ фотографируют всё лучше и лучше, поэтому в дальнейшем влияние софта в области камер будет лишь увеличиваться.

Мы в Telegram

Источник

Теги
Лонгриды для вас
Redmi Note 9
Почему камера Redmi Note 9 плохо снимает и что делать

Думаю, вам неоднократно приходилось слышать выражение о том, что фотографирует не камера, а человек. Дескать, настоящий профессионал сможет сделать шедевральный снимок даже на калькулятор, а судить о работе фотографа по камере так же оскорбительно, как проводить параллель между профессионализмом повара и дороговизной его кастрюль. Но всё это, конечно, чистой воды лукавство. Помимо того, что оборудование имеет большое значение для фотографии, не менее важно правильно его обслуживать, даже если вы ведёте съёмку на обычный Android-смартфон.

Читать далее
Лучшие игры для Android в жанре приключенческого боевика (Метроидвания)

Когда хочется во что-то поиграть на смартфоне, но не знаешь, во что, остается только качать игры наугад или спрашивать друзей, во что поиграть. Есть еще один способ. Можно просто зайти на наш сайт и посмотреть свежую подборку игр, которую мы для вас приготовили. Каждый раз мы публикуем что-то новое, стараясь учитывать интересы каждого пользователя. На этот раз представляем вашему вниманию подборку игр, в которую вошли боевики с разными оттенками графики, сюжета, динамики и прочего. Если вы хотите во что-то поиграть в выходные, то эта подборка специально для вас.

Читать далее
Samsung Galaxy
Samsung готовит новый продукт в линейке Galaxy. Что это?

Знаете, каким будет новый продукт в линейке Samsung Galaxy? Я тоже нет, и никто не знает. Но есть информация о том, что он скоро выйдет, и несколько вариантов того, что это может быть. Более того, он уже получил сертификацию и появится совсем скоро. Предполагаю, что это будет интересно всем, а не только фанатам марки. Ведь это может оказать большое влияние на индустрию в целом и заставить других производителей предлагать свои решения. Именно так и меняется индустрия, и доказательств этого слишком много для того, чтобы считать это случайностью. Вот, что нам говорят последние новости и что может представить Samsung буквально в ближайшие пару месяцев.

Читать далее
Новый комментарий