Как искусственный интеллект изменил мобильную фотографию

Можно смотреть на развитие технологий как со стороны «железок», так и со стороны софта. Думаем, что «железо» важнее ПО? Но это заблуждение. Без качественного софта аппаратное обеспечение становится бесполезным. Это касается не только процессоров, но и камер. Хороший модуль — это не залог качественных фотографий. Технически смартфоны ограничены в размерах, поэтому сегодня важен именно софт, отвечающий за обработку фотографий, а под софтом стоит понимать в том числе искусственный интеллект.

Идеально, когда софт улучшают совместно железом. Примером такого взаимодействия является технология компании Light. С помощью софта и множества камер, которые расположены под разным углом и имеют различное фокусное расстояние и другие характеристики, происходит магия. За этим определенно будущее, но пока мы остановимся лишь на софте.

Google Фото — это хороший пример работы AI. Google в 2013 году купила компанию DNNresearch, совместно с которой ей удалось натренировать нейросеть на основе изображении, вручную проанализированных обычными людьми. Например, перед нами фото озера, человек отмечает, что на фото озеро. В дальнейшем это фото пропускают через нейросеть, которая понимает, что перед ней озеро с помощью маркера и запоминает, как выглядит фотография.

Таким образом ребята обучили нейросеть, которая в облаке анализирует фотографии Google Фото и разбивает их на категории. Кроме того, за счёт постоянного распознавания нейросеть становится умнее, увеличивается точность, поэтому со временем стало возможной разбивка не по конкретным животным, например, а по типам объектов: «животные», «обед» и так далее.

Спустя год Apple выпустила аналогичное решение, но так как компания беспокоится о приватности, все фотографии анализирует не облачный сервис, а сам смартфон пользователя,  который в течение дня производит разбивку на категории. И это лишь часть применения нейросети. Например, её применяют при создании эффекта размытия. Сначала нейросеть определяет объект в кадре, затем вторая камера создаёт карту глубины. Интересно это потому, что процесс распознавания человека в кадре происходит в реальном времени.

Но главным примером работы нейросети можно назвать различные режимы HDR. В случае с Google речь идёт об HDR+. Например, вот так фотографирует уже старый Google Pixel 2 XL благодаря нейросети (исходники):

Но еще более показательным является режим Night Sight на основе ИИ. Он анализирует фото и изменяет баланс белого и цвета, чтобы на выходе получился отличный результат. В последнее время компании стали использовать специальные процессоры, адаптированные под ИИ. В Apple A12 Bionic ИИ чип на 8 ядер! Неплохой рывок в этой области получился у Snapdragon 855, процессор в синтетических ИИ тестах сумел значительно обойти Snapdragon 845 и Kirin 980.

Вывод

Роль софта и ИИ растёт, а качество модуля камеры больше не так важно. Благодаря постоянному улучшению алгоритмов режимы на основе ИИ фотографируют всё лучше и лучше, поэтому в дальнейшем влияние софта в области камер будет лишь увеличиваться.

Мы в Telegram

Источник

Теги
Лонгриды для вас
ТОП-10 крутых товаров с АлиЭкспресс, которые нужно купить, пока есть деньги

На АлиЭкспресс море различных товаров, среди которых попадаются полезные устройства и не очень. Порой, и сам не знаешь, нужен ли гаджет или нет: откладываешь его в "Избранное" и забываешь. Мысль о том, что нужно было брать, появляется, когда заканчиваются деньги. Чтобы не жалеть об упущенном товаре, заказывайте их сразу, благо сейчас на АлиЭкспресс распродажа - многие товары отдают за бесценок. Выбрали для вас десять крутых гаджетов, которые точно нужно купить, пока есть средства на карте: тут и полезные устройства для дома, для автомобиля, смартфона и компьютера!

Читать далее
5 причин, по которым вас могут забанить в Ватсапе

WhatsApp сильно отстает от Telegram по набору функций, но до сих пор является одним из самых популярных мессенджеров на сегодня. Несмотря на то, что нововведения в нем появляются крайне редко, команда мессенджера регулярно обновляет правила безопасности: так, одним из последних новшеств стали новые ограничения по пересылке сообщений, которые помогают бороться с фейками. А еще мессенджер вычисляет, является ли ваш аккаунт подлинным. Правда в том, что за нарушение администрация может вас забанить в WhatsApp. Рассказываем, какие причины есть для блокировки в мессенджере.

Читать далее
Каким телефоном пользуется Билл Гейтс. Такого даже я не ожидал

Пользователям мобильных устройств всегда было интересно, какими смартфонами пользуются знаменитости. Эти люди способны менять телефон хоть каждый день, оттого, кажется, всегда выбирают только лучшие устройства, доступные на рынке. Особенно интересно посмотреть на глав крупных технологических компаний - уж они-то точно пользуются всем самым лучшим и знают, какой смартфон выбрать. Согласитесь, едва ли получится найти мнение авторитетнее, чем у Билла Гейтса. Да, смартфоны от Microsoft не отличаются революционными технологиями и высокими показателями продаж, но понимает Билл Гейтс в этом явно побольше нашего.

Читать далее
Новый комментарий