Google сделает Chrome удобным для слепых

Нарушения зрения — ещё не повод отказываться от работы за компьютером. Во-первых, так можно быть наверняка уверенным, что глаза вы уже не испортите. А, во-вторых, вспомогательные инструменты, встроенные в современные операционные системы, позволят без особого труда сориентироваться в незнакомых приложениях. Но если озвучивание названий элементов интерфейса и текста, в общем-то, — вполне обыденная функция и для мобильных, и для настольных устройств, то как быть с описаниями медиафайлов, встречающимися в интернете, не знал почти никто. Но Google нашла, как решить эту проблему.

Chrome станет по-настоящему инклюзивным благодаря нейронным сетям

Google работает над интеграцией в Chrome поддержки машинного обучения для формирования описаний элементов, которые могут встретиться пользователю. Начать было решено с изображений и фотографий, составляющих значимую часть всего интернет-контента. Но поскольку на них обычно изображается не какой-то конкретный объект, а присутствует ещё и фон, который имеет значение для точного восприятия, обойтись технологией Google Lens, определяющей названия объектов реального мира, было нельзя.

Как работают нейронные сети

Судя по тому, что Chrome умеет уже сейчас, распознавание происходит довольно точно, хоть и не мгновенно. Например, эту фотографию браузер описал как “Фрукты или овощи на прилавке”.

Фрукты или овощи на прилавке

Понятное дело, что овощей на снимке нет, а кокосы чисто технически всё-таки являются орехами, но, во-первых, алгоритмы оставили себе место для манёвра, использовав союз “или”, а, во-вторых, поняли, что перед ними именно рыночный прилавок, что довольно здорово, хотя под фруктами его практически не видно.

Читайте также: Чёрный экран в Google Chrome? Как исправить

Не ошибся Chrome и здесь. Браузер без труда понял не только то, что перед ним колесо обозрения, но и определил время суток — ночь.

Колесо обозрения ночью

Пожалуй, было бы не лишним уточнить, что колёс на самом деле два, а место действия является парк, но не будем придираться. В конце концов, пока это тестовая версия технологии, которая в дальнейшем будем только совершенствоваться, обучая саму себя.

Что умеет Google Chrome

Поскольку за определение отвечают нейронные сети, встроить их в Chrome в буквальном смысле было бы проблематично, если не сказать, невозможно. Поэтому разработчики решили проблему встраиванием механизма, который, определив присутствие на экране изображения, отправляет запрос на сервера Google, которые формируют его описание, а затем отправляют его браузеру. Отсюда и задержка в несколько секунд, которая может увеличиваться в зависимости от скорости подключения к интернету, а также от сложности самого изображения. При этом гарантий того, что распознавание вообще произойдёт, нет, поскольку алгоритмы пока могут формулировать описание только нескольких миллионов комбинаций.

Подпишись на наш чат в Telegram. Только там ты сможешь пообщаться с единомышленниками в уютной обстановке.

Что касается инклюзивности, то тут Google ещё очень далеко до Apple, которой нет равных в этой области. Компания из Купертино одной из первых занялась внедрением в свои устройства функций универсального доступа, которые облегчают использование людям с ограниченными возможностями. В результате для управления компьютерами Mac даже не обязательно прикасаться к клавиатуре или мыши, управляя происходящим на экране при помощи голоса или вспомогательных инструментов. Тем не менее, попытки Google сделать что-то полезное для развития концепции универсального доступа заслуживает самой горячей похвалы.

Теги
Новости по теме
Лонгриды для вас
5 преимуществ Android-смартфонов перед iPhone, о которых вы могли не знать

В последнее время только и слышно от всех пользователей, что санкции и ограничения не помеха. Это говорят даже владельцы iPhone, которым Apple откровенно перекрывает кислород и, возможно, продолжит это делать. Тем не менее, люди не боятся неожиданных поворотов судьбы и уже не боятся перейти с iOS на Android. В крайнем случае - на HarmonyOS, но об этом пока говорить не приходится. Рынок смартфонов заметно сужается: реселлеры сообщают о том, что запасов Айфонов хватит на 2-3 месяца, зато с Android-смартфонами нет никаких проблем. Кажется, это начало конца для Apple и звездный час для многочисленных китайских производителей. Поговорим о том, почему Android-смартфоны лучше iPhone прямо сейчас.

Читать далее
Visa и Mastercard остановят работу в России. Будет ли работать Google Pay?

Не так давно Центральный банк объявил об отключении 5 подсанкционных банков из Google Pay. Чуть позже YouTube полностью отключил рекламу, а соответственно и монетизацию в России. Сегодня стало известно, что Visa и MasterCard также временно покидают Россию. Сразу скажу, что карты, которые у вас на руках отключать не будут. Бежать сломя голову в банкомат за наличкой не стоит, эксперты объяснили, что к чему. Сегодня постараемся обсудить все нюансы оплаты сервисов Google картами этих компаний, обсудим альтернативы и разберемся, коснутся ли изменения бесконтактной оплаты со смартфона.

Читать далее
Каким будет Google Pixel 7 и повторит ли он успех предыдущей модели

Трудно удержаться от утверждения, что серия Google Pixel 6 была самой захватывающей моделью Pixel за последние годы. Помимо использования собственного процессора Tensor, новых сенсоров основной камеры и впечатляющих характеристик, у этих флагманов есть много других преимуществ. Google уже начала работу над следующим поколением Pixel, и в последние месяцы мы даже видели просочившиеся рендеры. До его выхода еще полгода, но мы уже с большой доле вероятности можем сказать, каком он будет и чем будет выделяться на фоне конкурентов.

Читать далее
Новый комментарий