Google сделает Chrome удобным для слепых

Нарушения зрения — ещё не повод отказываться от работы за компьютером. Во-первых, так можно быть наверняка уверенным, что глаза вы уже не испортите. А, во-вторых, вспомогательные инструменты, встроенные в современные операционные системы, позволят без особого труда сориентироваться в незнакомых приложениях. Но если озвучивание названий элементов интерфейса и текста, в общем-то, — вполне обыденная функция и для мобильных, и для настольных устройств, то как быть с описаниями медиафайлов, встречающимися в интернете, не знал почти никто. Но Google нашла, как решить эту проблему.

Chrome станет по-настоящему инклюзивным благодаря нейронным сетям

Google работает над интеграцией в Chrome поддержки машинного обучения для формирования описаний элементов, которые могут встретиться пользователю. Начать было решено с изображений и фотографий, составляющих значимую часть всего интернет-контента. Но поскольку на них обычно изображается не какой-то конкретный объект, а присутствует ещё и фон, который имеет значение для точного восприятия, обойтись технологией Google Lens, определяющей названия объектов реального мира, было нельзя.

Как работают нейронные сети

Судя по тому, что Chrome умеет уже сейчас, распознавание происходит довольно точно, хоть и не мгновенно. Например, эту фотографию браузер описал как “Фрукты или овощи на прилавке”.

Фрукты или овощи на прилавке

Понятное дело, что овощей на снимке нет, а кокосы чисто технически всё-таки являются орехами, но, во-первых, алгоритмы оставили себе место для манёвра, использовав союз “или”, а, во-вторых, поняли, что перед ними именно рыночный прилавок, что довольно здорово, хотя под фруктами его практически не видно.

Читайте также: Чёрный экран в Google Chrome? Как исправить

Не ошибся Chrome и здесь. Браузер без труда понял не только то, что перед ним колесо обозрения, но и определил время суток — ночь.

Колесо обозрения ночью

Пожалуй, было бы не лишним уточнить, что колёс на самом деле два, а место действия является парк, но не будем придираться. В конце концов, пока это тестовая версия технологии, которая в дальнейшем будем только совершенствоваться, обучая саму себя.

Что умеет Google Chrome

Поскольку за определение отвечают нейронные сети, встроить их в Chrome в буквальном смысле было бы проблематично, если не сказать, невозможно. Поэтому разработчики решили проблему встраиванием механизма, который, определив присутствие на экране изображения, отправляет запрос на сервера Google, которые формируют его описание, а затем отправляют его браузеру. Отсюда и задержка в несколько секунд, которая может увеличиваться в зависимости от скорости подключения к интернету, а также от сложности самого изображения. При этом гарантий того, что распознавание вообще произойдёт, нет, поскольку алгоритмы пока могут формулировать описание только нескольких миллионов комбинаций.

Подпишись на наш чат в Telegram. Только там ты сможешь пообщаться с единомышленниками в уютной обстановке.

Что касается инклюзивности, то тут Google ещё очень далеко до Apple, которой нет равных в этой области. Компания из Купертино одной из первых занялась внедрением в свои устройства функций универсального доступа, которые облегчают использование людям с ограниченными возможностями. В результате для управления компьютерами Mac даже не обязательно прикасаться к клавиатуре или мыши, управляя происходящим на экране при помощи голоса или вспомогательных инструментов. Тем не менее, попытки Google сделать что-то полезное для развития концепции универсального доступа заслуживает самой горячей похвалы.

Теги
Лонгриды для вас
WhatsApp получил большое обновление. Что нового

Несмотря на то что аудитория Telegram сегодня растёт как на дрожжах, самым популярным мессенджером по-прежнему остаётся WhatsApp. Им пользуются более двух миллиардов человек по всему миру, оставляя его в недосягаемости для всех остальных сервисов обмена сообщениями. Но такая популярность возникла не на пустом месте. Очевидно, что разработчики WhatsApp проделали большую работу, чтобы превратить просто неплохой сервис для обмена сообщениями в мега-удобный социальный инструмент.

Читать далее
Почему Samsung не должна соглашаться на большую зависимость от Google

Google является настоящим гигантом индустрии, который предлагает всему миру не только свой поисковик или смартфон, продажи которого едва входят в мировую десятку, но и Android. Естественно, имея такой мощный инструмент, как самая популярная операционная система в мире, компания может диктоваться свои условия производителям. Примерно 88 смартфонов из 100 в мире работают на этой операционной системе, что делает компанию чуть ли не монополистом. Я сам считаю, что в стандартизации, если она сделана с умом, нет ничего плохого. Вот только излишнее влияние на производителей это уже не благо, а скорее зло.

Читать далее
Google добавила в Google Play функцию автоустановки новых приложений

Мне никогда особенно не нравился Google Play. Его оформление и компоновка интерфейса казались мне какими-то нелогичными и неудобными. То ли дело App Store. У него и дизайн классный, и все элементы выстроены как-то по-умному так, что всё находится на своём месте и не нужно совершать лишних действий, чтобы перейти в нужный раздел. Однако со временем Google одумалась и, во-первых, удалила из оформления Google Play ту ужасающую зелёную заливку, а, во-вторых, начала расширять его функциональные возможности.

Читать далее

Новый комментарий