Google представила технологию распознавания музыки нового поколения

С выходом Pixel 2 Google представила функцию Now Playing, которая способна распознавать музыку, играющую в фоне. Now Playing постоянно анализирует окружающие звуки, не требует подключения к Интернету, вся база треков хранится на самом устройстве, основной особенностью новой функции стало использование нейросетей для идентификации треков. В блоге Google AI компания сообщила о том, что внедрила подобную нейросеть в распознавание Sound Search, расположенное на стороне сервера и доступное каждому.

Теперь, спросив у ассистента “Окей Google, какая это песня?”, можно получить такой же быстрый и точный ответ, как и в случае с Now Playing:

Для распознавания в Now Playing компания использует отпечаток записи окружающего пространства, после чего подобный отпечаток сравнивается с отпечатками в базе данных смартфона. В Now Playing хранится тысячи песен, база данных постоянно обновляется, добавляются новые треки, а непопулярные удаляются. Это создает некоторые ограничения.

В случае с Sound Search база данных в 1000 раз больше, что позволяет более точно идентифицировать трек и попросту с большей долей вероятности выводить хоть какой-либо результат.

Под отпечатком понимается нечто подобное:

У нас имеется запись длиной в 9 секунд, полученная с помощью сверточных нейронных сетей, которая разбивается на 2-секундные куски с интервалом в 1 секунду. Тем временем в базе данных хранятся точно такие же отпечатки. Now Playing с помощью двухфазного алгоритма сравнивает отпечаток с базой данных. На первой фазе с помощью гибрид пространственного разбиения и векторного разбиения анализируется вся база на поиск более менее похожих треков. На втором этапе среди кандидатов происходит более глубокий анализ каждого двухсекундного куска.

Из-за слишком большой базы в Sound Search разработчики доработали технологию, в 4 раза увеличив размер нейросети, отрезки сократили до 1 секунды с интервалом в 0,5 секунды. К слову, нечто подобное в распознавании голоса использует компания Yandex.

Мнением делитесь в Telegram-чате или ниже в комментариях.

Теги
Лонгриды для вас
Call of Duty и еще пять игр для Android, в которые лучше играть на геймпаде

Многим недостаточно просто играть на смартфоне и хочется воспользоваться контроллером. Учитывая интерес, который вызвала статья о геймпадах для смартфона, которая выходила на нашем сайте некоторое время назад, хотелось бы остановиться на этой теме подробнее. В игровом процессе с использованием смартфона действительно что-то есть и многие игры с ним раскрываются с новой стороны. Если вы еще не пробовали такие игры, я расскажу о некоторых из них. А заодно напомню, как можно подключить контроллер к смартфону. Можно пользоваться даже теми геймпадами, которые идут в комплекте к консолям.

Читать далее
Google закрывает Google Play Music. Как перенести музыку в YouTube Music

Google – одна из тех компаний, которые не боятся закрывать неудачные продукты. Поэтому в какой-то момент энтузиасты даже создали виртуальное кладбище Google, где размещён список всех почивших разработок поискового гиганта, которые либо лишились поддержки, либо в принципе закрылись. Однако даже у Google есть такие проекты, закрытие которых кажется в принципе невозможным, из-за их высокой значимости. То есть нам сложно представить, что компания вот так возьмёт и закроет магазин приложений Google Play. Но, судя по всему, сервис Google Play Music, который является частью каталога, в список системообразующих продуктов не входит.

Читать далее
Много нового от Google и IFA 2020: итоги недели

Давно такого не было, чтобы Google была настоящим хедлайнером новостей этой недели. Выходили разные обновления не только для сервисов, но и для всей системы в целом. Появилась даже возможность отслеживать больных новым коронавирусом, про которую многие спорили в течение последних нескольких недель. Правда, доступно это пока только с некоторыми ограничениями. А еще на этой неделе появилась информация о том, что фанатов Fortnite ждет приятный сюрприз в игре. Впрочем, одной из самых интересных новостей недели стало то, что IFA 2020 в этом году все же состоится, хоть и будет проходить в немного непривычном формате. Она может стать первой выставкой, которая все же пройдет в традиционном оффлайн формате.

Читать далее

1 комментарий Оставить свой

  1. iWolf

    Вся база в оффлайне храниться?

Новый комментарий