Google представила технологию распознавания музыки нового поколения

С выходом Pixel 2 Google представила функцию Now Playing, которая способна распознавать музыку, играющую в фоне. Now Playing постоянно анализирует окружающие звуки, не требует подключения к Интернету, вся база треков хранится на самом устройстве, основной особенностью новой функции стало использование нейросетей для идентификации треков. В блоге Google AI компания сообщила о том, что внедрила подобную нейросеть в распознавание Sound Search, расположенное на стороне сервера и доступное каждому.

Теперь, спросив у ассистента “Окей Google, какая это песня?”, можно получить такой же быстрый и точный ответ, как и в случае с Now Playing:

Для распознавания в Now Playing компания использует отпечаток записи окружающего пространства, после чего подобный отпечаток сравнивается с отпечатками в базе данных смартфона. В Now Playing хранится тысячи песен, база данных постоянно обновляется, добавляются новые треки, а непопулярные удаляются. Это создает некоторые ограничения.

В случае с Sound Search база данных в 1000 раз больше, что позволяет более точно идентифицировать трек и попросту с большей долей вероятности выводить хоть какой-либо результат.

Под отпечатком понимается нечто подобное:

У нас имеется запись длиной в 9 секунд, полученная с помощью сверточных нейронных сетей, которая разбивается на 2-секундные куски с интервалом в 1 секунду. Тем временем в базе данных хранятся точно такие же отпечатки. Now Playing с помощью двухфазного алгоритма сравнивает отпечаток с базой данных. На первой фазе с помощью гибрид пространственного разбиения и векторного разбиения анализируется вся база на поиск более менее похожих треков. На втором этапе среди кандидатов происходит более глубокий анализ каждого двухсекундного куска.

Из-за слишком большой базы в Sound Search разработчики доработали технологию, в 4 раза увеличив размер нейросети, отрезки сократили до 1 секунды с интервалом в 0,5 секунды. К слову, нечто подобное в распознавании голоса использует компания Yandex.

Мнением делитесь в Telegram-чате или ниже в комментариях.

Теги
Лонгриды для вас
Xiaomi
Штраф Google за навязывание Android и такая разная Xiaomi: итоги недели

На прошедшей неделе мы довольно часто вспоминали Xiaomi. Сейчас даже нет смысла рассказывать о блокировке телефонов в Крыму и на других территориях, которая то ли была, то ли нет. Куда интереснее то, что компания представила новые умные очки, позволяющие в прямом смысле посмотреть на мир с другой стороны. Мы давно смотрели на них в фантастических фильмах и теперь просто не можем пройти стороной их появление. Его даже не смогло омрачить небольшое недоразумение с автомобилем, который Xiaomi выдала за свой, а он оказался концептом другой марки. Были и другие новости, например о том, что Samsung позволит менять объем оперативной памяти своих телефонов, а Google получила штраф за навязывание Android. Все это и многое другое вы найдете в нашей традиционной новостной подборке.

Читать далее
Почему смартфоны делают нас глупыми

Сейчас в мире работает более 4 миллиардов смартфонов - мы регулярно ими пользуемся, чтобы написать что-то в мессенджере, прочитать последние новости, поиграть. Это прекрасно, но смартфоны оказывают влияние на нас и наше поведение. Исследования, проведенные в этой области, показывают, что смартфоны и другие умные устройства делают нас глупее. Это факт: помните наизусть хоть один номер телефона? Сравните с тем, что было раньше. Почему так происходит?

Читать далее
Pixel Fold
Все, что мы знаем о складном Google Pixel Fold

Samsung, Huawei и Motorola были первопроходцами в категории складных телефонов, продавая дорогие прототипы, граничащие с незавершенными демонстрациями технологий. Это отлично подходило для нетерпеливых ценителей всего нового, но не для простых пользователей, которым нужен был хороший телефон на каждый день. Но с появлением превосходных Galaxy Z Fold 3 и Z Flip 3 Samsung изменила наше представление о складных телефонах, доказав, что они могут предложить отличные возможности, недоступные для телефонов в традиционном корпусе. На протяжении 2021 года мы видели серию утечек о гипотетическом Pixel Fold, который должен был быть запущен вместе с Pixel 6. Однако этого не произошло. Но стоит ли полагать, что компания не выпустит ”раскладушку”. Спойлер: нет!

Читать далее
1 комментарий
  1. iWolf

    Вся база в оффлайне храниться?

Новый комментарий