Google представила технологию распознавания музыки нового поколения

С выходом Pixel 2 Google представила функцию Now Playing, которая способна распознавать музыку, играющую в фоне. Now Playing постоянно анализирует окружающие звуки, не требует подключения к Интернету, вся база треков хранится на самом устройстве, основной особенностью новой функции стало использование нейросетей для идентификации треков. В блоге Google AI компания сообщила о том, что внедрила подобную нейросеть в распознавание Sound Search, расположенное на стороне сервера и доступное каждому.

Теперь, спросив у ассистента “Окей Google, какая это песня?”, можно получить такой же быстрый и точный ответ, как и в случае с Now Playing:

Для распознавания в Now Playing компания использует отпечаток записи окружающего пространства, после чего подобный отпечаток сравнивается с отпечатками в базе данных смартфона. В Now Playing хранится тысячи песен, база данных постоянно обновляется, добавляются новые треки, а непопулярные удаляются. Это создает некоторые ограничения.

В случае с Sound Search база данных в 1000 раз больше, что позволяет более точно идентифицировать трек и попросту с большей долей вероятности выводить хоть какой-либо результат.

Под отпечатком понимается нечто подобное:

У нас имеется запись длиной в 9 секунд, полученная с помощью сверточных нейронных сетей, которая разбивается на 2-секундные куски с интервалом в 1 секунду. Тем временем в базе данных хранятся точно такие же отпечатки. Now Playing с помощью двухфазного алгоритма сравнивает отпечаток с базой данных. На первой фазе с помощью гибрид пространственного разбиения и векторного разбиения анализируется вся база на поиск более менее похожих треков. На втором этапе среди кандидатов происходит более глубокий анализ каждого двухсекундного куска.

Из-за слишком большой базы в Sound Search разработчики доработали технологию, в 4 раза увеличив размер нейросети, отрезки сократили до 1 секунды с интервалом в 0,5 секунды. К слову, нечто подобное в распознавании голоса использует компания Yandex.

Мнением делитесь в Telegram-чате или ниже в комментариях.

Теги
Лонгриды для вас
Huawei отказалась работать в России, но привезла оборудования на 15$ миллионов. Как так-то

Интересные дела творятся вокруг. С одной стороны против России постоянно вводятся санкции, а многие компании уходят с нашего рынка. Многие действуют более осторожно и заявляют, что приостанавливают работу, чтобы иметь возможность вернуться, когда предоставится возможность. Но есть и совсем необычные ситуации. Компании вроде уходят или приостанавливают продажи, но техника продолжает поступать на рынок. Звучит странно, но если верить появившейся информации, именно такая ситуация сложилась вокруг поставок Huawei оборудования на наш рынок. Мы, конечно, не против, но как такое вообще возможно?

Читать далее
Дудлы от Google. Все, что нужно знать

Сейчас про Дудлы от Google не слышал только ленивый. Думаю, что каждый из нас хоть раз обращал внимание на картинки на стартовой странице Гугл. И многие замечали, что часто они связаны с каким-то важным событием, которое происходит в мире. На самом деле за простыми изображениями стоит серьезная работа целой команды сотрудников. И далеко не всегда изображения ограничены одними лишь картинками. Анимации, игры - чего только здесь не встретишь. В статье подробно расскажем о Дудлах и обсудим разные интересные детали на этот счет.

Читать далее
Почему телефон не видит карту памяти и что с этим делать

Большинство смартфонов на Android по-прежнему оснащают слотом для карт памяти: это самый простой способ увеличить объем памяти в смартфоне. Уже давно появились облачные хранилища - более гибкий способ хранить свои данные и не переживать за то, что с ними что-то случится. Того же нельзя сказать про карты памяти: они часто ломаются или смартфон перестает попросту ее не видит. Если с их недолговечностью уже ничего не поделать, то проблему карточки, которую не видит смартфон, решить вполне реально. Так что, если ваша MicroSD не отображается в телефоне, не спешите отправляться в магазин за новой - попробуйте устранить ошибку собственными силами.

Читать далее
1 комментарий
  1. iWolf

    Вся база в оффлайне храниться?

Новый комментарий