Как работает идентификация песни Google 'Hum To Search'

Какой фильм посмотреть?
 

Google недавно запустил новую функцию «Гудеть для поиска», которая позволяет быстро определять песню по напеву. Вот что вам нужно знать.





Прошлый месяц, Google запустила функцию, которая позволяет пользователям напевать мелодию для поиска песни. Этот метод поиска музыки в стиле мелодии не является чем-то новым, поскольку такие приложения, как Shazam, позволяют пользователям искать песни, которые они слышат по радио. Однако Google делает шаг вперед, позволяя пользователям просто напевать песню, слова которой они не могут вспомнить.






Новаторы в Google уже много лет работают над технологией распознавания музыки. Google запустил функцию Now Playing на Pixel 2 в 2017 году, благодаря которой мобильные устройства стали распознавать музыку с низким потреблением энергии. Год спустя та же технология была представлена ​​в функции SoundSearch в приложении Google. Перенесемся в 2020 год, и Google нашел способ упростить поиск песен на кончиках языка пользователя.



Связанный: Как улучшить результаты поиска в Google

Пользователи могут открыть последнюю версию Google приложения, коснитесь значка микрофона и произнесите ' что это за песня? 'или щелкните' Поиск песни ', а затем начните гудеть в течение 10-15 секунд. Алгоритм машинного обучения Google возьмет на себя напев и попытается сопоставить его с потенциальными песнями. Новая функция доступна через Google Ассистент также, просто сказав ' Привет, Google, что это за песня? 'а затем напевает мелодию. Новая технология в настоящее время доступна на 20 различных языках для Android, но только на английском языке для iOS.






Наука, лежащая в основе поисковой системы Google

Google заявляет, что его технология Hum To Search работает в отличие от других подходов к поиску мелодий, которые пытаются сопоставить мелодию с базой данных существующих версий мелодии песни, вместо того, чтобы искать песню напрямую. С помощью Google метод , технология ' производит вложение мелодии из спектрограммы песни без создания промежуточного представления . ' По сути, этот подход должен быть в состоянии сопоставить напевную мелодию непосредственно с исходной записью, без необходимости сопоставлять ее с другой напевной версией. Google изменил модели распознавания музыки, которые использовались в предыдущих технологиях, Now Playing и SoundSearch, чтобы они могли работать с гудящими записями. Это включало обучение технологии машинного обучения для создания встраиваемых пар звуков, содержащих одну и ту же мелодию, даже если они созданы с использованием разных инструментов или певческих голосов. Результатом, по словам Google, является система, которая достигает высокого уровня точности с базой данных песен, насчитывающей более полумиллиона.



Все это сводится к тому факту, что Google научно нашел способ бороться с проблемой наличия песен, которые невозможно полностью запомнить. Конечно, это может быть не самая насущная проблема 2020 года, но многие будут знакомы с опытом попыток запомнить название песни, и оно застряло у них в голове в течение дня или дольше. Даже если пользователь не может запомнить текст или даже мелодию, выходящую за рамки обычного гудения, у Google теперь есть решение.






Источник: Google