Как работают алгоритмы определения жанра и настроения музыки?

Алгоритмы определения жанра и настроения музыки работают на основе анализа различных характеристик композиций и предпочтений пользователей. education.yandex.ru theblueprint.ru

Для определения жанра алгоритмы используют, например, анализ контента. theblueprint.ru Они изучают спектрограмму трека, распределение звуковых частот, звучание и бит, ритм и тембр голоса исполнителя, жанр и другие характеристики. theblueprint.ru Затем ищут треки с подобными техническими параметрами и предлагают их пользователю на основе его лайков, «скипов», дослушивания и других показателей. theblueprint.ru

Для определения настроения алгоритмы анализируют звучание и биты, жанр и тембр и относят треки к разным по настроению категориям. theblueprint.ru Например, нейросеть понимает, что в какой-то момент в треке много высоких частот звука, а в другой момент, наоборот, преобладают низкие. www.forbes.ru Она начинает искать в спектрограмме другие такие зависимости. www.forbes.ru Это могут быть не совсем понятные колебания звука, а могут быть вполне очевидные вещи, например, смена ритма в середине песни. www.forbes.ru

Для учёта предпочтений пользователей алгоритмы используют, например, историю прослушиваний, оценки «Нравится» и «Не нравится», которые ставят пользователи, а также другие их действия: пропуски треков и добавления их в плейлисты. yandex.ru На основе этих данных алгоритм анализирует профиль пользователя и предсказывает, какие треки и исполнители могут ему понравиться. yandex.ru

Кроме того, алгоритмы могут использовать коллаборативную фильтрацию: они собирают информацию о том, какую музыку слушают пользователи и какие композиции выбирают люди с похожим музыкальным вкусом. theblueprint.ru Затем алгоритм выбирает пользователей, чьи лайки пересекаются, — и предлагает им похожие рекомендации. theblueprint.ru