Жук Олександр Вікторович. Розробка методів і алгоритмів звуковисотного і темпоритмічного розпізнавання послідовності музичних звуків

brief description

Жук Олександр Вікторович. Розробка методів і алгоритмів звуковисотного і темпоритмічного розпізнавання послідовності музичних звуків : Дис... канд. наук: 05.13.23 2009

Жук О.В. "Розробка методів і алгоритмів звуковисотного і темпоритмічного розпізнавання послідовності музичних звуків" Рукопис.
Дисертація на здобуття наукового ступеня кандидата технічних наук за фахом 05.13.23 системи та засоби штучного інтелекту. Державний університет інформатики і штучного інтелекту, Донецьк, 2009.
Дисертаційна робота присвячена вирішенню завдань, пов'язаних з сучасною теоретичною і прикладною проблемою створення методів та алгоритмів для систем розпізнавання фонограм музичних творів та музики взагалі.
В роботі створено нову інформаційну технологію аналізу і обробки послідовності музичних звуків, що дозволяє для оцифрованого запису звукового сигналу отримати відповідний нотний текст. Ця інформаційна технологія спирається на низку методів та методик звуковисотного та темпоритмічного розпізнавання послідовності музичних звуків.
В роботі запропоновано модифіковану методику ВПФ визначення квазіперіоду основного тону музичного звуку, яка за рахунок врахування властивостей сум змінних різниць дозволяє підвищити точність визначення квазіперіоду основного тону та зменшити обчислювальну складність оригінальної методики ВПФ. На базі модифікованої методики ВПФ розроблено методику визначення моменту зміни квазіперіоду музичного звуку в сигналі в реальному масштабі часу за умови наявності апріорної інформації про очікувану послідовність змін. Також розроблено метод визначення основних частотних компонент звукового сигналу, який використовує результати аналізу як в амплітудно-частотній, так і в амплітудно-часовій області. Метод забезпечує значне зростання точності отриманих результатів для музичних звуків. Як засіб ще більшого покращення точності отриманих результатів визначення квазіперіоду основного тону та основних частотних компонент музичного звуку запропоновано методику апостеріорної фільтрації цих результатів.
Зазначені методи та методики забезпечують базу для вирішення завдання звуковисотного розпізнавання послідовності музичних звуків, але в роботі також розглянуто і завдання темпоритмічного розпізнавання. По-перше, покращено методику розпізнавання тривалостей за рахунок використання двохрівневого класифікатора, на першому рівні якого відбувається грубе розпізнавання тривалостей, а на другому корекція результатів грубого розпізнавання за рахунок мінімізації кількості синкоп за умови наявності інформації про загальні ритмічні характеристики розпізнаваної послідовності музичних звуків. По-друге, запропоновано методику визначення загальних ритмічних характеристик послідовності тривалостей за рахунок роботи з ритмічно однаковими фрагментами максимальної довжини та мінімізації кількості синкоп. Окрім того, розроблено методику керування темпом відтворення акомпанементу у відповідності до змін темпу, що спостерігаються в партії соліста.
Обгрунтованість та достовірність отриманих наукових результатів перевірено низкою чисельних досліджень, проведених над алгоритмами, побудованими на основі розроблених методів та методик.

1. У ході виконання роботи було здійснено аналіз існуючих методів автоматичного розпізнавання фонограм музичних творів, що дозволило визначити актуальність розробок в даній області і виконати постановку завдання дослідження.
2. Модифіковано методику ВПФ визначення квазіперіоду основного тону сигналу в амплітудно-часовій області через врахування властивостей сум змінних різниць. Це дозволило підвищити точність визначення квазіперіоду основного тону для музичних звуків на 3-5% і, в той же час, знизити обчислювальну складність у порівнянні з оригінальною методикою.
3. Розроблено метод і алгоритм визначення основних частотних компонент музичного звуку на основі інтеграції методів амплітудно-часового і амплітудно-частотного аналізу, що дозволяють підвищити точність визначення основних частотних компонент у порівнянні з методами, що використовують лише аналіз в амплітудно-частотній області. Застосування такого підходу дозволило збільшити точність отримуваних результатів на 5-10%.
4. Розроблено методику і алгоритм фільтрації значень квазіперіодів, що дозволяє в значній мірі підвищити точність результатів визначення частотного складу звукового сигналу: після фільтрації результатів визначення квазіперіоду основного тону або основних частотних компонент музичного звуку точність отримуваних результатів збільшується на 3-7%.
5. На базі модифікованої методики ВПФ розроблено методику і алгоритм визначення моменту зміни квазіперіоду основного тону в сигналі в реальному масштабі часу за умови наявності апріорної інформації про очікувані зміни. При збереженні точності отримуваних результатів на рівні модифікованого алгоритму ВПФ, необхідну кількість операцій було зменшено на порядок.
6. Формалізовано з позицій теорії розпізнавання образів задачу розпізнавання тривалостей як ритмічних одиниць, що дозволило застосувати методи розпізнавання образів для побудови дворівневого розпізнавача тривалостей. Розроблено методику і алгоритм грубого розпізнавання тривалостей, а також методику і алгоритм корегування результатів грубого розпізнавання тривалостей із врахуванням знань про загальні ритмічні характеристики аналізованої послідовності музичних звуків.
7. Вдосконалено методику і розроблено алгоритм апостеріорного визначення загальних ритмічних характеристик послідовності музичних звуків за рахунок роботи з ритмічно однорідними фрагментами аналізованої послідовності і мінімізації кількості синкоп, що дозволило зменшити кількість необхідної апріорної інформації.
8. Розроблено методику і алгоритм корекції темпу відтворення акомпанементу із врахуванням змін темпу, що відбуваються в партії соліста.
9. На основі отриманих методів, методик і алгоритмів створено інформаційну технологію аналізу і обробки послідовності музичних звуків.