В статье описывается система, которая может автоматически синхронизировать полифонические музыкальные звуковые сигналы с соответствующими текстами песен. Метод выравнивания Витерби, используемый для синхронизации одноголосный речевых сигналов и соответствующих текстовых транскрипций с использованием уже существует, однако этот метод не может быть применен к вокалу на компакт-дисках, потому что вокал часто перекрывается звуками аккомпанемента. В дополнение к обычному методу уменьшения влияния аккомпанемента, разработаны четыре метода преодоления этой проблемы: метод обнаружения вокальной активности, метод построения надежных фонемных сетей, метод обнаружения щелевых звуков, и метод адаптации речевого распознавателя телефона для голосовых сегрегированных сигналов. Далее сообщается результат экспериментов для каждого из этих методов, а также описывается интерфейс воспроизведения музыки, который используется для синхронизации музыки и текстов.

• ВВЕДЕНИЕ
• 1.Система для автоматической синхронизации музыки и слов
  • 1.1.Снижение уровня аккомпанемента
  • 1.2.Обнаружение вокальной активности
  • 1.3. Использование глухих согласных на основе щелевых обнаружений
  • 1.4.Выравнивание Витерби
• 2. ЭКСПРЕРИМЕНТЫ
  • 2.1. Экспериментальные условия
  • 2.2. Оценка всей системы
  • 2.3. Оценка метода снижения шума аккомпанемента
  • 2.4. Оценка обнаружения вокальной активности, щелевого обнаружения и наполнительной модели
  • 2.5. Оценка векторных признаков для обнаружения вокальной активности
  • 2.6. Оценка метода адаптации
• 3. LYRIСSYNCHRONIZER: Интерфейс воспроизведения музыки с синхронизированным текстовым дисплеем
• Выводы
• СПИСОК ЛИТЕРАТУРЫ