Графический интерфейс для обработки речевогосигнала

Викулов Е. И.

Руководитель: Барабанов А. Е.

CSC, осень 2016

Графический интерфейс для обработки речевого сигнала 1 / 13

Цель проекта

Создание удобной оболочки над инструментами анализа речи

Графический интерфейс для обработки речевого сигнала 2 / 13

Цель проекта

Возможность изменения длительности аллофонов

Графический интерфейс для обработки речевого сигнала 3 / 13

Цель проекта

Модификация аллофонов

Графический интерфейс для обработки речевого сигнала 4 / 13

Что было сделано до меня

Графическая составляющаяВывод графиковВзаимодействие с интерфейсом

Графический интерфейс для обработки речевого сигнала 5 / 13

Вставка и удаление фреймов

Удаленные фреймы сохраняютсяВставленный фрейм является либо копией некоторого фрейма, либоодним из удаленных ранее

Графический интерфейс для обработки речевого сигнала 6 / 13

Вставка и удаление фреймов

Удаленные фреймы сохраняютсяВставленный фрейм является либо копией некоторого фрейма, либоодним из удаленных ранееГрафики имеют сложную структуру

Графический интерфейс для обработки речевого сигнала 7 / 13

Построение пользовательских кривых

Графики строятся по проставленным точкамТочки можно перетаскивать и удалятьГрафики энергии строятся на заданном отрезке

Графический интерфейс для обработки речевого сигнала 8 / 13

Согласование шкал базового и модифицированногосигнала

При изменении интонации или добавления/удаления фреймов длинасигнала изменяетсяВ памяти хранится два типа графиков: в базовой и модифицированнойшкале

Графический интерфейс для обработки речевого сигнала 9 / 13

Согласование шкал базового и модифицированногосигнала

При изменении интонации или добавления/удаления фреймов длинасигнала изменяетсяВ памяти хранится два типа графиков: в базовой и модифицированнойшкале

Графический интерфейс для обработки речевого сигнала 10 / 13

Согласование шкал базового и модифицированногосигнала

При изменении интонации или добавления/удаления фреймов длинасигнала изменяетсяВ памяти хранится два типа графиков: в базовой и модифицированнойшкалеТребуется корректное отображение обоих графиковПри изменениях обновления происходят локально, что обеспечиваетэффективность

Графический интерфейс для обработки речевого сигнала 11 / 13

Синтез речи

Заданный текст составляется из аллофонов из базыНа данный момент интонация и энергия берется из звукового файлаАвтоматически подгоняются длительностиНа основе перечисленных данных синтезируется сигнал

Графический интерфейс для обработки речевого сигнала 12 / 13

Технологии

Все реализовано на MatlabGit

Графический интерфейс для обработки речевого сигнала 13 / 13