Оценка геометрических искажений контуров изображений губ в системах визуального ввода информации


https://doi.org/10.15217/issnl684-8853.2017.4.2

Полный текст:


Аннотация

Постановка проблемы: чтение по губам является одним из способов извлечения данных о речи из видеоинформации. Существующие системы распознавания речи по изображениям губ достаточно эффективно работают при фронтальном расположении говорящего к видеокамере, т. е. когда на изображениях наблюдаются только линейные искажения, не приводящие к изменению формы губ. При расположении говорящего к видеокамере под углом наблюдаются нелинейные искажения. Форма губ при этом изменяется. Вопросы компенсации нелинейных искажений практически не рассмотрены. Цель: разработка алгоритма оценки геометрических искажений контуров губ говорящего, который позволит усовершенствовать существующие системы ввода речевой информации из видеоданных. Результаты: предложена методика оценки геометрических искажений контуров губ в системах визуального ввода информации. Оценка параметра геометрического искажения производится по результатам вычисления нормированного скалярного произведения наблюдаемого контура изображения губ говорящего с преобразованными контурами при варьировании параметра искажения. Практическая значимость: предложенный алгоритм оценки вида и параметра искажения контура позволяет повысить эффективность распознавания искаженных контуров изображений губ говорящего в системах визуального ввода речевой информации из видеоданных.

Об авторах

Р. Г. Хафизов
Поволжский государственный технологический университет
Россия


Т. В. Яранцева
Поволжский государственный технологический университет
Россия


Список литературы

1. Калиновский И. А., Спицин В. Г. Обзор и тестирование детекторов фронтальных лиц // Компьютерная оптика. 2016. Т. 40. № 1. С. 99-111. doi:10.18287/2412-6179-2016-40-1-99-111

2. Ковшов Е. Е., Завистовская Т. А. Система обработки движения губ человека для речевого ввода информации // Cloud of Science. 2014. T. 1. № 2. С. 279-291.

3. Солдатов С. А. Чтение по губам: распознавание контуров губ // Лаборатория компьютерной графики. http://www.ict.edu.ru/ft/002415/ioi2002sss.pdf (дата обращения: 10.01.2017).

4. Фурман Я. А., Кревецкий А. В., Передреев А. К. и др. Введение в контурный анализ и его приложение к обработке изображений и сигналов / под ред. Я. А. Фурмана. - М.: Физматлит, 2002. - 592 с.

5. Хафизов Р. Г., Яранцева Т. В., Охотников С. А. Система распознавания речи по контурам изображения губ// Проектирование и технология электронных средств. 2016. № 2. С. 13-17.

6. Хафизов Р. Г. Модель контура изображения со случайной формой // Компьютерная оптика. 2014. № 1. С. 127-130.

7. Хафизов Р. Г., Роженцов А. А., Хафизов Д. Г., Охотников С. А. Основы теории обработки непрерывных контуров изображений: монография / под общ. ред. Р. Г. Хафизова. - Йошкар-Ола: ПГТУ, 2015. - 172 с.

8. Хафизов Р. Г., Охотников С. А., Яранцева Т. В. Модели контуров изображений объектов при наличии геометрических искажений // Компьютерная оптика. 2016. Т. 40. № 3. С. 415-420. doi:10.18287/2412-6179-2016-40-3-415-420


Дополнительные файлы

Для цитирования: Хафизов Р.Г., Яранцева Т.В. Оценка геометрических искажений контуров изображений губ в системах визуального ввода информации. Информационно-управляющие системы. 2017;89(4):2-6. https://doi.org/10.15217/issnl684-8853.2017.4.2

For citation: Khafizov R.G., Yaranceva T.V. Estimation of Geometrical Distortions of Lip Contours in Visual Input Systems. Information and Control Systems. 2017;89(4):2-6. (In Russ.) https://doi.org/10.15217/issnl684-8853.2017.4.2

Просмотров: 88


Creative Commons License
Контент доступен под лицензией Creative Commons Attribution 4.0 License.


ISSN 1684-8853 (Print)
ISSN 2541-8610 (Online)