Тернов А. С. Методи та комп'ютерні засоби дослідження мімічних проявів на обличчі людини для відтворення і розпізнавання жестової мови.

English version

Дисертація на здобуття ступеня кандидата наук

Державний реєстраційний номер

0413U001971

Здобувач

Спеціальність

  • 05.13.23 - Системи та засоби штучного інтелекту

14-03-2013

Спеціалізована вчена рада

К 11.052.08

Анотація

Дисертацію присвячено розробці методів, моделей, алгоритмів та комп'ютерних засобів для відтворення на тривимірній моделі голови людини мімічного каналу передачі інформації жестової мови та розпізнавання емоційного і артикуляційного стану обличчя людини на фотографічних і відео зображеннях. В роботі розроблено загальну математичну модель станів губ на основі неоднорідних раціональних B-сплайнів для системи навчання правильній артикуляції. Удосконалено об'єктно-елементну модель синтезу анімації мовленнєвого процесу для реалістичної анімації емоційно-артикуляційного каналу носія жестової мови з використанням множини базових станів тривимірної моделі голови людини. Розроблено метод синхронізації анімаційних процесів жестикуляції та артикуляції з врахуванням особливості передачі інформації жестовою мовою при відсутності звукового сигналу, забезпечивши в такий спосіб природність процесу. На основі запропонованих методів та алгоритмів розроблено оригінальну мультимедійну технологію для аналізу міміки губ і емоційних мімік обличчя людини. Результати дисертаційної роботи отримані у галузі створення предметно-орієнтованих прикладних інформаційних комп'ютерних технологій для розроблення систем комунікації чуючих людей і людей з вадами слуху та впроваджено у вигляді програмного забезпечення для навчання української жестової мови в навчальний процес у спеціалізованій школі-інтернаті для дітей з вадами слуху.

Файли

Схожі дисертації