Штучний інтелект

Анотація: У науковій статті пропонується підхід до синтезу зовнішньої артикуляції для задачі комп’ютерного відтворення української жестової мови на тривимірній моделі голови людини без і з урахуванням особливості фонетичної структури словоформи. Підхід дозволяє відтворювати артикуляцію губ синхронно до анімації жесту з використанням бази морфів візем української мови. Наведена програмна реалізація алгоритму підтвердила працездатність запропонованого підходу.

Ключові слова:

Посилання:

1. Чистович Л.А. Речь. Артикуляция и восприятие / Л.А. Чистович, В.А. Кожевников. – М. ; Л. :Наука, 1965. – 242 с.
2. Beskow J. The Teleface project – disability, feasibility and intelligibility [Електронний ресурс] / [J. Beskow,M. Dahlquist, B.Granström, M. Lundeberg, T. Öhman]. – Режим доступу : http://www.speech.kth.se/~beskow/papers/fon97teleface.pdf.
3. Parke F. Computer Facial Animation / Frederic I. Parke, Keith Waters. – A.K. Peters Ltd. Wellesley, 2008. –454 p.
4. Beskow J. Trainable Articulatory Control Models for Visual Speech Synthesis / J. Beskow // Journal of SpeechTechnology. – 2004. – № 7(4) – P. 335-349.
5. Glauert J. Virtual Human Signing as Expressive Animation / [J. Glauert, R. Kennaway, R. Elliott, B.-J. Theobald] // In Symposium on Language, Speech and Gesture for Expressive Characters. – University of Leeds,2004. – P. 98-106.
6. Damien P. Phoneme-Viseme Mapping for German Video-Realistic Audio-Visual-Speech-Synthesis [Електронний ресурс] / P. Damien, N. Wakim, M. Egea – Режим доступу : http://www.sk.uni-bonn.de/forschung/ikp-arbeitsberichte-neue-folge/ikpab-nf11.pdf
7. Tümmler J. Avatare in Echtzeitsimulationen / Jörn Tümmler // Master thesis, Kassel University Press. –Germany, December. – 2007. – 192 p.
8. Verlinden M. Multimedia with Animated Sign Language for Deaf Learners / M. Verlinden , I. Zwitserlood,Frowein H. // In P. Kommers & G. Richards (Eds.), Proceedings of World Conference on EducationalMultimedia, Hypermedia and Telecommunications. – Montreal, Canada, 27 June 2005. – P. 4759-4764.
9. .Belkowska J. Audiovisual Synthesis of Polish Using Two- and Three-Dimensional Animation / J. Belkowska,A. Glowienko, K. Marasek // Computer vision and graphics: International conference, ICCVG 2004, Warsaw. –2004. – Vol. 32. – P. 1082-1087.
10. Kennaway R. Experience with and requirements for a gesture description language for synthetic animation /R. Kennaway // Lecture Notes in Computer Science. – 2004. – Vol. 2915. – P. 300-311.
11. Білодід І.К. Сучасна українська літературна мова / Білодід І.К. – К. : Ін-т мовознавства ім. О.О. Потебні ; Наукова думка, 1969. – 435 с.
12. Воскресенский А.Л. От звучащей речи к жестовой / А.Л. Воскресенский, Г.К. Халагин // Речевыетехнологии. – 2009. – № 1. – С. 99-106.
13. Флемінг Б. Методы анимации лица. Мимика и артикуляция / Б. Флемінг, Д. Доббс ; [пер. с англ.]. – М. :ДМК Пресс, 2002. – 336 с.
14. Жестова мова й сучасність: збірник наукових праць, випуск 3 / ред. кол., головний ред. В.В. Засенко. –К. : Педагогічна думка, 2008. – 192 с.
15. Крак Ю.В. Синтез зовнішнього артикуляційного процесу на обличчі людини для моделювання жестової мови / Ю.В. Крак, А.С. Тернов // Журнал обчислювальної та прикладної математики. – 2009. –№ 3(99). – С. 48-56.
16. Кривонос Ю.Г. Інформаційна технологія для моделювання української мови жестів / Ю.Г. Кривонос,Ю.В. Крак О.В. Бармак [та ін.] // Искусственный интеллект. – 2009. – № 3. – С. 186-197.
17. Gaglio S. A Java3D Talking Head for a Chatbot / [Salvatore Gaglio, Giovanni Pilato, Roberto Pirrone, OrazioGambino, Agnese Augello, Alessandro Caronia] // International Conference on Complex, Intelligent andSoftware Intensive Systems (CISIS 2008). – Barcelona, Spain, 4 – 7 March, 2008. – P. 709-714
18. Адамюк Н.Б. Програма-комплекс «Українська жестова мова» [Електронний ресурс] / Адамюк Н.Б. – Режим доступу : http://www.mon.gov.ua/main.php?query=education/average/programs_ gluh. – Назва з екрана.
19. Kohnert C.J. Lip Synchronization Using Linear Predicitve Analysis / C.J. Kohnert, Sudhanshu Kumar Semwal //Proceedings of the IASTED International Conference on SignalProcessing, Pattern Recognition, and Applications, SPPRA2006. – Innsbruck, Austria, 15 – 17 February, 2006. – P. 210-215.
20. Крак Ю.В. Информационная технология для автоматического чтения по губам украинской речи /Ю.В. Крак, О.В. Бармак, А.С. Тернов // Комп’ютерна математика. – 2009. – № 1. – C. 86-95.