A beszédhangok (=akusztikum) a beszélőszervek (=artikuláció) koordinált mozgásának eredményéből állnak elő. A szakirodalomban különböző módszerek állnak rendelkezésre az artikulációs mozgások és a keletkező beszéd kapcsolatának modellezésére. A fordított problémát akusztikum-artikuláció inverziónak is nevezik, azaz a beszédjel bemenetből szeretnénk artikulációs mozgásra vonatkozó információt előállítani. A hallgató feladata a meglévő algoritmusok vizsgálata és 2D ultrahang segítségével új, mély neurális háló alapú módszerek kidolgozása. Korábbi kutatásunk a témában: https://arxiv.org/abs/1904.06083 Javasolt programozási nyelvek: Python.

Speech sounds (=acoustics) are produced as the coordinated movement of the speaking organs (=articulation). There are several available methods to model the relation of articulatory movements and the resulting speech. The reverse problem is often called as acoustic-articulatory inversion. The task of the student is to investigate available algorithms and develop new methods based on 2D ultrasound using modern machine learning methods (e.g. deep neural networks). Our previous research: https://arxiv.org/abs/1904.06083 Suggested programming languages: Python.