A hallássérültek internetes beszédfejlesztéséért

A hallássérültek beszédmegértését és beszédtanulását az eddig ismert módszereknél hatékonyabban elősegítő összetett rendszert fejleszt a Debreceni Egyetem Fül- Orr- Gégészeti és Fej- Nyaksebészeti Klinikája a Miskolci Egyetemmel együttműködve. Az „Alap- és alkalmazott kutatások hallássérültek internetes beszédfejlesztésére és az előrehaladás objektív mérésére" című pályázat 481 millió forint támogatást nyert el a TÁMOP projekt keretében.

A hallássérültek, siketek rosszul, vagy egyáltalán nem értik a beszédet és rosszul beszélnek. A rosszul értés csökkenthető, ha a beszédet a szájról olvasásnál markánsabban segítheti a látás. Ugyanez érvényes a beszéd minőségének javítására, hisz ekkor a helyes beszédet és a hallottat a látás segítségével össze lehet hasonlítani, és folyamatosan korrigálni. A projekt két, együtt is alkalmazható eljárást kínál a beszéd vizualizációjára.

A Debreceni Egyetemen kidolgozott audiovizuális transzkóder a hang vizualizálására, és a Miskolci Egyetemen kifejlesztett úgynevezett „beszélő fej", azaz az artikulációt megjelenítő háromdimenziós fejmodell képezi az alapját a most induló fejlesztéseknek. Az új technológia egy komplex oktatási rendszerbe foglalja a beszédfolyamat audio-vizuális megjelenítését, valamint a beszéd hangképeinek és artikulációjának vizuális megjelenítését. A tervezett modell azáltal, hogy a szavak helyes artikulációját is megmutatja, lényegesen hatékonyabb a jelenleg alkalmazott rendszereknél.

A kifejleszteni kívánt technológia részben nyelvfüggetlen, részben könnyen adaptálható idegen nyelvekre. A rendszer terjesztése az interneten történik, szabad hozzáférésű alkalmazásban.

A kutatás elméleti alapja: az agyban az akusztikus és vizuális modalitás optimális összekapcsolódása teszi lehetővé a legjobb beszédérthetőséget. A hallássérültek esetében minél erősebb az akusztikus jel torzulása, annál inkább támaszkodnak a vizuális jelre. Várakozásunk szerint ez akkor is teljesül, ha a vizuális jel nem a beszélő képe, hanem a hang vizuális átirata. Ennek igazolása az agyi plaszticitás bizonyításának egy újabb jelentős állomása lenne – tájékoztatott dr. Sziklai István egyetemi tanár, a projekt szakmai vezetője.

A projektben 3 debreceni és 5 miskolci kutatócsoport vesz részt.