A „HANGOK TANÁTÓL” A BESZÉDTECHNOLÓGIÁIG Gósy Mária MTA Nyelvtudományi Intézet, Kempelen Farkas Beszédkutató Laboratórium

A FONETIKA TÖRTÉNETÉBŐL Az első teljes magyar hangtan: Bél Mátyás (1718) munkája, terjedelme: 7 oldal! Bél Mátyás „modern” megállapításai: a hangokat másként ejtjük a szó különböző helyein; a hangoknak stilisztikai sajátosságuk van; némely mássalhangzónk összetett; a kiejtés számos tényező függvénye.

A FONETIKA TÖBB TUDOMÁNY HATÁRTERÜLETÉN

A BESZÉD

KÉT ALAPKÉRDÉS MI A KAPCSOLAT A FONETIKA ÉS A BESZÉDTECHNOLÓGIA KÖZÖTT? MI A KAPCSOLAT AZ ALKALMAZOTT FONETIKA ÉS A BESZÉDTECHNOLÓGIA KÖZÖTT?

fonetika alkalmazott fonetika beszédtechnológia beszélő felismerése beszédzavarok beszédtechnika fonológia beszéd- hallás fonetika alkalmazott fonetika beszédtechnológia BESZÉD FELHASZ- NÁLÁS beszédfelismerés digitális jel- feldolgozás beszéd- szintézis beszélőazonosítás (verifikálás) zajtisztítás

FONETIKA, BESZÉDTECHNOLÓGIA, ALKALMAZÁSOK beszélő felismerése fonetika alkalmazott fonetika beszédtechnológia beszéd- hallás beszéd- szintézis

A MAGYAR BESZÉD-TECHNOLÓGIA KEZDETEI az első működő beszélőgép: Kempelen Farkas (1791) kísérlet magánhangzók mesterséges felismerésére: Tarnóczy (1950-es évek) Kossuth hangjának „megtisztítása” analóg beszédjel digitális átalakítása: az első számítógépek

MAGÁNHANGZÓK HANGSZÍNKÉPEI á a o ü e ö i u o a á i é e ü ö Bal oldalon: Kempelen gépének hangjai Jobb oldalon: ember ejtette hangok

rajzolt rezgésképből beszéd „HANGFANTÓMOK”: 1939 Egy magyar napilap Tudomány és technika rovata hírt ad angol és német mérnökök mesterségesbeszéd-előállításáról rajzolt rezgésképből beszéd

HANGELEMEK „FESTÉSE” A MEGSZÓLALTATÁSHOZ

AZ ELSŐ MAGYAR FORMÁNS-SZINTETIZÁTOR (1983)

A KORSZERŰ BESZÉD-SZINTÉZIS ALAPELVE

A BESZÉDSZINTÉZIS EREDMÉNYEI Jól érthető, azonnal megszólaltatható folyamatos beszéd. A FELHASZNÁLÁS LEHETŐSÉGEIBŐL: oktatás beszédrehabilitáció vakok számítógép-használata internetes kommunikáció távközlési szolgáltatások ipari alkalmazások

A BESZÉDSZINTÉZIS A HALLÁS VIZSGÁLATÁBAN (1986–) A beszédalapú hallásvizsgálat előnyei: egyszerű, megbízható, gyors, gyermekek szűrésére kiváló (8000 Hz-ig) Természetes beszéddel nem megoldható, a többletinformációk miatt Megoldás: célzottan fejlesztett mesterséges beszéd

A GOH BESZÉDHALLÁS-SZŰRŐ

A GOH-KÉSZÜLÉK

A GOH EREDMÉNYEI a hallás zavarának jelzése információt ad a gyermek általános beszédészleléséről a szűrést védőnő, óvónő, logopédus, tanító végezheti 3-10 éves gyerekek tömeges szűrésének lehetősége az országban több ezer készüléket használnak

A HALLÁSRA ÉPÜLŐ ÉSZLELÉSI FOLYAMATOK FONOLÓGIAI SZINT FONETIKAI SZINT AKUSZTIKAI SZINT hallás tárolás

ÉSZLELÉS, MEGÉRTÉS GMP FUNKCIÓI: a beszéd értése tiszta kiejtés szókincsbővülés olvasástanulás írástanulás helyesírás összes tanulási folyamat GMP Beszédészlelési és beszédmegértési diagnosztika 3-12 éveseknek

KÉSŐN BESZÉLNI KEZDŐK

OLVASÁSI NEHÉZSÉGGEL KÜZDŐK elvárt

ÉSZLELÉSI TELJESÍTMÉNY EGYOLDALI NAGYOTHALLÁS ESETÉN elvárt

AZ AJAKARTIKULÁCIÓ KÍSÉRLETI VIZSGÁLATÁNAK KEZDETEI Otto Jespersen: 1904

PHANTOPHON: SIKETEK BESZÉDTANÍTÁSÁHOZ (1934)

HALLÁSSÉRÜLTEK KORSZERŰ BESZÉDTANÍTÁSA

HALLÁSSÉRÜLTEK BESZÉD-TANÍTÁSÁNAK EREDMÉNYEI

19. SZÁZAD: A BESZÉD RÖGZÍTÉSÉNEK KEZDETEI Edison első fonográfja 20. SZÁZAD: A BESZÉLŐ AZONOSÍTÁSA A RÖGZÍTETT BESZÉDE ALAPJÁN

UJJLENYOMAT – HANGLENYOMAT? A TUDOMÁNYOS KÉRDÉS: A beszéd oly mértékben jellemző az emberre, hogy a beszéde alapján azonosítható a beszélő személy? ÁLTALÁNOS VÁLASZ: Miért ne lenne? Felismerjük barátainkat, ismerőseinket, például telefonon át is...

A BESZÉLŐ VISZONYULÁSA SZEMÉLYÉNEK AZONOSÍTÁSÁHOZ  ÉRDEKE AZ AZONOSÍTÁS  BIZTONSÁGI RENDSZEREK, LABORATÓRIUMOK, EGYES MUNKAHELYEK STB.  INFORMÁCIÓKÉRÉS: BANKSZÁMLÁK, TELEFONSZÁMOK, ADATSZOLGÁLTATÁS STB.  NEM ÉRDEKE AZ AZONOSÍTÁS BŰNÜGYEK

A BESZÉLŐ SZEMÉLYAZONOSÍTÁSÁNAK PROBLÉMÁJA A beszéd akusztikai szerkezete beszélőnként változik: „ún. beszélők közötti különbségek”. Ugyanazon beszélő esetében is változik a helyzettől függően: „egy beszélőn belüli különbségek”.

HÁNY BESZÉLŐ BESZÉDÉRŐL KÉSZÜLTEK AZ ÁBRÁK? Egy beszélő vagy Egy beszélő vagy kettő? kettő?

A BESZÉD FONETIKAI VIZSGÁLATA BESZÉLŐAZONOSÍTÁSKOR Beszédhangok összevetése Beszéddallam, hangsúly, beszédtempó, szünetek Megakadásjelenségek Egyéni artikulációs sajátosságok Műszeres és szubjektív elemzések

A BESZÉLŐAZONOSÍTÁS LEHETSÉGES EREDMÉNYEI  ~  NAGY VALÓSZÍNŰSÉGGEL AZONOS  ?  AZ AZONOSSÁG NEM BIZONYÍTOTT, DE NEM KIZÁRHATÓ  ≠  AZ AZONOSSÁG KIZÁRHATÓ AZ AZONOSÍTÁS ELVÉGZÉSE LEHETETLEN

A JÖVŐ HÁROM MONDATBAN 1. BESZÉDÜNK TITKAI CSAKNEM VÉGTELENEK... 2. A BESZÉDTECHNOLÓGIA MIND TÖBB ISMERETET NYÚJT A GYAKORLATNAK. 3. A KUTATÁSI EREDMÉNYEK ALKALMAZÁSAI SZINTE KORLÁTLANOK...

KÖSZÖNÖM A FIGYELMÜKET!