Artikkelit

Tutkijaryhmä käytti puheentunnistuksessa synteettistä puhegeneraattoria, jonka matki potilaan puhetta ennen vammautumista.

Kalifornian yliopistossa Yhdysvalloissa on onnistuttu synkronoimaan puhe aivosignaaleihin ensimmäistä kertaa historiassa. Tekoälyä hyödyntäneessä mullistavassa läpimurrossa onnistuttiin lisäksi muuttamaan kyseiset aivosignaalit tekstiksi noin 80 sanan minuuttivauhdilla.

Amerikkalaisyliopiston tutkimus julkaistiin vastikään arvostetussa Nature-lehdessä. Tutkijaryhmä toivoo, että onnistuminen johtaa kyseisen teknologian hyväksymiseen viranomaisten toimesta, jolloin teknologiaa voitaisiin käyttää puhekyvyn palauttamiseen jo lähitulevaisuudessa.

Aikaisemmin samainen tutkijaryhmä oli onnistunut palauttamaan puhekyvyn miehelle, joka oli kokenut aivoinfarktin vuosia aikaisemmin. Uusimmassa tutkimuksessa mentiin askeleen pidemmälle: tutkijat onnistuivat paitsi aivosignaalien muuttamisessa puheeksi ja tekstiksi, myös liikuttamaan potilaan kasvoja keskustelun aikana.

Miten tässä sitten onnistuttiin? Tutkijat asensivat erittäin ohuen, 253 elektrodia sisältäneen implantin potilaan aivoihin niille alueille, jotka ovat kriittisessä roolissa puheentuottamisen kannalta. Elektrodien tehtävänä oli ”kaapata” aivosignaalit, jotka ohjaisivat terveen ihmisen kasvonilmeitä puheentuottamisen aikana. Päähän asennettiin liitäntä, josta johdettiin dataa kaapelin kautta tietokoneeseen. Viikkojen ajan tekoälyä opetettiin tunnistamaan potilaan puhetta tuottavia aivosignaaleja.

Tekoälylle opetettiin erilaisia, äänellä toistettuja lauseita 1024 sanan laajuisesta keskusteluun painottuvasta sanastosta niin kauan, että tietokone oppi tunnistamaan, miten puhe syntyy aivoissa ja miten signaalit yhdistyvät oikeisiin ääniin eli kuultuun puheeseen. Äänen muodostamisessa käytettiin synteettistä puhegeneraattoria, joka matki potilaana olleen naisen puhetta ennen tämän vammautumista. Ääni saatiin naisen puheesta, jonka hän oli pitänyt omissa häissään.

Tutkimusta varten ryhmä loi dekooderin, jonka avulla tietokone pystyi opettelemaan sanoja kolme kertaa tavallista nopeammin.

Tämän jälkeen tutkimusryhmä loi avatarin, joka simuloi kasvolihasten liikkeitä puhumisen aikana. Avatarin avulla potilaan puhe onnistuttiin välittämään ymmärrettävästi ja samalla siirtämään kasvonliikkeet animoituun hahmoon.

Seuraavaksi tutkijat pyrkivät kehittämään langattoman version, joka mahdollistaisi saman teknologian käyttämisen ilman, että potilasta liitetään fyysisesti tietokoneeseen.

Lähde: Science Daily

Hei! Luitko jo tämän?

Uusi video: Esittelyssä Nokia Arenan kulunvalvontajärjestelmä