Naudodami technologijas smegenų veiklai, dirbtiniam intelektui ir kalbos sintezatoriui nuskaityti, Kolumbijos universiteto (JAV) mokslininkai sukūrė prietaisą, galintį paversti žmogaus mintis artikuliuota kalba. Tyrimų išvados, paskelbtos mokslinėse ataskaitose, yra svarbus žingsnis gerinant smegenų ir kompiuterio sąsajas. Ateityje tokiais prietaisais galės naudotis žmonės, praradę gebėjimą kalbėti dėl sužeidimo ar ligos.
- „Salik.biz“
Norėdami sukurti įrenginį, apjungiantį kalbos sintezatoriaus ir dirbtinio intelekto galimybes, tyrimo autorius, neurologas Nima Mesgarani ir jo kolegos atkreipė dėmesį į naujausius giliųjų mašinų mokymosi ir kalbos sintezės technologijų pasiekimus. Jų darbo rezultatas - dirbtinio intelekto pagrindu sukurtas vokaderis, galintis gana tiksliai išaiškinti smegenų veiklą tiesiai iš klausos žievės, o vėliau išversti ją į suprantamą kalbą. Darbo autoriai pažymi, kad kalba šiuo atveju yra labai kompiuterizuota, tačiau dažniausiai žmonės gali atpažinti žodžius.
Kūrėjų teigimu, naujasis įrenginys, naudojamas atkuriamai kalbai atkurti, yra pagrįstas ta pačia technologija, naudojama skaitmeniniuose pagalbininkuose, tokiuose kaip „Alexa“, „Siri“ir „Google Assistant“.
Pirmiausia ekspertai apmokė voką, kaip teisingai interpretuoti žmogaus smegenų veiklą. Tam mokslininkai pakvietė penkis savanorius, kuriems buvo gydoma epilepsija, dalyvauti eksperimente. Visų penkių jų elektrodai buvo implantuoti į klausos žievę, kad būtų galima skaityti elektroencefalogramą.
„Mes paprašėme epilepsijos pacientų, kuriems jau atliekama smegenų operacija, paklausyti sakinių, kuriuos sako skirtingi žmonės. Kartu mes analizavome pacientų smegenų veiklos modelius. Vokoderis buvo mokomas pagal gautus neuroninius modelius “, - aiškina Mesgarani.
Pacientų buvo paprašyta klausytis įrašų, kuriuose aktoriai skaitė skaičių seką nuo 0 iki 9. Tuo pačiu metu mokslininkai įrašė smegenų signalus, o po to perduodavo juos per vokoderį, kurio signalai buvo ištaisyti, kad padidintų aiškumą, neuroniniu tinklu, kuris analizavo paties vokalo garsą, kuris skleidė garsus reaguodamas į šiuos signalus. Dėl to buvo galima išgirsti robotizuotą balsą, kartojantį ištartų skaičių seką. Rezultatams įvertinti mokslininkai pakvietė 11 žmonių, turinčių puikią klausą.
„Paaiškėjo, kad žmonės gali atpažinti žodžius maždaug 75% laiko, tai yra žymiai pranašesnis už bet kokius ankstesnius bandymus. Jautrus vokoderis ir galingi neuroniniai tinklai sukuria garsus, kurių pacientai klausėsi nepaprastai tiksliai “, - komentuoja Mesgarani.
Reklaminis vaizdo įrašas:
Ateityje Mesgarani komanda ketina išmokyti neuroninį tinklą tarti sudėtingesnius žodžius, frazes ir net ištisus sakinius. Po to jie nori sukurti implantą, kuris galėtų paversti žmogaus mintis visa kalba.
„Pavyzdžiui, jei implanto savininkas galvoja:„ Man reikia stiklinės vandens “, mūsų sistema skaito smegenų signalus ir juos paverčia kalba. Tai suteiks galimybę kiekvienam, praradusiam galimybę kalbėti dėl traumos ar ligos, bendrauti su aplinkiniu pasauliu “, - priduria L. Mesgarani.
Nikolajus Khizhnyak