計(jì)算機(jī)程序?qū)⒛X信號(hào)轉(zhuǎn)換為合成語(yǔ)音
一個(gè)新的計(jì)算機(jī)程序翻譯大腦信號(hào)到語(yǔ)言。該技術(shù)跟蹤傳遞到口腔內(nèi)和口腔周圍肌肉的電子信息,以解碼大腦試圖說(shuō)出的內(nèi)容。需要進(jìn)一步的測(cè)試,但開(kāi)發(fā)人員說(shuō)它可以用來(lái)設(shè)計(jì)腦植入物,以幫助中風(fēng)或腦部疾病的人溝通。
“我們希望創(chuàng)造能夠直接從人類大腦活動(dòng)中再現(xiàn)語(yǔ)音的技術(shù),” 加州大學(xué)舊金山分校的神經(jīng)外科醫(yī)生Edward Chang在新聞發(fā)布會(huì)上表示。“這項(xiàng)研究證明了這是可能的原則。”他和他的同事們今天(4月24日)在“ 自然”雜志上描述了這一結(jié)果。
該技術(shù)具有高度侵入性,依賴于放置在大腦深處的電極。因此,到目前為止,僅對(duì)5名患有癲癇的人進(jìn)行了測(cè)試,他們已將電極作為治療的一部分。這些人在測(cè)試期間可以 - 并且確實(shí)說(shuō)話,這使計(jì)算機(jī)能夠計(jì)算出相關(guān)的大腦信號(hào)??茖W(xué)家現(xiàn)在必須檢查它是否適用于不會(huì)說(shuō)話的人。
荷蘭烏得勒支大學(xué)醫(yī)學(xué)中心的神經(jīng)科學(xué)家尼克拉姆齊說(shuō),這可能會(huì)更加困難,他們研究大腦植入物,幫助鎖定綜合癥患者溝通,盡管他們的肌肉普遍癱瘓。 “你是否能夠從不能說(shuō)話的人那里獲得足夠的大腦數(shù)據(jù)來(lái)構(gòu)建你的解碼器仍然是一個(gè)懸而未決的問(wèn)題,”但他說(shuō)這項(xiàng)研究“優(yōu)雅而精致”,結(jié)果顯示出前景。“我已經(jīng)跟蹤他們的工作了幾年,他們真的明白他們?cè)谧鍪裁础?rdquo;
言語(yǔ)是人體最復(fù)雜的運(yùn)動(dòng)行為之一。它需要精確的神經(jīng)控制和肌肉在嘴唇,舌頭,下頜和喉部的協(xié)調(diào)。為了解碼這項(xiàng)活動(dòng),當(dāng)志愿者大聲朗讀一系列句子時(shí),科學(xué)家們使用植入電極跟蹤大腦發(fā)出的信號(hào)。計(jì)算機(jī)算法使用預(yù)先存在的聲道如何移動(dòng)以產(chǎn)生聲音的模型來(lái)分析這些指令。然后,第二個(gè)處理階段將這些預(yù)測(cè)的運(yùn)動(dòng)轉(zhuǎn)換為口語(yǔ)句子。
Chang說(shuō),這種兩階段的方法 - 將大腦活動(dòng)轉(zhuǎn)化為運(yùn)動(dòng)運(yùn)動(dòng),然后將運(yùn)動(dòng)運(yùn)動(dòng)轉(zhuǎn)化為單詞 - 產(chǎn)生的失真小于試圖直接將大腦信號(hào)轉(zhuǎn)換為語(yǔ)音。當(dāng)團(tuán)隊(duì)向聽(tīng)眾播放101個(gè)合成句子并要求他們識(shí)別25個(gè)單詞列表中的口語(yǔ)單詞時(shí),他們準(zhǔn)確地轉(zhuǎn)錄了43%的單詞。
在約翰斯·霍普金斯大學(xué)(Johns Hopkins University)從事類似系統(tǒng)工作的研究生秦萬(wàn)拉巴尼(Qinwan Rabbani)已經(jīng)聽(tīng)過(guò)合成句子并說(shuō)他們很好,特別是因?yàn)橛?jì)算機(jī)只有十幾分鐘的講話要分析。他說(shuō),解碼語(yǔ)音的算法通常需要“數(shù)天或數(shù)周”的錄音。
控制語(yǔ)音的大腦信號(hào)比那些習(xí)慣于移動(dòng)手臂和腿部更容易解碼,更容易受到情緒狀態(tài)和疲勞的影響。拉巴尼說(shuō),這意味著最終應(yīng)用于癱瘓患者的合成語(yǔ)音系統(tǒng)可能僅限于一組有限的單詞。
推薦內(nèi)容
-
31省區(qū)市新增無(wú)癥狀感染者161例 全國(guó)疫情最新情況
31省區(qū)市新增無(wú)癥狀感染者161例,全國(guó)疫情最新情況怎么樣?如果不是定期核酸檢測(cè),后果不堪想象,現(xiàn)在檢測(cè)的速度很快,一定能及時(shí)把病毒消
-
12月5日咸陽(yáng)、廣州疫情消息公布 昨日咸陽(yáng)、廣州疫情與同一入
咸陽(yáng)、廣州疫情與同一入境隔離酒店相關(guān),酒店已升為中風(fēng)險(xiǎn)地區(qū)。據(jù)消息顯示,12月4日凌晨,廣州通報(bào)白云區(qū)一入境隔離酒店工作人員在例行核
-
通過(guò)尾部捕獲組蛋白 一種新的探針 用于跟蹤活細(xì)胞中組蛋白的修飾
東京工業(yè)大學(xué)的科學(xué)家開(kāi)發(fā)出一種靈敏的熒光抗體探針,專門檢測(cè)活細(xì)胞中組蛋白H4中賴氨酸20的單甲基化。該研究具有未來(lái)意義,可用于監(jiān)測(cè)單個(gè)
-
12月14日河南鄭州疫情最新數(shù)據(jù)公布 河南昨日新增境外輸入無(wú)癥
河南昨日新增境外輸入無(wú)癥狀感染者轉(zhuǎn)確診病例1例。那么,對(duì)于河南疫情的這個(gè)話題,今天的你是否也在關(guān)注著?具體什么情況?下面跟小編一起來(lái)
-
不要誤解“抗糖化”? 別輕易聽(tīng)信
不要誤解“抗糖化”? 別輕易聽(tīng)信信息時(shí)代的來(lái)臨,信息被大眾獲取的途徑多種多樣,但其中很多消息還沒(méi)被證實(shí)真實(shí)性就大范圍傳播開(kāi)了。...
-
緬甸專家批評(píng)美國(guó)和北約激化俄烏沖突
緬甸專家批評(píng)美國(guó)和北約激化俄烏沖突 俄烏沖突持續(xù)至今,以美國(guó)為首的北約國(guó)家持續(xù)向?yàn)蹩颂m輸送大量武器,并不斷加碼對(duì)俄羅斯的制裁。...