重大突破！科學家成功將腦信號直接轉換為語音，特殊群體的福音
2020-07-06 南湖動力紐約哥倫比亞大學的神經工程師說：他們已經創建了一個系統，可以將人類的思想轉化為可識別的語音，這不僅會改變醫學，而且還將徹底改變交流。該成果已經發表在《Scientific Reports》上。
大腦思維行為研究所的研究人員通過監視受試者的大腦活動，能夠訓練人工智慧，將思維模式轉化為可理解的句子。研究員將患有疾病或外傷的言語患者視為最早採用這項技術的使用者。
將思想轉換為可理解的，可識別的語音。通過監視某人的大腦活動，該技術可以以前所未有的清晰度重建一個人聽到的單詞。利用語音合成器和人工智慧的力量的這一突破，可能會導致計算機與大腦直接通信的新方式。它還為幫助無法說話的人（例如患有肌萎縮性側索硬化症（ALS）或中風後康復的人）恢復與外界交流的能力奠定了基礎。
「與Mehta博士合作，我們要求已經接受腦部手術的癲癇患者聽不同人所說的句子，同時我們測量大腦活動的方式，」 Mesgarani博士說。「這些神經模式訓練了聲碼器。」接下來，研究人員要求這些患者聆聽說話者背誦0到9之間的數字，同時記錄可通過聲碼器運行的大腦信號。由聲碼器響應這些信號而產生的聲音，通過神經網絡進行了分析和清理，神經網絡是一種模擬生物大腦中神經元結構的人工智慧。
最終的結果是朗讀一系列數字的機器人聲音。為了測試錄音的準確性，Mesgarani博士及其團隊要求聆聽錄音並報告所聽到的內容。
Mesgarani博士說：「我們發現人們可以在大約75％的時間內理解並重複聲音，這遠遠超出了以往的任何嘗試。」 將新錄音與基於頻譜圖的較早嘗試進行比較時，清晰度的提高尤其明顯。「靈敏的解碼器和強大的神經網絡以驚人的準確度代表患者最初聽的聲音。」
Mesgarani博士和他的團隊計劃接下來測試更複雜的單詞和句子，他們希望對當一個人講話或想像中講話時發出的腦信號進行相同的測試。最終，他們希望他們的系統可以成為植入物的一部分，類似於某些癲癇患者所佩戴的植入物，從而將佩戴者的思想直接轉化為文字。
Mesgarani博士說：「在這種情況下，如果佩戴者認為&39;，我們的系統可以吸收由該想法產生的大腦信號，並將其轉變為合成的口頭言語。」 「這將改變遊戲規則。這將給任何因說話或受傷而失去發言能力的人提供重新與周圍世界聯繫的機會。」
期待這項研究的步伐加快，迅速進入臨床階段，未來造福更多人群，消滅交流障礙！
（一起了解科技前沿，關注：南湖動力）
相關焦點
-
重大突破！我國科學家成功研製全球神經元規模最大的類腦計算機
全球科學家們再次將目光瞄準到模仿生物大腦這個最初的夢想，通過模擬人腦結構與運算機制來發展新的計算技術，以期實現高能效與高智能水平的計算。生物大腦在與環境相互作用過程中能夠自然產生不同的智能行為，包括語音理解、視覺識別、決策任務、操作控制等，而且消耗的能量非常低。自然界中，很多神經元遠低於100萬的昆蟲就能做到實時目標跟蹤、路徑規劃、導航和障礙物躲避。 -
腦波直接轉語音,最強讀心術!
來，我們聽聽這段效果展示：腦電波還原你聽到的語音你一定聽出來了。沒錯，音頻內容就是用英語從0念到9。研究披露，普通人理解並重複這些聲音的準確率達到了75％，效果遠超以往同類研究。把大腦活動直接轉化成語音，這項研究潛力炸了。 -
華裔教授AI解碼腦電波,大腦所想直接合成文本或語音
3 月 30 日，《自然-神經科學》發表了美國加州大學舊金山分校華裔教授 Edward Chang 及同事開發的一款腦電波 AI 解碼器，能夠將大腦活動信號直接轉化為句子文本。於是，研究人員盤點了機器翻譯領域的最新進展，並利用這些方法訓練循環神經網絡，然後嘗試將神經信號直接映射為句子。 -
智能語音前沿技術——發音檢錯糾錯和語音轉換
語音技術包含：語音識別、語音合成、聲紋識別、語音評測、語音轉換等，其中發音檢錯糾錯和語音轉換技術近期有了新的突破。 發音檢錯糾錯 英語是當今世界上最為通用的語言，其重要性已為所有人深刻領會。由於英語的強勢地位，目前被超過100個國家作為外語教學的第一外語。 -
「腦活動翻譯機」誕生:將神經信號直接映射為句子
據英國《自然·神經科學》雜誌30日發表的一項腦機接口最新研究，美國科學家報告了一種能夠以較高準確率解碼神經活動，並將其翻譯為句子的機器翻譯算法。通過該算法，可將神經信號直接映射為句子。但一直以來，腦機接口在解碼神經活動方面只取得了有限的成功，其準確率依然遠遠低於解碼自然言語——過去的腦機接口只能解碼口頭詞語的片段或口頭詞組中不到40%的詞語。此次，美國加州大學舊金山分校科學家約瑟芬·馬金及其同事，盤點了機器翻譯領域的最新進展，並利用這些方法訓練循環神經網絡，將神經信號直接映射為句子。 -
腦科學,21世紀的新趨勢
那段時間，剛好高中生物在學大腦的構造，什麼神經中樞是人類活動的控制中心，還有化學信號和電信號之間的轉換。那時候的煩惱，就是每天都會做大量的夢，有時候一個十幾分鐘的午睡，能做六七個噩夢。然後我花了很多時間去了解夢的原理，還有夢跟記憶、右腦之間的關係。 -
科學家發明了一種「神經解碼器」,可以將大腦活動轉化為語言
隨著我們記錄腦電波的能力不斷提高，以及機器學習方法使解碼過程變得越來越容易，尋找將我們的思想轉換成機器可讀信號的方法是一個蓬勃發展的研究領域。最引人注目的用例之一是幫助那些因受傷或疾病而失聲的人重新說話。 -
科學家利用大腦電極實現將思想直接轉化為語言!
因為這項實驗的最終目標是將思想直接轉化為語言。在手術臺上，Mehta小心翼翼地在病人大腦的左側表面插入了一組扁平的微電極陣列，覆蓋了大腦聆聽演講和構思演講的區域。當一個人在聽心裡的聲音說他想說的話時(通常速度非常之快，所以幾乎是沒有意識的)，通過偷聽他大腦灰質中的電脈衝，然後將這些信號無線傳輸到電腦解碼，電極和系統的其餘部分就將會超越「運動」和「感覺」成為第一個「大腦-計算機接口」。 -
美科學家研製讀腦裝置 可將腦電波翻譯成語音
這種新穎獨特的讀腦術意味著未來有一天通過接入大腦電子信號，可以傾聽那些無法說話人群的思想。大腦以不同的語音來表達獨特的電子活動性，通過觀看人類大腦電子活動性圖形，科學家能夠揭曉該大腦活動性所表達的單詞，這是一項重大研究，能夠「傾聽」無法說話群體的思想。 -
歷史性突破:科學家或發現引力波直接信號
【每日科技網】 據國外媒體報導，先進的雷射幹涉引力波天文臺Ligo引力波探測器發現了可疑的信號，最新的報告顯示，科學家可能發現了引力波的直接證據，但是目前仍然在分析數據。 -
我國科學家成功研製類腦計算機，全球神經元規模最大
9月1日，億級神經元類腦計算機重大成果新聞發布會在杭州召開。浙江大學校長吳朝暉院士出席並講話。他表示，人工智慧浪潮正加快智能增強時代的到來，類腦計算機將成為未來計算的主要形態和重要平臺，將在模擬腦功能、高效實現AI算法、提升計算能力等方面發揮重要的獨特作用。 -
浙大成功研製真正像腦一樣「思考」的類腦計算機
全球科學家們再次將目光瞄準到模仿生物大腦這個最初的夢想，通過模擬人腦結構與運算機制來發展新的計算技術，以期實現高能效與高智能水平的計算。 生物大腦在與環境相互作用過程中能夠自然產生不同的智能行為，包括語音理解、視覺識別、決策任務、操作控制等，而且消耗的能量非常低。 -
我國科學家成功研製全球神經元規模最大的類腦計算機
新京報快訊 據浙江大學微信公眾號消息，9月1日，億級神經元類腦計算機重大成果新聞發布會在杭州召開。浙江大學校長吳朝暉院士出席並講話。他表示，人工智慧浪潮正加快智能增強時代的到來，類腦計算機將成為未來計算的主要形態和重要平臺，將在模擬腦功能、高效實現AI算法、提升計算能力等方面發揮重要的獨特作用。 -
我國科學家成功研製全球神經元規模最大的類腦計算機
9月1日，億級神經元類腦計算機重大成果新聞發布會在杭州召開。浙江大學校長吳朝暉院士出席並講話。他表示，人工智慧浪潮正加快智能增強時代的到來，類腦計算機將成為未來計算的主要形態和重要平臺，將在模擬腦功能、高效實現AI算法、提升計算能力等方面發揮重要的獨特作用。 -
剛剛，馬斯克宣布在腦機接口重大突破！正為首次植入人腦做準備
哈佛大學腦科學博士韓璧丞告訴 Deeptech，Neuralink 發布的易布置，擁有高通量電極的接口裝置是一個突破，實現了工程上的重大突破。需要在顱頂開洞，將其植入，安裝方式與頭骨平齊。同時，耳邊的信號接收盒也看不到了。 -
多個項目由院士牽頭,2020年國家自然科學基金創新群體項目立項情況...
該群體依託國家示範性微電子學院，面向國家重大裝備和電子信息產業需求，圍繞高效模擬前端集成電路和集成系統的低功耗和高性能協同的科學難題，在高效模數轉換器、高性能模擬前端晶片、混合信號系統晶片及微系統集成等方面取得了一系列創新研究成果，牽頭獲得了2016年國家科技進步二等獎和2019年國家技術發明二等獎。 -
類腦智能,馬斯克、陳天橋都爭相投資的腦科學是什麼?|萬字研究
Neuralink團隊此次的突破，也讓充滿神秘色彩的腦科學再次進入大眾視野。腦科學這個概念本身並不新鮮。2004年4月，美國的《Science》雜誌慶祝創刊125周年時，就邀請了全球幾百位科學家列出他們認為當今世界最重要的前沿科學問題，最後歸納為125個，其中有18個問題屬於腦科學。 -
大腦科學領域現重大突破 三位科學家發現腦中GPS
這是大腦科學領域重大的基礎性突破。 在人類對所處環境進行認知、記憶以及導航的過程中，需要對地理位置有一定的感覺。這種感覺需要多個信息感知模塊共同作用，運動執行力和記憶能力組合在一起才能真正起作用，可以說導航能力是大腦最複雜的功能之一。 2014年度獲獎者的探索，顯著地改變了我們對大腦神經網絡運行基本認知功能的理解。 -
我國成功研製億級神經元類腦計算機
9月1日，億級神經元類腦計算機重大成果新聞發布會在杭州召開。浙江大學校長吳朝暉院士出席並講話。他表示，人工智慧浪潮正加快智能增強時代的到來，類腦計算機將成為未來計算的主要形態和重要平臺，將在模擬腦功能、高效實現AI算法、提升計算能力等方面發揮重要的獨特作用。 -
中國科學家成功研製全球神經元規模最大的類腦計算機
9月1日，億級神經元類腦計算機重大成果新聞發布會在杭州召開。浙江大學校長吳朝暉院士出席並講話。他表示，人工智慧浪潮正加快智能增強時代的到來，類腦計算機將成為未來計算的主要形態和重要平臺，將在模擬腦功能、高效實現AI算法、提升計算能力等方面發揮重要的獨特作用。