圖:Grigory Rashkov/Neurobotics

俄羅斯企業 Neurobotics 及莫斯科物理技術學院(Moscow Institute of Physics and Technology,MIPT)的研究人員,找出一個方法將人類腦部活動視覺化為實際影像,此實際影像是模仿人們即時觀察到的事物。這項技術能發展出由腦部訊號控制的新型中風後復原設備。

擷取腦部訊息

要發展由大腦能控制的設備以及治療認知失調暨中風後復原的方法,神經生物學家必須要了解大腦如何對訊息編碼。其中一個關鍵是要研究人們感受視覺訊息時的大腦活動,例如觀賞影片時的大腦活動。

目前,從大腦訊號中擷取觀察到的影像是使用功能性磁振造影(Functional magnetic resonance imaging,fMRI),或是使用大腦植入物直接收集神經元的信號進行分析。這兩種方法在臨床操作和日常生活的應用上都受相當大的限制。

由 Neurobotics 及 MIPT 研發的腦機介面依靠的是人工智慧神經網路及腦電圖(electroencephalography)。腦電圖是藉由非侵入式放置在頭皮上的電極來記錄腦波的技術。藉由分析大腦活動,該系統可以在同時進行腦電圖下,重建一個人所看到的影像。

進行實驗

在實驗的第一部分,神經生物學家要求健康的受試者觀看約 10 秒的 YouTube 影片片段,總計觀看 20 分鐘。團隊隨機選擇 5 個影片項目:抽象形狀、瀑布、人臉、移動機制及動力運動。動力運動的項目包括以第一人稱視角紀錄的雪上摩托車、水上摩托車、重型機車及賽車賽事。

藉由分析腦電圖的資料,研究人員發現對每一種影片類型,大腦腦波圖案都不一樣。這讓團隊可以即時分析大腦對於影片的反應。

在實驗的第二階段,從原本的五個影片項目中隨機的選出三個。研究人員發展出兩種神經網路:其中一種是從雜訊中產生隨機、因項目而異的特定影像,另一種則是從腦電圖中產生相似的雜訊。接著,團隊將腦電圖訊號轉成與受試者觀察到的影像相似的實際影像,來訓練兩種網路一起運作。

為了測試系統視覺化大腦活動的能力,研究團隊接著從相同的項目中給受試者看之前未播放過的影片。當他們在觀賞時,腦電圖被記錄並被傳輸到神經網路中。系統通過了測試,產生令人信服的影像,在 90% 的情況下都能夠輕易被分類。

未來展望

MIPT 神經機器人實驗室的弗拉吉米爾·克涅雪夫(Vladimir Konyshev)表示:「我們正致力於國家科技措施(National Technology Initiative)中的神經網路輔助技術計畫,專注在研發腦機介面,此腦機介面能讓中風病患控制幫助他們神經復原的手臂外骨骼,或是讓癱瘓病人能操控電動輪椅。最終目標也包括讓健康的人增加對神經控制的準確率。」

本研究共同作者,MIPT 資深研究員及 Neurobotics 的程式設計師果戈里·拉許柯夫(Grigory Rashkov)解釋:「腦電圖是由頭皮記錄到的一系列大腦訊號。研究人員以往認為,透過腦電圖研究大腦過程就像藉由分析蒸汽火車留下的煙來理解蒸汽引擎的內部結構。我們一開始甚至不期待它們包含足夠的訊息來重建人們觀察到的影像。但實際上這其實是很有可能的。」

他補充:「此外,我們可以用腦電圖為基礎來構建即時運作的腦機介面。這非常令人欣慰。在現今的科技下,伊隆·馬斯克(Elon Musk)展望的侵入式神經介面面臨挑戰,包括複雜的手術、以及器材因為氧化等自然過程而在數個月快速衰壞的問題。我們希望我們最終可以設計更負擔得起且不需要移植的神經介面。」

參考資料:

  1. Houser, K., (2019, November 3). This Ai Decodes Your Brainwaves And Draws What You’re Looking At. Futurism
  2. Research News, (2019, October 30). Neural network reconstructs human ‘thoughts’ from brain waves in real time. MIPT
  3. Rashkov, G., (2019, October 25). Natural image reconstruction from brain waves: a novel visual BCI system with native feedback. BioRxiv. doi.org/10.1101/787101
You May Also Like

科學家研製能終身使用,構造簡單的人工心臟

需要進行心臟移植的病人往往需要輪候數月甚至數年之久,才可獲得一個適合的心臟進行移植手術。所以,一個能…

VR 虛擬實境令半身不遂病人重新走路

半身不遂的患者,一直被認為沒有康復的機會,但於 2014 年,胸部以下完全癱瘓的 29 歲患者朱利安…

打進台灣、澳洲!疫情下香港everyware自助點餐服務實現「無接觸餐廳」

香港零售軟體公司everyware(香港軟建)目前已推出「餐飲王」以及「ODO自點機」的服務,讓疫情下的香港可以透過掃描QR Code輕鬆點餐,實現真正「無接觸餐廳」。目前該公司的業務也正在前進台灣,客戶包含茶湯會、歇腳亭、解憂雜貨舖等。

美食外送行業正在壯大:印度Swiggy將從軟銀募資4.5億美元

軟銀願景基金(SoftBank Vision Fund)在對美食外送領域的評估拖延數年後,現傳出正在完成對Swiggy美食外送應用程序的4.5億美元投資,投資前估值達50億美元。

瑞士一家除碳公司獲 3 千萬美元投資

全球暖化所帶來的極端氣候,如熱浪、森林大火與水患日益頻繁,對人類生活帶來極大的衝擊。人類能否因為《巴…

馬斯克:人類最早 2024 年開始移居火星

SpaceX 執行長伊隆·馬斯克(Elon Musk)聲稱,人類將於 2024 年前往火星建造城市。…