January 23, 2023

非侵襲的に脳活動を測定し、聴いている音楽をAIで復元

(画像はDOI: 10.1038/s41598-022-27361-xより)

fMRIと頭皮脳波を組み合わせ、聴いている音楽を復元するディープラーニングモデルが開発

英国エセックス大学により、電極を脳に埋め込まない非侵襲的な方法で、どんな音楽を聴いているかをデコードする方法が開発されました。

これまで、頭蓋骨内に電極を埋め込んで脳活動を測定し、聞いている音や話す内容をデコードする研究はされてきています。

今回の研究では、音楽を聴いている被験者の脳活動をfMRIとEEGとで同時計測しました。fMRIの情報を用いて脳波の信号源を推定し、ディープニューラルネットワークを用いて楽曲を再構成しました。

その結果、再構築した音声波形は元の音声波形とかなり類似しており、36の楽曲の中で71.8%の精度で元の楽曲と一致していました。

話せなくなった人の言葉のデコードにも期待

今回の研究は、言葉を話そうとしたときの脳活動から、言葉を解読することへの応用にも期待されています。

例えば、脳卒中などで話すことができなくなった人にとって、ブレイン・マシン・インターフェイスとしての活用が望まれます。

この研究はScientific Reportsに掲載されています。
Neural decoding of music from the EEG

認知症予防DX & BrainTechレポート認知症予防DX &  BrainTechレポートのご案内

認知症予防DX & BrainTechレポートは、電気刺激・脳波測定・MRI・脳トレ・スリープテック・AI・VR・AR・メタバース・ロボットなど、認知症予防に取り組むブレインテック企業やDX企業62社を掲載したレポートです。

レポートの詳細・サンプルの請求はこちら

 
毎週、ブレインテック関連情報をメールマガジンで配信中
最新ブレインテックメールマガジン

世界のブレインテック企業情報や、脳神経科学の最新の研究情報をメールでお届けします(無料)

  • イベントや学会の参加レポート
  • 最新の脳神経科学の研究紹介
  • 海外のブレインテック動向
  • 国内のブレインテック企業動向
  • neumoのイベントや商品のご案内

メルマガの登録はこちら