定位的頭蓋内脳波からの傾聴メロディの再合成

• Item type: SIG Technical Reports(1)
• 公開日: 2024-02-22
• タイトル: 定位的頭蓋内脳波からの傾聴メロディの再合成
• タイトル / 言語: en
• タイトル: Synthesizing perceived melody from stereo electroencephalogram
• 言語: jpn
• キーワード / 主題Scheme: Other
• キーワード / 主題: ポスターセッション3 EA/SIP
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_18gh
• 資源タイプ: technical report
• 著者所属: 東京農工大学大学院工学府
• 著者所属: 東京農工大学大学院工学府
• 著者所属: 東京農工大学大学院工学府
• 著者所属: 東京農工大学大学院工学府
• 著者所属: 順天堂大学医学部脳神経外科
• 著者所属: 順天堂大学医学部脳神経外科
• 著者所属: 順天堂大学医学部脳神経外科
• 著者所属: 順天堂大学医学部脳神経外科
• 著者所属: 東京農工大学大学院工学府
• 著者所属(英): en
• 著者所属(英): Graduate School of Engineering, Tokyo University of Agriculture and Technology
• 著者所属(英): en
• 著者所属(英): Graduate School of Engineering, Tokyo University of Agriculture and Technology
• 著者所属(英): en
• 著者所属(英): Graduate School of Engineering, Tokyo University of Agriculture and Technology
• 著者所属(英): en
• 著者所属(英): Graduate School of Engineering, Tokyo University of Agriculture and Technology
• 著者所属(英): en
• 著者所属(英): Department of Neurosurgery, Juntendo University School of Medicine
• 著者所属(英): en
• 著者所属(英): Department of Neurosurgery, Juntendo University School of Medicine
• 著者所属(英): en
• 著者所属(英): Department of Neurosurgery, Juntendo University School of Medicine
• 著者所属(英): en
• 著者所属(英): Department of Neurosurgery, Juntendo University School of Medicine
• 著者所属(英): en
• 著者所属(英): Graduate School of Engineering, Tokyo University of Agriculture and Technology
• 著者名: 稲葉, 湧大; 熊谷, 優惟子; 吉村, 直己; 古明地, 秀治; 三橋, 匠; 飯村, 康司; 鈴木, 皓晴; 菅野, 秀宜; 田中, 聡久
• 著者名(英): Yuta, Inaba; Yuiko, Kumagai; Naoki, Yoshimura; Shuji, Komeiji; Takumi, Mitsuhashi; Yasushi, Iimura; Hiroharu, Suzuki; Hidenori, Sugano; Toshihisa, Tanaka
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: 頭蓋内に電極を留置し計測した脳波から，傾聴中の音楽を推定する問題は挑戦的である．本稿では，定位的頭蓋内脳波（SEEG）と呼ばれる方法で電極を留置したてんかん患者に対して，4 秒程度の短いメロディを聴かせた．この傾聴中の SEEG から，BLSTM またはTransformer を用いて，聞いている音楽のログメルスペクトログラムのデコードを試みた．教師信号である傾聴音楽のログメルスペクトログラムとの MSE loss を評価指標として，チャンスレベルとして入力をランダムな信号とした場合の推論結果と比較した．2 要因分散分析の結果，MSE loss はチャンスレベルと比較して有意に小さかった．また，2 つの推定モデル（BLSTM または Transformer）の間には有意差は認められなかった．さらに，MSE が小さい推定ログメルスペクトログラムから音響信号の再構成したところ，傾聴させたメロディを主観的に認識できた．
• 論文抄録(英) / 内容記述タイプ: Other
• 論文抄録(英) / 内容記述: Estimating perceived music from intracranial electroencephalogram measured with implanted electrodes is challenging. In this study, we recorded stereo electroencephalogram (SEEG) during music perception and attempted to estimate the log-mel spectrogram of short melodies, approximately 4 seconds in duration. The mean squared error (MSE) loss was calculated from the estimated log-mel spectrogram and ground truth labels, and the results were compared with those obtained when the input was a random signal. The results of a two-way analysis of variance revealed a significant reduction in MSE loss compared to chance level. However, no significant differences were observed for the encoder type or interaction. Furthermore, reconstruction of the acoustic signal from the estimated log-mel spectrogram with low MSE allowed for subjective recognition of the heard melody.
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AN10442647
• 書誌情報: 研究報告音声言語情報処理（SLP）; 巻 2024-SLP-151, 号 85, p. 1-6, 発行日 2024-02-22
• ISSN / 収録物識別子タイプ: ISSN
• ISSN / 収録物識別子: 2188-8663
• Notice: SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc.
• 出版者 / 言語: ja
• 出版者: 情報処理学会