名前のついていない演奏要素に対するマルチモーダル共同注視の実現-LLMのエレキベース演奏学習支援システムへの応用-

• Item type: SIG Technical Reports(1)
• 公開日: 2025-08-24
• タイトル / 言語: ja
• タイトル: 名前のついていない演奏要素に対するマルチモーダル共同注視の実現-LLMのエレキベース演奏学習支援システムへの応用-
• 言語: jpn
• キーワード / 主題Scheme: Other
• キーワード / 主題: 音楽表現と演奏行動の理解
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_18gh
• 資源タイプ: technical report
• 著者所属: 公立はこだて未来大学
• 著者所属: 理化学研究所革新知能統合研究センター
• 著者所属: 公立はこだて未来大学
• 著者所属: 公立はこだて未来大学
• 著者所属: 公立はこだて未来大学
• 著者名: 山本,遥己; 三浦,寛也; 渡邉,拓貴; 竹川,佳成; 平田,圭二
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: 本研究は，音楽演奏における名前のついていない演奏要素を共同注視する方法について検討する．音楽演奏では，特定の音符やフレーズ，細部の音に名称が付けられないことが多く，演奏者間での指摘や認識の共有が重要となる．本研究では，これらの細部にアクセスするために，指示語，音楽知識，および演奏をそれぞれ同期させて利用する方法を提案する．本研究では，名前のついていない演奏要素としてゴーストノートに着目する．具体的な取り組みとして，エレキベース熟達者によるゴーストノートを共同注視する行動を，アラインメントさせたデータセットを作成した．さらに，名前のついていない演奏要素を指差し等のジェスチャーや，「ここ」や「そこ」といった指示代名詞を基に表現するための枠組みを提案し，その枠組みを大規模言語モデル(LLM)への応用に向けて試みる．これにより，システムと人の非言語的な情報共有や共同注視を行うための新たなアプローチを示すことを目指す．
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AN10438388
• 書誌情報: 研究報告音楽情報科学（MUS）; 巻 2025-MUS-144, 号 5, p. 1-8, 発行日 2025-08-24
• ISSN / 収録物識別子タイプ: ISSN
• ISSN / 収録物識別子: 2188-8752
• Notice: SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc.
• 出版者 / 言語: ja
• 出版者: 情報処理学会