WEKO3
アイテム
モバイルデバイス上での打楽器左右打音の音色と強度のリアルタイム可視化
https://ipsj.ixsq.nii.ac.jp/records/232847
https://ipsj.ixsq.nii.ac.jp/records/2328479679adf9-84ae-4666-b98c-6b94ca72081e
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
IPSJ-MUS24139030.pdf (1.8 MB)
2026年3月2日からダウンロード可能です。
|
Copyright (c) 2024 by the Information Processing Society of Japan
|
|
| 非会員：¥660, IPSJ:学会員：¥330, MUS:会員：¥0, DLIB:会員：¥0 | ||
| Item type | SIG Technical Reports(1) | |||||||||
|---|---|---|---|---|---|---|---|---|---|---|
| 公開日 | 2024-03-02 | |||||||||
| タイトル | ||||||||||
| タイトル | モバイルデバイス上での打楽器左右打音の音色と強度のリアルタイム可視化 | |||||||||
| タイトル | ||||||||||
| 言語 | en | |||||||||
| タイトル | Real-time visualization of timbre and intensity for left and right percussion strikes on a mobile device | |||||||||
| 言語 | ||||||||||
| 言語 | jpn | |||||||||
| キーワード | ||||||||||
| 主題Scheme | Other | |||||||||
| 主題 | 可視化・インタフェース | |||||||||
| 資源タイプ | ||||||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_18gh | |||||||||
| 資源タイプ | technical report | |||||||||
| 著者所属 | ||||||||||
| 静岡大学 | ||||||||||
| 著者所属 | ||||||||||
| 静岡大学／愛知産業大学 | ||||||||||
| 著者所属(英) | ||||||||||
| en | ||||||||||
| Shizuoka University | ||||||||||
| 著者所属(英) | ||||||||||
| en | ||||||||||
| Shizuoka University / Aichi Sangyo University | ||||||||||
| 著者名 |
前田, 哲徳
× 前田, 哲徳
× 西村, 雅史
|
|||||||||
| 著者名(英) |
Akinori, Maeda
× Akinori, Maeda
× Masafumi, Nishimura
|
|||||||||
| 論文抄録 | ||||||||||
| 内容記述タイプ | Other | |||||||||
| 内容記述 | 打楽器の初級者は左右の手によって打音に差が出ることが多い．このような打音の差を練習者が確認することは打楽器の基礎練習において重要である．練習支援のための音色可視化では 2 次元空間へのマッピングの手法が考案されているが，強度など他の属性との組み合わせは試みられていない．これに対し，本研究では左右の手による音の強度と音色を可視化する手法を提案する．本手法では，深層音色可視化モデルにより音色が 2 次元空間上にマッピングされ，音の強度は 2 次元空間上の点の大きさで表現される．さらに，姿勢推定モデルを用いて左右の手を識別し，それぞれの手の音を異なる色の点で表現する．深層学習モデルの推論を含むすべての処理はモバイルデバイス上で行われ，実時間で可視化されることが確認された．これにより練習者は，モバイルデバイスを用いて打音の音色や強度を左右の手の識別情報とともに 1 音ずつ実時間に確認することができる． | |||||||||
| 論文抄録(英) | ||||||||||
| 内容記述タイプ | Other | |||||||||
| 内容記述 | Beginners in percussion often produce different sounds depending on whether they use their left or right hand. Beginners need to recognize these differences as part of their fundamental practice. While methods for visualizing timbre by mapping it onto a two-dimensional space have been developed for practice support, combinations with other sound attributes, such as intensity, have yet to be attempted. This study proposes a method for visualizing the playing hand (L or R), sound intensity, and timbre. In this method, timbre is mapped onto a two-dimensional space using a deep timbre visualization model, and the size of the points in this space represents the intensity of the sound. Additionally, a posture estimation model is used to identify the left or right hand, and the color of the points indicates the hand (L or R) used in playing. All processes, including inference by the deep learning model, are performed on mobile devices and visualized in real-time. This allows practitioners to check the timbre and intensity of their strikes in real-time, along with the identification information of the left or right hand, using a mobile device. | |||||||||
| 書誌レコードID | ||||||||||
| 収録物識別子タイプ | NCID | |||||||||
| 収録物識別子 | AN10438388 | |||||||||
| 書誌情報 |
研究報告音楽情報科学（MUS） 巻 2024-MUS-139, 号 30, p. 1-7, 発行日 2024-03-02 |
|||||||||
| ISSN | ||||||||||
| 収録物識別子タイプ | ISSN | |||||||||
| 収録物識別子 | 2188-8752 | |||||||||
| Notice | ||||||||||
| SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc. | ||||||||||
| 出版者 | ||||||||||
| 言語 | ja | |||||||||
| 出版者 | 情報処理学会 | |||||||||
