@techreport{oai:ipsj.ixsq.nii.ac.jp:00232847,
 author = {前田, 哲徳 and 西村, 雅史 and Akinori, Maeda and Masafumi, Nishimura},
 issue = {30},
 month = {Mar},
 note = {打楽器の初級者は左右の手によって打音に差が出ることが多い．このような打音の差を練習者が確認することは打楽器の基礎練習において重要である．練習支援のための音色可視化では 2 次元空間へのマッピングの手法が考案されているが，強度など他の属性との組み合わせは試みられていない．これに対し，本研究では左右の手による音の強度と音色を可視化する手法を提案する．本手法では，深層音色可視化モデルにより音色が 2 次元空間上にマッピングされ，音の強度は 2 次元空間上の点の大きさで表現される．さらに，姿勢推定モデルを用いて左右の手を識別し，それぞれの手の音を異なる色の点で表現する．深層学習モデルの推論を含むすべての処理はモバイルデバイス上で行われ，実時間で可視化されることが確認された．これにより練習者は，モバイルデバイスを用いて打音の音色や強度を左右の手の識別情報とともに 1 音ずつ実時間に確認することができる．, Beginners in percussion often produce different sounds depending on whether they use their left or right hand. Beginners need to recognize these differences as part of their fundamental practice. While methods for visualizing timbre by mapping it onto a two-dimensional space have been developed for practice support, combinations with other sound attributes, such as intensity, have yet to be attempted. This study proposes a method for visualizing the playing hand (L or R), sound intensity, and timbre. In this method, timbre is mapped onto a two-dimensional space using a deep timbre visualization model, and the size of the points in this space represents the intensity of the sound. Additionally, a posture estimation model is used to identify the left or right hand, and the color of the points indicates the hand (L or R) used in playing. All processes, including inference by the deep learning model, are performed on mobile devices and visualized in real-time. This allows practitioners to check the timbre and intensity of their strikes in real-time, along with the identification information of the left or right hand, using a mobile device.},
 title = {モバイルデバイス上での打楽器左右打音の音色と強度のリアルタイム可視化},
 year = {2024}
}