@techreport{oai:ipsj.ixsq.nii.ac.jp:02003736, author = {三田,ちひろ and 渡邉,研斗 and 中塚,貴之 and 中野,倫靖 and 後藤,真孝 and 伊藤,貴之}, issue = {2}, month = {Aug}, note = {本研究では,実体のある鍵盤を必要としないピアノ演奏を可能にする仮想ピアノの実現を目的として,指の動きと運指情報に基づいて音高系列を確率的に推定する手法を提案する.本手法により,専用の鍵盤装置を用いず,手の動作のみでピアノ演奏を行う環境の構築が可能となる.従来の仮想鍵盤システムでは,鍵盤位置の正確な認識のために視線追跡や物理的な触覚フィードバックが必要であり,簡易な機材による実現が困難であった.本研究ではこの課題を解決するために,指の打鍵位置の変化と運指の遷移情報を入力として,音高系列を逐次的に推定する確率モデルを構築した.提案手法は,N-gramに基づく音高系列の言語モデルと,指間距離および運指の組み合わせに基づく翻訳モデルを統合したものであり,指の動きから高精度な音高系列推定を可能にする.さらに,応用例として,MediaPipe Handsを用いたハンドトラッキングと提案モデルを統合し,手の動きのみで演奏可能な仮想ピアノを開発した.}, title = {運指を考慮したピアノ演奏ジェスチャーからのリアルタイム音高系列推定手法}, year = {2025} }