視線情報を活用した楽譜追跡システムの構築

• Item type: SIG Technical Reports(1)
• 公開日: 2016-07-23
• タイトル: 視線情報を活用した楽譜追跡システムの構築
• タイトル / 言語: en
• タイトル: Development of a Score-Following System Using Gaze Information
• 言語: jpn
• キーワード / 主題Scheme: Other
• キーワード / 主題: 楽譜
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_18gh
• 資源タイプ: technical report
• 著者所属: 公立はこだて未来大学大学院
• 著者所属: 公立はこだて未来大学
• 著者所属: 公立はこだて未来大学
• 著者所属(英): en
• 著者所属(英): Graduate School of Future University Hakodate
• 著者所属(英): en
• 著者所属(英): Future University Hakodate
• 著者所属(英): en
• 著者所属(英): Future University Hakodate
• 著者名: 寺崎, 栞里; 竹川, 佳成; 平田, 圭二
• 著者名(英): Shiori, Terasaki; Yoshinari, Takegawa; Keiji, Hirata
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: 本稿では DP マッチングによる楽譜追跡アルゴリズムと視線情報を組み合わせた楽譜追跡システムを提案する．従来の楽譜追跡手法の多くは打鍵情報のみで演奏箇所を推定する．そのため，同一あるいは類似した音形を多数含むような楽曲に対して，直前の演奏箇所と全く異なる箇所を演奏し始めた場合や特定箇所で誤打鍵と弾き直しを何度も続けて繰り返した場合は演奏箇所が確定するまでに遅れが生じたり，演奏箇所の推定精度が下がってしまう．本研究では，演奏者の思考が信頼度高く表出される視線情報に注目し，視線情報と打鍵情報を組み合わせた楽譜追跡手法を提案する．技術的な課題には，視線情報の誤差，打鍵情報の誤打鍵への対処の課題や視線情報と打鍵情報の利用優先順位があり，ヒューリスティクスの導入によって解決を試みる．楽譜追跡における視線情報の有用性を示すために，視線情報導入時と非導入時の楽譜追跡の誤り率を評価した．結果は視線情報導入時の正解率が視線非導入時の正解率の 1.4 倍に高くなった．また，視線導入時の平均推定時間が視線非導入時の平均推定時間の 0.3 倍に短くなった．従って，楽譜追跡における視線情報の有用性が証明された．
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AN10438388
• 書誌情報: 研究報告音楽情報科学（MUS）; 巻 2016-MUS-112, 号 11, p. 1-8, 発行日 2016-07-23
• ISSN / 収録物識別子タイプ: ISSN
• ISSN / 収録物識別子: 2188-8752
• Notice: SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc.
• 出版者 / 言語: ja
• 出版者: 情報処理学会