Unisoner：様々な歌手が同一楽曲を歌ったWeb上の多様な歌声を活用する合唱制作支援インタフェース

• Item type: Journal(1)
• 公開日: 2015-12-15
• タイトル: Unisoner：様々な歌手が同一楽曲を歌ったWeb上の多様な歌声を活用する合唱制作支援インタフェース
• タイトル / 言語: en
• タイトル: Unisoner: An Interface for Derivative Chorus Creation from Various Voices Singing the Same Song on the Web
• 言語: jpn
• キーワード / 主題Scheme: Other
• キーワード / 主題: [一般論文] 歌声情報処理，ユーザインタフェース，基本周波数推定，歌詞アラインメント
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_6501
• 資源タイプ: journal article
• 著者所属: 筑波大学大学院システム情報工学研究科
• 著者所属: 産業技術総合研究所
• 著者所属: 産業技術総合研究所
• 著者所属: 筑波大学システム情報系
• 著者所属: 筑波大学システム情報系
• 著者所属(英): en
• 著者所属(英): Graduate School of Systems and Information Engineering, University of Tsukuba
• 著者所属(英): en
• 著者所属(英): National Institute of Advanced Industrial Science and Technology (AIST)
• 著者所属(英): en
• 著者所属(英): National Institute of Advanced Industrial Science and Technology (AIST)
• 著者所属(英): en
• 著者所属(英): Faculty of Engineering, Information and Systems, University of Tsukuba
• 著者所属(英): en
• 著者所属(英): Faculty of Engineering, Information and Systems, University of Tsukuba
• 著者名: 都築, 圭太; 中野, 倫靖; 後藤, 真孝; 山田, 武志; 牧野, 昭二
• 著者名(英): Keita, Tsuzuki; Tomoyasu, Nakano; Masataka, Goto; Takeshi, Yamada; Shoji, Makino
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: 本論文では，Web上で公開されている「1つの楽曲を様々な歌手が歌った歌声」から，合唱と呼ばれる作品を制作するためのインタフェースUnisonerを提案する．従来，このような合唱制作では，伴奏を抑制した各歌声波形を楽曲のフレーズごとに切り貼りし，音量の大小や左右のバランスを調整したうえで重ね合わせる必要があり，時間と労力がかかっていた．それに対してUnisonerでは，歌詞に基づいた楽曲内位置の指定と，歌手アイコンのドラッグアンドドロップ操作に基づいた音量調整を可能とするインタフェースによって，直感的かつ効率的に合唱を制作することができる．さらに，歌声のF0（基本周波数）とMFCC（Mel Frequency Cepstral Coefficient）に基づいた音響的な類似度や，MFCCに基づいた歌手性別の推定結果に加え，再生数などのWeb上のメタデータを活用した歌手検索機能も持つ．このような機能を実現するためには，伴奏をともなう歌声のF0推定手法や，歌声と歌詞のアラインメント手法が必要となるが，それらの推定結果に誤りが含まれることが問題となる．そこで本論文では，誤りを含む単一の歌声からの推定結果に対し，複数の歌声の推定結果を統合して誤りを削減する手法を提案する．評価実験の結果，Unisonerによって合唱制作時間が短縮されること，提案手法によりF0推定と歌詞アラインメントにおける誤りが減少することを確認した．
• 論文抄録(英) / 内容記述タイプ: Other
• 論文抄録(英) / 内容記述: This paper proposes Unisoner, an interface for assisting the creation of derivative choruses, in which voices of different singers singing the same song are overlapped on top of one shared accompaniment. In the past, it was time-consuming to create such choruses because creators had to manually cut and paste vocal fragments from different singers, and then adjust the volume and panning of each voice. Unisoner enables users to perform such editing tasks efficiently by selecting phrases using lyrics and by dragging and dropping the corresponding icons onto a virtual stage. Moreover, Unisoner can search vocals with acoustic similarity based on F0 and MFCC, estimated gender, and metadata such as the number of views. We use a vocal F0 estimation technique from polyphonic audio signals, and a technique to synchronize audio signals with lyrics. However, estimation errors occur using conventional techniques for F0 and lyric alignment, so we propose a novel method of reducing those errors by integrating the estimated results from many voices singing the same song. The experimental results confirmed that Unisoner can shorten the time for creating derivative choruses, and the proposed methods can reduce the estimation error of F0 and lyric alignment.
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AN00116647
• 書誌情報: 情報処理学会論文誌; 巻 56, 号 12, p. 2370-2383, 発行日 2015-12-15
• ISSN / 収録物識別子タイプ: ISSN
• ISSN / 収録物識別子: 1882-7764