VocaListener2：ユーザ歌唱の音高・音量に加えて声色変化も真似る歌声合成システム

• Item type: Journal(1)
• 公開日: 2013-06-15
• タイトル: VocaListener2：ユーザ歌唱の音高・音量に加えて声色変化も真似る歌声合成システム
• タイトル / 言語: en
• タイトル: VocaListener2: A Singing Synthesis System by Imitating Voice Timbre Changes in Addition to Pitch and Dynamics of User's Singing
• 言語: jpn
• キーワード / 主題Scheme: Other
• キーワード / 主題: [一般論文] VocaListener，VocaListener2，歌声合成，声色変化
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_6501
• 資源タイプ: journal article
• 著者所属: 産業技術総合研究所
• 著者所属: 産業技術総合研究所
• 著者所属(英): en
• 著者所属(英): National Institute of Advanced Industrial Science and Technology (AIST)
• 著者所属(英): en
• 著者所属(英): National Institute of Advanced Industrial Science and Technology (AIST)
• 著者名: 中野, 倫靖; 後藤, 真孝
• 著者名(英): Tomoyasu, Nakano; Masataka, Goto
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: 本論文では，ユーザの歌声からその声色（こわいろ）変化を真似て歌声合成するシステムVocaListener2を提案する．本システムは，我々が以前開発した音高と音量のみを真似て歌声合成するVocaListenerの拡張であり，声色変化にも対応する．従来，主に声質変換やモーフィングのために，声質を操作する技術はあったが，ユーザが歌唱において意図的に変更する声色の変化を反映することはできなかった．VocaListener2を実現するために，まずVocaListenerによってユーザ歌唱の音高，音量および音素（歌詞）を真似た多様な歌声を合成して声色空間を構成し，その結果を用いてユーザ歌唱の声色変化を反映して合成する．市販の歌声合成システムを用いて実験した結果，構成された声色空間は聴取印象を反映しており，音高と音量に加えて声色変化も真似ることができていた．
• 論文抄録(英) / 内容記述タイプ: Other
• 論文抄録(英) / 内容記述: This paper presents a singing synthesis system, VocaListener2, that automatically synthesizes a singing voice by imitating timbre changes of a user's singing voice. The system is an extension of our previous VocaListener system which deals with only pitch (F0) and dynamics (power). Most previous techniques for manipulating voice timbre have focused on voice conversion and voice morphing, and they cannot deal with intentional temporal timbre changes during singing. To develop VocaListener2, we first construct a voice timbre space on the basis of various singing voices that are synchronized under pitch, dynamics, and phoneme (lyrics) by using VocaListener. In this space, the timbre changes can be reflected in the synthesized singing voice. In our experiments with commercial singing synthesis systems, we found the constructed timbre space reflects the auditory impression and the timbre changes as well as the pitch and dynamics can be imitated.
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AN00116647
• 書誌情報: 情報処理学会論文誌; 巻 54, 号 6, p. 1771-1783, 発行日 2013-06-15
• ISSN / 収録物識別子タイプ: ISSN
• ISSN / 収録物識別子: 1882-7764