@techreport{oai:ipsj.ixsq.nii.ac.jp:00218428, author = {青谷, 直樹 and 原, 直 and 阿部, 匡伸 and Naoki, Aotani and Sunao, Hara and Masanobu, Abe}, issue = {36}, month = {Jun}, note = {本報告では,話者固有の声質や平均的な声の高さなどの情報を表現した話者特徴量を補助情報として,シームレスに話者性を制御できる End-to-End 音声合成の方式を検討する.話者性の制御は,2 名の話者の音声から話者ベクトルを抽出し,それぞれの話者ベクトルに重みづけ加算し,2 名の話者特徴量を内挿した特徴ベクトルを生成することで行う.本報告では,重みの調整によって話者性を徐々に変化させることを話者性のシームレスな制御と呼ぶ.本研究で用いる話者特徴量は,2 種類の情報を結合して得られるベクトルである.1 つ目は,既存研究でも用いられている x-vector であり,声質などの制御を行う.2 つ目は,目標音声の基本周波数であり,声の平均的な高さを制御する.本報告では,2 種類の情報を分離した特徴として制御することで,話者性の変化をシームレスに行えるようにする方式を提案する.具体的には,x-vector による制御が声質だけに特化できるようにするため,平均 F0 を全て均一にした音声から x-vector を抽出し,話者特徴量の一部として用いる.評価実験では,合成音声の声の高さの制御性能,声質を客観評価実験で評価し,話者性の制御性能を主観評価実験で評価した.評価実験の結果,女性から女性,男性から男性への話者性の変化において重みの変更に応じたシームレスな話者性の制御ができていることが分かった.しかし,男性から女性への話者性の変換において,十分に話者性が制御できていない部分があることも分かった., In this paper, we investigate an End-to-End speech synthesis scheme that enables to seamlessly control speaker individuality using speaker features that represent speaker’s specific voice quality and average voice height as auxiliary information. Speaker individuality is controlled as follows. To generate a control feature vector, after extracting speaker features from two speakers, the speaker features are overlap added with weight. In this paper, seamlessly controlling speaker individuality is referred to as the gradual change in speaker individuality by adjusting weights. The speaker features used in this study are vectors obtained by combining two types of information. The first is the x-vector used in conventional method to control voice quality. The second is an average value of the fundamental frequency of the target voice to control the average voice height. Here, x-vectors are extracted from speech that is modified to have the same mean F0 value, which result in minimizing interactions between x-vectors and fundamental frequency. Results of the evaluation experiments showed that speaker individuality can be seamlessly controlled by gradually changing the weights in the case of female-female speaker pair and male-male speaker pair. However, it was not true in the case of female-male speaker pair.}, title = {話者特徴量の操作によりシームレスに話者性を制御できるEnd-to-End音声合成方式の検討}, year = {2022} }