@techreport{oai:ipsj.ixsq.nii.ac.jp:00209828,
 author = {党, 少翔 and 松本, 哲也 and 工藤, 博章 and 竹内, 義則 and Shaoxiang, Dang and Tetsuya, Matsumoto and Hiroaki, Kudo and Yoshinori, Takeuchi},
 issue = {30},
 month = {Feb},
 note = {音声分離は，複数の話者が同時に話している状況での発話の分離である．これに対して，deep clustering (DC) の手法として deep embedding network を用いることが提案されている．オーディオデータを低次元多様体に埋め込むことで，同様の性質を持つデータは，その空間で密に分布しており，クラスタリングアルゴリズムによって，分かれて分布するデータを容易に分離することができる．このモデルは，話者についてアノテートされたデータを示す binary mask で構成された ideal affinity matrix によって学習される．しかし，binary mask の利用が，混合スペクトログラム内の個々のビンに対して，対応するマスク内の同じ位置のビンに 0 か 1 を割り当てることになり，システム全体としてボトルネックになる．ここでは，より正確なマスクを使用することによって binary mask の欠点について改善を行う．deep embedding network を拡張し二段階処理による方法を提案する．第一段階で DC を行い，第二段階で permutation 問題を避けるための permutation invariant training の処理を行った．実験結果として，平均で，SNR で 1.55dB，SDR で 4.45dB，SDRi で 4.41dB，STOI で 0.16，PESQ で 0.3，元の DC の値より，向上が見られた．提案手法により，DC で生じたスペクトルグラム内の欠落部分を修復することも見られた．, Speech separation refers to the separation of utterances in which multiple people are speaking simultaneously. The idea of deep clustering (DC) is put forward by using a deep embedding network to embed audio data in the underlying manifold, and data with similar property gathers tightly in the embedding space. Then this model uses a clustering algorithm because the clustering algorithm can easily separate distributed data. Regarding the learning process, the model is supervised by an ideal affinity matrix constructed of binary masks of annotation data. However, the binary mask gives a bottleneck to the entire system since the same position of bins in masks are assigned to 0 or 1 according to the contribution of individual utterances to mixed spectrograms. Thus, we propose an extended two-stage version of network based on the deep embedding. The network can eliminate the shortcomings by using various more accurate masks. We employ DC as our first stage, and conduct a permutation invariant training approach to prevent permutation problem in the second stage. As a result, the results according to our experiment outperforms the original DC model by 1.55dB in SNR by 4.45dB in SDR, 4.41dB in SDRi, 0.16 in STOI, and 0.3 in PESQ on average. We also observe that the proposed method can recover the defects in the spectrograms brought in by DC.},
 title = {Deep Embedding Networkに基づくモノラル混合音声からの音声分離性能の向上},
 year = {2021}
}