統計的機械翻訳の枠組みに基づく言語モデルの話し言葉スタイルへの変換

• Item type: SIG Technical Reports(1)
• 公開日: 2005-12-22
• タイトル: 統計的機械翻訳の枠組みに基づく言語モデルの話し言葉スタイルへの変換
• タイトル / 言語: en
• タイトル: Speaking Style Transformation of Language Model Based on Statistical Machine Translation Framework
• 言語: jpn
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_18gh
• 資源タイプ: technical report
• 著者所属: 京都大学学術情報メディアセンター
• 著者所属: 京都大学学術情報メディアセンター
• 著者所属(英): en
• 著者所属(英): Academic Center for Computing and Media Studies, Kyoto University
• 著者所属(英): en
• 著者所属(英): Academic Center for Computing and Media Studies, Kyoto University
• 著者名: 秋田, 祐哉; 河原, 達也
• 著者名(英): Yuya, AKITA; TatsuyaKAWAHARA
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: 講演や会議のような話し言葉の音声認識では，言語モデルの学習に際してタスクにマッチしたデータ，すなわち忠実な書き起こしテキストの量が限られていることが問題となっている．本稿では，大規模な文書データベースに基づく言語モデルの統計量から，話し言葉言語モデルの統計量を推定する変換手法を提案する．提案する統計的変換モデルでは，話し言葉に特徴的な言語表現がモデル化され，それらの変換確率も推定される・変換の発生する文脈パターンと確率は，音声の忠実な書き起こしとそれを文書スタイルに整形したテキストからなる小規模パラレルコーパスを用いて学習される．変換の適用範囲を広げ，信頼性を高めるために，単語を文脈としたモデルから品詞を文脈としたモデルにバックオフする枠組みを導入する．提案法を国会音声の認識タスクに適用したところ，テストセットパープレキシティを大きく改善することができた．
• 論文抄録(英) / 内容記述タイプ: Other
• 論文抄録(英) / 内容記述: One of the most significant problems in language modeling of spontaneous speech such as meetings and lectures is that only limited amount of matched training data, i.e. faithful transcript for the relevant task domain, is available. In this paper, we propose a novel transformation approach to estimate language model statistics of spontaneous speech from a document-style text database, which is often available with a large scale. The proposed statistical transformation model is designed for modeling characteristic linguistic phenomena in spontaneous speech and estimating their occurrence probabilities. These contextual patterns and probabilities are derived from a small amount of parallel aligned corpus of the faithful transcripts and their document-style texts. To realize wide coverage and reliable estimation, a model based on part-of-speech (POS) is also prepared to provide a back-off scheme from a word-based model. The approach has been successfully applied to estimation of the language model for National Congress meetings from their minute archives, and significant reduction of test-set perplexity is achieved.
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AN10442647
• 書誌情報: 情報処理学会研究報告音声言語情報処理（SLP）; 巻 2005, 号 127(2005-SLP-059), p. 109-114, 発行日 2005-12-22
• Notice: SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc.
• 出版者 / 言語: ja
• 出版者: 情報処理学会