日本語文章における順方向と逆方向の文字遷移情報量の差異

• Item type: SIG Technical Reports(1)
• 公開日: 2007-11-19
• タイトル: 日本語文章における順方向と逆方向の文字遷移情報量の差異
• タイトル / 言語: en
• タイトル: Difference in the amount of information between forward and backward transitions in Japanese text
• 言語: jpn
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_18gh
• 資源タイプ: technical report
• 著者所属: 東京農工大学
• 著者所属: 東京農工大学
• 著者所属(英): en
• 著者所属(英): Tokyo University of Agriculture and Technology
• 著者所属(英): en
• 著者所属(英): Tokyo University of Agriculture and Technology
• 著者名: 中川, 正樹; 朱碧蘭
• 著者名(英): Masaki, NAKAGAWA; Bilan, ZHU
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: 本論文では，自然言語における文字遷移の情報量として順方向と逆方向を考え，それぞれについて前後２文字の文字遷移の情報量を遷移確率上位の有限個だけ加算した場合，日本語では順方向と逆方向で顕著な差異があることを示す．また，加算する有限個の遷移確率値の総和が １ になるように正規化した場合の正規化情報量でも同様の傾向があることを示す．
• 論文抄録(英) / 内容記述タイプ: Other
• 論文抄録(英) / 内容記述: This paper defines the amount of information for forward transition and that for backward transition for natural languages and measures them in terms of 2-gram. Then, it presents that a notable difference exists between them in Japanese text when the amount of information is accumulated from the most probable transition to a limited number with descending transition probabilities. The same difference is also observed between the forward transition and the backward transition in normalized accumulated information when the sum of accumulated transition probabilities is normalized to 1.
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AN10115061
• 書誌情報: 情報処理学会研究報告自然言語処理（NL）; 巻 2007, 号 113(2007-NL-182), p. 45-50, 発行日 2007-11-19
• Notice: SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc.
• 出版者 / 言語: ja
• 出版者: 情報処理学会