WEKO3
アイテム
単語分散表現のアライメントに基づく文間類似度を用いたテキスト平易化のための単言語パラレルコーパスの構築
https://ipsj.ixsq.nii.ac.jp/records/169991
https://ipsj.ixsq.nii.ac.jp/records/16999175948074-c67c-48d6-8134-bb8b7fe0035c
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
|
|
Copyright (c) 2016 by the Information Processing Society of Japan
|
|
| オープンアクセス | ||
| Item type | SIG Technical Reports(1) | |||||||||
|---|---|---|---|---|---|---|---|---|---|---|
| 公開日 | 2016-07-22 | |||||||||
| タイトル | ||||||||||
| タイトル | 単語分散表現のアライメントに基づく文間類似度を用いたテキスト平易化のための単言語パラレルコーパスの構築 | |||||||||
| 言語 | ||||||||||
| 言語 | jpn | |||||||||
| キーワード | ||||||||||
| 主題Scheme | Other | |||||||||
| 主題 | 言語分析・言い換え | |||||||||
| 資源タイプ | ||||||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_18gh | |||||||||
| 資源タイプ | technical report | |||||||||
| 著者所属 | ||||||||||
| 首都大学東京システムデザイン研究科 | ||||||||||
| 著者所属 | ||||||||||
| 首都大学東京システムデザイン研究科 | ||||||||||
| 著者名 |
梶原, 智之
× 梶原, 智之
× 小町, 守
|
|||||||||
| 論文抄録 | ||||||||||
| 内容記述タイプ | Other | |||||||||
| 内容記述 | 統計的機械翻訳の枠組みを用いたテキスト平易化が近年活発に研究されているが、その学習に必要な単言語パラレルコーパスを人手で構築することはコストが高い。そのため、テキスト平易化のための単言語パラレルコーパスは、英語や独語など限られた言語でしか整備されていない。そこで本稿では、単語の分散表現に基づいて計算される文間類似度を用いて、テキスト平易化のための単言語パラレルコーパスを自動構築する手法を提案する。我々は難解な文と平易な文からなる任意の文対に対して、一方の文中の各単語に対して最も類似度の高い他方の文中の単語を割り当てる多対一の単語アライメントを考え、それらの単語間類似度の平均値によって文間類似度を定義する。我々の提案手法は、ラベル付きデータや辞書などの外部知識を必要としないため、任意の言語に適用できる。実験の結果、我々の提案手法は英語のテキスト平易化のための単言語パラレルコーパスの自動構築タスクにおいて state-of-the-art を更新した。また、統計的機械翻訳の枠組みを用いたテキスト平易化の実験結果も、我々の提案手法によって構築されたコーパスが既存のテキスト平易化のためのコーパスよりも優れていることを示した。本研究ではテキスト平易化を対象にしたが、単言語パラレルコーパスは言い換えや文圧縮などの分野でも有用な言語資源である。 | |||||||||
| 書誌レコードID | ||||||||||
| 収録物識別子タイプ | NCID | |||||||||
| 収録物識別子 | AN10115061 | |||||||||
| 書誌情報 |
研究報告自然言語処理(NL) 巻 2016-NL-227, 号 12, p. 1-8, 発行日 2016-07-22 |
|||||||||
| ISSN | ||||||||||
| 収録物識別子タイプ | ISSN | |||||||||
| 収録物識別子 | 2188-8779 | |||||||||
| Notice | ||||||||||
| SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc. | ||||||||||
| 出版者 | ||||||||||
| 言語 | ja | |||||||||
| 出版者 | 情報処理学会 | |||||||||