言い換えを用いたテキストの自動評価

• Item type: SIG Technical Reports(1)
• 公開日: 2009-05-14
• タイトル: 言い換えを用いたテキストの自動評価
• タイトル / 言語: en
• タイトル: Automatic Evaluation of Texts by Using Paraphrase
• 言語: jpn
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_18gh
• 資源タイプ: technical report
• 著者所属: 広島市立大学大学院情報科学研究科
• 著者所属: 広島市立大学大学院情報科学研究科
• 著者所属: 広島市立大学大学院情報科学研究科
• 著者所属: 東京工業大学 精密工学研究所
• 著者所属(英): en
• 著者所属(英): Graduate School of Information Sciences, Hiroshima City University
• 著者所属(英): en
• 著者所属(英): Graduate School of Information Sciences, Hiroshima City University
• 著者所属(英): en
• 著者所属(英): Graduate School of Information Sciences, Hiroshima City University
• 著者所属(英): en
• 著者所属(英): Precision and Intelligence Laboratory, Tokyo Institute of Technology
• 著者名: 平原, 一帆; 難波, 英嗣; 竹澤, 寿幸; 奥村, 学
• 著者名(英): Kazuho, Hirahara; Hidetsugu, Nanba; Toshiyuki, Takezawa; Manabu, Okumura
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: コンピュータにより生成された要約の評価は，近年の自動要約研究における重要な研究課題のひとつと認識されている．従来は，抜粋形式の要約を，正解要約との文字列の一致度により評価するのが一般的であった．しかしながら，生成要約には原文にはない独自の表現が含まれることがあるため，従来の評価手法では，生成要約を抜粋要約と同様の精度で評価することができないという問題があった．そこで，本稿では，言い換え技術を用いることにより，従来の評価手法の改善を試みる．提案手法の有効性を確認するため，テキスト自動要約タスクTSC2のデータを用いて実験を行った．実験の結果，提案手法は，生成要約の評価において従来の評価手法を改善できることが確認された．
• 論文抄録(英) / 内容記述タイプ: Other
• 論文抄録(英) / 内容記述: How to evaluate computer-produced abstract-type summaries has been recently recognized as one of the important research problems to solve in the field of automatic summarization. Traditionally, computer-produced extract-type summaries have been evaluated by n-gram overlap with human-produced summaries. However, these methods cannot evaluate abstract-type summaries in the same performance as extract-type summaries. In this paper, we explore the use of paraphrasing methods for refinement of automatic evaluation techniques. To confirm the effectiveness of our method, we conducted some experiments using the data of the Text Summarization Challenge 2. As a result, we found that our method could improve a traditional evaluation method when evaluating abstract-type summaries in comparison with a traditional evaluation method.
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AN10442647
• 書誌情報: 研究報告音声言語情報処理（SLP）; 巻 2009-SLP-76, 号 18, p. 1-6, 発行日 2009-05-14
• Notice: SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc.
• 出版者 / 言語: ja
• 出版者: 情報処理学会