深層学習による文書の話題分類の判断根拠の提示に関する一考察

• Item type: SIG Technical Reports(1)
• 公開日: 2021-07-20
• タイトル: 深層学習による文書の話題分類の判断根拠の提示に関する一考察
• タイトル / 言語: en
• タイトル: A Study on Presenting Decision Rationale for Topic Classification of Documents by Deep Learning
• 言語: jpn
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_18gh
• 資源タイプ: technical report
• 著者所属: 工学院大学
• 著者所属: 工学院大学
• 著者所属: 工学院大学
• 著者所属: 工学院大学
• 著者名: 為栗, 敦生; 中村, 鴻介; 高橋, 良颯; 山口, 実靖
• 著者名(英): Atsuki, Tamekuri; Kosuke, Nakamura; Yoshihaya, Takahashi; Saneyasu, Yamaguchi
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: 深層学習は文書分類等の自然言語処理にて活用され，Self-Attention などが大きな成果をあげている．一方で深層学習による分類は，分類精度は高いがその判断根拠を人間が理解することが困難であるとの指摘がされている．本稿では，テーマが定められたニュース記事群のテーマによる分類のタスクに着目し，深層学習による分類の判断根拠の提示手法について考察する．具体的には，LSTM Attention により記事分類を行い，高い精度で分類をできることを示す．そして，Attention 値や既存の判断根拠提示手法 Smooth-grad に着目し，自然言語記事分類の判断根拠提示手法について考察する．また性能評価により，これらに着目することにより判断根拠を提示できることを示す．
• 論文抄録(英) / 内容記述タイプ: Other
• 論文抄録(英) / 内容記述: Deep learning has been used in natural language processing (NLP) such as document classification. In particular, Self-Attention has achieved significant results in NLP. However, it has been pointed out that although deep learning highly accurately classifies documents, it is difficult to interpret the basis of the decision. In this paper, we focus on the task of classifying news documents by their theme. We then propose methods for presenting the interpretability for classification decisions by deep learning. We first classify documents with LSTM Attention and show that this can classify documents with high accuracy. We second propose five methods for providing the basis of the decision by focusing on various values, e.g. Attention. Finally, we evaluate the methods and show that these methods can present interpretability.
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AN10115061
• 書誌情報: 研究報告自然言語処理（NL）; 巻 2021-NL-249, 号 1, p. 1-7, 発行日 2021-07-20
• ISSN / 収録物識別子タイプ: ISSN
• ISSN / 収録物識別子: 2188-8779
• Notice: SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc.
• 出版者 / 言語: ja
• 出版者: 情報処理学会