説明文生成を用いた動作行動予測

• Item type: SIG Technical Reports(1)
• 公開日: 2022-09-22
• タイトル: 説明文生成を用いた動作行動予測
• 言語: jpn
• キーワード / 主題Scheme: Other
• キーワード / 主題: 生成・実世界応用
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_18gh
• 資源タイプ: technical report
• 著者所属: 東京大学情報理工学系研究科／理化学研究所ガーディアンロボットプロジェクト
• 著者所属: 理化学研究所ガーディアンロボットプロジェクト
• 著者所属: 理化学研究所ガーディアンロボットプロジェクト
• 著者所属: 理化学研究所ガーディアンロボットプロジェクト
• 著者所属: 理化学研究所ガーディアンロボットプロジェクト
• 著者所属(英): en
• 著者所属(英): Graduate School of Information Science and Technology, the University of Tokyo / Guardian Robot Project (GRP), RIKEN
• 著者所属(英): en
• 著者所属(英): Guardian Robot Project (GRP), RIKEN
• 著者所属(英): en
• 著者所属(英): Guardian Robot Project (GRP), RIKEN
• 著者所属(英): en
• 著者所属(英): Guardian Robot Project (GRP), RIKEN
• 著者所属(英): en
• 著者所属(英): Guardian Robot Project (GRP), RIKEN
• 著者名: 中村, 泰貴; 河野, 誠也; 湯口, 彰重; 川西, 康友; 吉野, 幸一郎
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: ロボットをはじめとする人間を支援するシステムは，観測から状況を正しく理解し，人間が必要とする支援行動を出力する必要がある．特に人間を対象とした支援において，システムがどのような状況理解を行い，どのような動作行動の生成しようとしているかは，言語で表現することが重要である．そこで本研究では，現在の状況からシステムが行うべき行動を予測しその内容を言語で説明する，動作行動予測とその言語化 (captioning operative action) に取り組む．具体的には，ある状況とそこに対して何らかの支援行動が行われた理想状態の画像を入力とし，どのような支援行動が行われたかを説明する言語化タスクによって動作行動予測を実現するシステムを構築した．この際，こうした状況を説明する補助情報であるシーングラフの予測を補助タスクとして用いることで，シーングラフのアノテーションが存在しないテストセットに対しても精度高く動作行動の予測・言語化を行うことができることが確認された．
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AN10115061
• 書誌情報: 研究報告自然言語処理（NL）; 巻 2022-NL-253, 号 6, p. 1-7, 発行日 2022-09-22
• ISSN / 収録物識別子タイプ: ISSN
• ISSN / 収録物識別子: 2188-8779
• Notice: SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc.
• 出版者 / 言語: ja
• 出版者: 情報処理学会