WEKO3
アイテム
画像質問応答に基づくキャプション生成への取り組み
https://ipsj.ixsq.nii.ac.jp/records/230108
https://ipsj.ixsq.nii.ac.jp/records/230108153f5dd4-cd61-460f-85ef-a45919f36e98
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
IPSJ-Z85-5U-05.pdf (1.3 MB)
|
Copyright (c) 2023 by the Information Processing Society of Japan
|
| Item type | National Convention(1) | |||||||||
|---|---|---|---|---|---|---|---|---|---|---|
| 公開日 | 2023-02-16 | |||||||||
| タイトル | ||||||||||
| タイトル | 画像質問応答に基づくキャプション生成への取り組み | |||||||||
| 言語 | ||||||||||
| 言語 | jpn | |||||||||
| キーワード | ||||||||||
| 主題Scheme | Other | |||||||||
| 主題 | 人工知能と認知科学 | |||||||||
| 資源タイプ | ||||||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_5794 | |||||||||
| 資源タイプ | conference paper | |||||||||
| 著者所属 | ||||||||||
| お茶の水女子大 | ||||||||||
| 著者所属 | ||||||||||
| お茶の水女子大 | ||||||||||
| 著者名 |
杜, 静怡
× 杜, 静怡
× 小林, 一郎
|
|||||||||
| 論文抄録 | ||||||||||
| 内容記述タイプ | Other | |||||||||
| 内容記述 | 近年、画像キャプショニングにおいて、コントロールシグナルと呼ばれる情報を追加することでキャプション生成の内容を制御する手法が盛んに研究されている。一方で、画像質問応答（VQA）は、画像の内容に関する質問に対して正しい回答を導き出す手法であり、画像に対する質問というシグナルを与えることにより回答を出力する。本研究では、VQAの質問をコントロールシグナルとして、キャプションを生成する手法を提案する。既存の MSCOCO および VQA v2 データセットに基づいて、2 つのデータセットに対して、手動で質問とキャプションの対応づけを行い、両者を結合し、新しいデータセットを取得し、このデータセットを使用してモデルを学習した。 | |||||||||
| 書誌レコードID | ||||||||||
| 収録物識別子タイプ | NCID | |||||||||
| 収録物識別子 | AN00349328 | |||||||||
| 書誌情報 |
第85回全国大会講演論文集 巻 2023, 号 1, p. 635-636, 発行日 2023-02-16 |
|||||||||
| 出版者 | ||||||||||
| 言語 | ja | |||||||||
| 出版者 | 情報処理学会 | |||||||||
