WEKO3
アイテム
ゼロショット参照表現理解のためのReCLIPの改良
https://ipsj.ixsq.nii.ac.jp/records/236162
https://ipsj.ixsq.nii.ac.jp/records/23616279049f5f-e636-4e05-924b-453da7ed7c94
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
|
|
Copyright (c) 2024 by the Information Processing Society of Japan
|
| Item type | National Convention(1) | |||||||||
|---|---|---|---|---|---|---|---|---|---|---|
| 公開日 | 2024-03-01 | |||||||||
| タイトル | ||||||||||
| タイトル | ゼロショット参照表現理解のためのReCLIPの改良 | |||||||||
| 言語 | ||||||||||
| 言語 | jpn | |||||||||
| キーワード | ||||||||||
| 主題Scheme | Other | |||||||||
| 主題 | 人工知能と認知科学 | |||||||||
| 資源タイプ | ||||||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_5794 | |||||||||
| 資源タイプ | conference paper | |||||||||
| 著者所属 | ||||||||||
| 名工大 | ||||||||||
| 著者所属 | ||||||||||
| 名工大 | ||||||||||
| 著者名 |
野村, 大輝
× 野村, 大輝
× 田口, 亮
|
|||||||||
| 論文抄録 | ||||||||||
| 内容記述タイプ | Other | |||||||||
| 内容記述 | テキストの参照表現から画像内のオブジェクトを指定する参照表現理解(Referring Expression Comprehension)というタスクにおいて,言語と画像のマルチモーダルモデルであるCLIPとヒューリスティックス的な手法を組み合わせて追加学習無し(ゼロショット)で実現したReCLIPと呼ばれるモデルがある.このReCLIPに対して,セグメンテーションのための基盤モデルであるSegment Anything Modelを用いて,ゼロショットを維持したまま任意の画像とテキストで実行できるように拡張した.また,テキスト中の参照表現に関係のないオブジェクトを事前に省くことで精度の向上を図った. | |||||||||
| 書誌レコードID | ||||||||||
| 収録物識別子タイプ | NCID | |||||||||
| 収録物識別子 | AN00349328 | |||||||||
| 書誌情報 |
第86回全国大会講演論文集 巻 2024, 号 1, p. 649-650, 発行日 2024-03-01 |
|||||||||
| 出版者 | ||||||||||
| 言語 | ja | |||||||||
| 出版者 | 情報処理学会 | |||||||||