WEKO3
アイテム
ReTrack-SAM 2: SAM 2における一時的なシーン変化に頑強な類似度ベースのメモリ選択機構
https://ipsj.ixsq.nii.ac.jp/records/240463
https://ipsj.ixsq.nii.ac.jp/records/24046332a51c24-87ad-4449-a7a4-42cb3b7ac609
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
IPSJ-ITS24099017.pdf (8.1 MB)
2026年10月29日からダウンロード可能です。
|
Copyright (c) 2024 by the Information Processing Society of Japan
|
|
| 非会員：¥660, IPSJ:学会員：¥330, ITS:会員：¥0, DLIB:会員：¥0 | ||
| Item type | SIG Technical Reports(1) | |||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 公開日 | 2024-10-29 | |||||||||||
| タイトル | ||||||||||||
| タイトル | ReTrack-SAM 2: SAM 2における一時的なシーン変化に頑強な類似度ベースのメモリ選択機構 | |||||||||||
| 言語 | ||||||||||||
| 言語 | jpn | |||||||||||
| キーワード | ||||||||||||
| 主題Scheme | Other | |||||||||||
| 主題 | 一般セッション3 | |||||||||||
| 資源タイプ | ||||||||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_18gh | |||||||||||
| 資源タイプ | technical report | |||||||||||
| 著者所属 | ||||||||||||
| NTT DOCOMO, INC. | ||||||||||||
| 著者所属 | ||||||||||||
| NTT DOCOMO, INC. | ||||||||||||
| 著者所属 | ||||||||||||
| NTT DOCOMO, INC. | ||||||||||||
| 著者所属(英) | ||||||||||||
| en | ||||||||||||
| NTT DOCOMO, INC. | ||||||||||||
| 著者所属(英) | ||||||||||||
| en | ||||||||||||
| NTT DOCOMO, INC. | ||||||||||||
| 著者所属(英) | ||||||||||||
| en | ||||||||||||
| NTT DOCOMO, INC. | ||||||||||||
| 著者名 |
別宮, 広朗
× 別宮, 広朗
× 水野, 涼介
× 北出, 卓也
|
|||||||||||
| 論文抄録 | ||||||||||||
| 内容記述タイプ | Other | |||||||||||
| 内容記述 | 本研究では，動画に対するプロンプトベースのセグメンテーションモデルである SAM 2 の検出性能の改善を目的とし，一時的なシーン変化や対象領域の消失に対応する Reappearance Tracking SAM 2 (ReTrack-SAM 2) を提案する．SAM 2は，対象領域が一時的に画面から消えると，再出現時に領域検出性能が低下するという課題がある．この課題の原因は，SAM 2 は推論時に過去の推論結果を格納するメモリを利用しているものの，直前のメモリ情報に依存していることにあると考えられる．そこで本研究では，シーンの切り替わりによる対象領域の消失があっても，検出性能を維持するために，フレーム間の類似度に基づくメモリ選択機構と類似度の順位に基づくメモリの重み付けを提案する．ReTrack-SAM 2 は，対象領域が消失するシーンを含む動画データにおいて，SAM 2 と比較して平均 2% の IoU および F1 スコアの向上を実現し，特定の動画では IoU が最大で 86% 改善した．また，ReTrack-SAM 2 はシーン変化のない動画においても，IoU および F1 スコアで優れた結果を示した． | |||||||||||
| 書誌レコードID | ||||||||||||
| 収録物識別子タイプ | NCID | |||||||||||
| 収録物識別子 | AA11515904 | |||||||||||
| 書誌情報 |
研究報告高度交通システムとスマートコミュニティ（ITS） 巻 2024-ITS-99, 号 17, p. 1-8, 発行日 2024-10-29 |
|||||||||||
| ISSN | ||||||||||||
| 収録物識別子タイプ | ISSN | |||||||||||
| 収録物識別子 | 2188-8965 | |||||||||||
| Notice | ||||||||||||
| SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc. | ||||||||||||
| 出版者 | ||||||||||||
| 言語 | ja | |||||||||||
| 出版者 | 情報処理学会 | |||||||||||
