WEKO3
アイテム
センサー種ごとの埋め込みを用いたマルチモーダルなライフログデータの情報検索
https://ipsj.ixsq.nii.ac.jp/records/2005069
https://ipsj.ixsq.nii.ac.jp/records/200506948257b70-3c34-4eec-b148-227467b3ef16
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
IPSJ-DICOMO2025044.pdf (19.3 MB)
2027年6月18日からダウンロード可能です。
|
Copyright (c) 2025 by the Information Processing Society of Japan
|
|
| 非会員：¥660, IPSJ:学会員：¥330, DLIB:会員：¥0 | ||
| Item type | Symposium(1) | |||||||||
|---|---|---|---|---|---|---|---|---|---|---|
| 公開日 | 2025-06-18 | |||||||||
| タイトル | ||||||||||
| 言語 | ja | |||||||||
| タイトル | センサー種ごとの埋め込みを用いたマルチモーダルなライフログデータの情報検索 | |||||||||
| 言語 | ||||||||||
| 言語 | jpn | |||||||||
| キーワード | ||||||||||
| 主題Scheme | Other | |||||||||
| 主題 | ヘルスケア | |||||||||
| 資源タイプ | ||||||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_5794 | |||||||||
| 資源タイプ | conference paper | |||||||||
| 著者所属 | ||||||||||
| デンソーアイティーラボラトリ | ||||||||||
| 著者所属 | ||||||||||
| デンソーアイティーラボラトリ | ||||||||||
| 著者名 |
寺尾, 恭範
× 寺尾, 恭範
× 太刀岡, 勇気
|
|||||||||
| 論文抄録 | ||||||||||
| 内容記述タイプ | Other | |||||||||
| 内容記述 | 本研究では，画像とセンサー値を対象としたマルチモーダル検索において，センサー種ごとの特性に応じた埋め込み表現を作成する手法を提案する．連続値は多層パーセプトロン，カテゴリ情報はテキストプロンプト化と事前学習済み言語モデルによりエンコードし，それらを統合してセンサー値埋め込みを得る．Lifelog データセットを用いた評価では，画像をクエリとする検索 (img2sen) で従来手法に比べて mean reciprocal rank (MRR) が 13.2% 向上した．一方，センサー値をクエリとする検索 (sen2img) では MRR が 3.8% 低下し，埋め込み空間の構造と検索方向の関係が性能に与える影響が示された．モデル構造やハイパーパラメータを変化させた実験では，モダリティ間のアライメント手法や訓練時の効果的な hard negative 活用の重要性が示唆された． | |||||||||
| 書誌情報 |
マルチメディア，分散，協調とモバイル(DICOMO2025)シンポジウム2025論文集 巻 2025, p. 330-337, 発行日 2025-06-18 |
|||||||||
| 出版者 | ||||||||||
| 言語 | ja | |||||||||
| 出版者 | 情報処理学会 | |||||||||
