@inproceedings{oai:ipsj.ixsq.nii.ac.jp:02005069,
 author = {寺尾, 恭範 and 太刀岡, 勇気},
 book = {マルチメディア，分散，協調とモバイル(DICOMO2025)シンポジウム2025論文集},
 month = {Jun},
 note = {本研究では，画像とセンサー値を対象としたマルチモーダル検索において，センサー種ごとの特性に応じた埋め込み表現を作成する手法を提案する．連続値は多層パーセプトロン，カテゴリ情報はテキストプロンプト化と事前学習済み言語モデルによりエンコードし，それらを統合してセンサー値埋め込みを得る．Lifelog データセットを用いた評価では，画像をクエリとする検索 (img2sen) で従来手法に比べて mean reciprocal rank (MRR) が 13.2% 向上した．一方，センサー値をクエリとする検索 (sen2img) では MRR が 3.8% 低下し，埋め込み空間の構造と検索方向の関係が性能に与える影響が示された．モデル構造やハイパーパラメータを変化させた実験では，モダリティ間のアライメント手法や訓練時の効果的な hard negative 活用の重要性が示唆された．},
 pages = {330--337},
 publisher = {情報処理学会},
 title = {センサー種ごとの埋め込みを用いたマルチモーダルなライフログデータの情報検索},
 volume = {2025},
 year = {2025}
}