{"links":{},"id":2010092,"metadata":{"_oai":{"id":"oai:ipsj.ixsq.nii.ac.jp:02010092","sets":["1164:4179:1771495534039:1781260401707"]},"path":["1781260401707"],"owner":"80578","recid":"2010092","title":["予測分布の偏りに着目したCLIPのモダリティギャップ分析"],"pubdate":{"attribute_name":"PubDate","attribute_value":"2026-06-21"},"_buckets":{"deposit":"c0898215-8f99-4ff9-a25f-65468e51ccfd"},"_deposit":{"id":"2010092","pid":{"type":"depid","value":"2010092","revision_id":0},"owners":[80578],"status":"published","created_by":80578},"item_title":"予測分布の偏りに着目したCLIPのモダリティギャップ分析","author_link":[],"item_titles":{"attribute_name":"タイトル","attribute_value_mlt":[{"subitem_title":"予測分布の偏りに着目したCLIPのモダリティギャップ分析","subitem_title_language":"ja"}]},"item_keyword":{"attribute_name":"キーワード","attribute_value_mlt":[{"subitem_subject":"マルチモーダル","subitem_subject_scheme":"Other"}]},"item_type_id":"4","publish_date":"2026-06-21","item_4_text_3":{"attribute_name":"著者所属","attribute_value_mlt":[{"subitem_text_value":"一橋大学大学院ソーシャル・データサイエンス研究科"},{"subitem_text_value":"一橋大学大学院ソーシャル・データサイエンス研究科"},{"subitem_text_value":"一橋大学大学院ソーシャル・データサイエンス研究科"},{"subitem_text_value":"一橋大学大学院ソーシャル・データサイエンス研究科"}]},"item_language":{"attribute_name":"言語","attribute_value_mlt":[{"subitem_language":"jpn"}]},"item_publisher":{"attribute_name":"出版者","attribute_value_mlt":[{"subitem_publisher":"情報処理学会","subitem_publisher_language":"ja"}]},"publish_status":"0","weko_shared_id":-1,"item_file_price":{"attribute_name":"Billing file","attribute_type":"file","attribute_value_mlt":[{"url":{"url":"https://ipsj.ixsq.nii.ac.jp/record/2010092/files/IPSJ-NL26268005.pdf","label":"IPSJ-NL26268005.pdf"},"date":[{"dateType":"Available","dateValue":"2028-06-21"}],"format":"application/pdf","billing":["billing_file"],"filename":"IPSJ-NL26268005.pdf","filesize":[{"value":"5.8 MB"}],"mimetype":"application/pdf","priceinfo":[{"tax":["include_tax"],"price":"660","billingrole":"5"},{"tax":["include_tax"],"price":"330","billingrole":"6"},{"tax":["include_tax"],"price":"0","billingrole":"23"},{"tax":["include_tax"],"price":"0","billingrole":"44"}],"accessrole":"open_date","version_id":"fdb3f638-8db6-4718-9b09-38d772f95b25","displaytype":"detail","licensetype":"license_note","license_note":"Copyright (c) 2026 by the Information Processing Society of Japan"}]},"item_4_creator_5":{"attribute_name":"著者名","attribute_type":"creator","attribute_value_mlt":[{"creatorNames":[{"creatorName":"佐藤,祥太"}]},{"creatorNames":[{"creatorName":"木山,朔"}]},{"creatorNames":[{"creatorName":"平澤,寅庄"}]},{"creatorNames":[{"creatorName":"小町,守"}]}]},"item_4_source_id_9":{"attribute_name":"書誌レコードID","attribute_value_mlt":[{"subitem_source_identifier":"AN10115061","subitem_source_identifier_type":"NCID"}]},"item_4_textarea_12":{"attribute_name":"Notice","attribute_value_mlt":[{"subitem_textarea_value":"SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc."}]},"item_resource_type":{"attribute_name":"資源タイプ","attribute_value_mlt":[{"resourceuri":"http://purl.org/coar/resource_type/c_18gh","resourcetype":"technical report"}]},"item_4_source_id_11":{"attribute_name":"ISSN","attribute_value_mlt":[{"subitem_source_identifier":"2188-8779","subitem_source_identifier_type":"ISSN"}]},"item_4_description_7":{"attribute_name":"論文抄録","attribute_value_mlt":[{"subitem_description":"CLIPにおける画像埋め込みとテキスト埋め込みの間のモダリティギャップを縮小することは，クロスモーダルなアライメントおよび下流タスク性能の向上につながると期待されている．しかし，画像埋め込みとテキスト埋め込みの間のモダリティギャップが小さくなったとしても，必ずしも一貫したタスク性能の向上が得られるわけではない．本研究では，この期待と実態の不一致について，zero-shot画像分類を題材にして分析する．zero-shot画像分類の正解率は，画像埋め込みとテキスト埋め込みのアライメントだけでなく，クラスごとの決定境界にも依存する．解析的に扱いやすいLinear補正を対象として，モダリティギャップの縮小がクラス間の相対的な決定マージンを変化させ，少数のクラスへ予測を集中させうることを示す．本研究では，このような出力空間において性能低下と関連して現れる予測集中の現象をPrediction-Level Hubnessと呼ぶ．さらに，複数のデータセットにわたる実験により，Linear補正だけでなく学習ベースの補正手法においても，モダリティギャップの縮小によるタスク性能の低下がPrediction-Level Hubnessの増大と一貫して関連していることを示す．これにより，モダリティギャップの縮小がCLIPのzero-shot分類性能を一貫して改善しない理由を，下流タスクの決定マージンの観点から体系的に説明する．本研究の結果は，モダリティギャップの縮小をアライメントの観点のみで評価するのではなく，下流タスクにおける予測構造への影響も含めて評価する必要があることを示唆している．","subitem_description_type":"Other"}]},"item_4_biblio_info_10":{"attribute_name":"書誌情報","attribute_value_mlt":[{"bibliographicPageEnd":"21","bibliographic_titles":[{"bibliographic_title":"研究報告自然言語処理（NL）"}],"bibliographicPageStart":"1","bibliographicIssueDates":{"bibliographicIssueDate":"2026-06-21","bibliographicIssueDateType":"Issued"},"bibliographicIssueNumber":"5","bibliographicVolumeNumber":"2026-NL-268"}]},"relation_version_is_last":true,"weko_creator_id":"80578"},"created":"2026-06-15T02:40:26.432256+00:00","updated":"2026-06-15T02:40:35.048746+00:00"}