2026-05-14T16:52:55Z https://ipsj.ixsq.nii.ac.jp/oai

oai:ipsj.ixsq.nii.ac.jp:00234735 2025-01-19T09:42:33Z 1164:5159:11541:11627

生成AIを用いたマルチモーダル対話システムの評価 Evaluation of Multimodal Dialogue Systems Using Generative AI 関戸, 陽士 小坂, 哲夫 Yoji, Sekido Tetuo, Kosaka ポスターセッション2 本研究では，マルチモーダル対話システムにおける生成 AI の利用と評価に関して述べる．これまで我々は音声対話システムに表情認識などを追加したマルチモーダル対話システムを構築してきた．従来のシステムでは対話管理に有限状態トランスデューサを用い，状態遷移を人手により構築してきた．しかし人手による方法では多様な対話に対応できず，対話の自由度が低いという問題点があった．そこで対話管理部に大規模言語モデルの一つである ChatGPT を用い自由度の向上を図る．提案システムでは音声による対話の他，表情認識技術を用いてユーザの表情を読み取り，その結果によりエージェントの表情を決定する．音声情報と表情情報を併用することで，より人間らしいインタラクションの実現を目指す．実験では従来の手書きシナリオベースの対話システムと ChatGPT を組み込んだシステムの比較を行った．この結果提案システムは従来のシステムと比較して対話の自由度が大幅に向上し，継続使用欲求が有意に向上することが示された． 情報処理学会 2024-06-07 jpn technical report https://ipsj.ixsq.nii.ac.jp/records/234735 2188-8663 AN10442647 研究報告音声言語情報処理（SLP） 2024-SLP-152 48 1 6 https://ipsj.ixsq.nii.ac.jp/record/234735/files/IPSJ-SLP24152048.pdf application/pdf 1.7 MB 2026-06-07