WEKO3
アイテム
スプレッドシート形式設計資料に対するRAG誤答分析を通じた回答精度向上手法
https://ipsj.ixsq.nii.ac.jp/records/2004404
https://ipsj.ixsq.nii.ac.jp/records/2004404daa19836-a12d-4914-ab2e-fe10f7ace30a
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
IPSJ-SES2025034.pdf (206.2 KB)
2027年9月9日からダウンロード可能です。
|
Copyright (c) 2025 by the Information Processing Society of Japan
|
|
| 非会員：¥660, IPSJ:学会員：¥330, SE:会員：¥0, DLIB:会員：¥0 | ||
| Item type | Symposium(1) | |||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 公開日 | 2025-09-09 | |||||||||||||
| タイトル | ||||||||||||||
| 言語 | ja | |||||||||||||
| タイトル | スプレッドシート形式設計資料に対するRAG誤答分析を通じた回答精度向上手法 | |||||||||||||
| タイトル | ||||||||||||||
| 言語 | en | |||||||||||||
| タイトル | Methods for Improving Answering Accuracy of RAG on Spreadsheet Design Documents via Failure Analysis | |||||||||||||
| 言語 | ||||||||||||||
| 言語 | jpn | |||||||||||||
| キーワード | ||||||||||||||
| 主題Scheme | Other | |||||||||||||
| 主題 | ポスター論文 | |||||||||||||
| 資源タイプ | ||||||||||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_5794 | |||||||||||||
| 資源タイプ | conference paper | |||||||||||||
| 著者所属 | ||||||||||||||
| (株)日立製作所研究開発グループ | ||||||||||||||
| 著者所属 | ||||||||||||||
| (株)日立製作所研究開発グループ | ||||||||||||||
| 著者所属 | ||||||||||||||
| (株)日立システムズ生産技術本部 | ||||||||||||||
| 著者所属 | ||||||||||||||
| (株)日立システムズ生産技術本部 | ||||||||||||||
| 著者所属(英) | ||||||||||||||
| en | ||||||||||||||
| Hitachi, Ltd. Research & Development Group | ||||||||||||||
| 著者所属(英) | ||||||||||||||
| en | ||||||||||||||
| Hitachi, Ltd. Research & Development Group | ||||||||||||||
| 著者所属(英) | ||||||||||||||
| en | ||||||||||||||
| Hitachi Systems, Ltd. Production Technology Division | ||||||||||||||
| 著者所属(英) | ||||||||||||||
| en | ||||||||||||||
| Hitachi Systems, Ltd. Production Technology Division | ||||||||||||||
| 著者名 |
増田,亮
× 増田,亮
× 是木,玄太
× 石川,貞裕
× 山口,潔
|
|||||||||||||
| 論文抄録 | ||||||||||||||
| 内容記述タイプ | Other | |||||||||||||
| 内容記述 | ソフトウェア開発の現場では，複雑なレイアウトの設計資料が，スプレッドシートを中心とする半構造化文書で管理されており，大規模言語モデル(LLM)による情報活用が期待される．LLMの応答精度は質問文の設計や資料作成時の記述ルール等のノウハウに大きく依存する一方で，半構造化文書向けの知見は十分に蓄積されていない．本研究では，RAGの誤答事例を分析し，改善過程からノウハウを抽出するアプローチを提案する．117件のテスト質問による評価で，「表タイトルの隣接配置」等のノウハウを抽出し，それらを適用した再実験では，正答率が83.8%から88.9%に向上した．この結果は，誤答分析に基づくノウハウ抽出が，設計資料へのLLM活用に有効であることを示唆する． | |||||||||||||
| 書誌情報 |
ソフトウェアエンジニアリングシンポジウム2025論文集 巻 2025, p. 218-219, 発行日 2025-09-09 |
|||||||||||||
| 出版者 | ||||||||||||||
| 言語 | ja | |||||||||||||
| 出版者 | 情報処理学会 | |||||||||||||
