@techreport{oai:ipsj.ixsq.nii.ac.jp:00047942,
 author = {加藤恒昭 and 福本, 淳一 and 桝井, 文人 and 神門, 典子 and Tsuneaki, Kato and Jun'ichi, Fukumoto and Fumito, Masui and Noriko, Kando},
 issue = {36(2006-NL-172)},
 month = {Mar},
 note = {NTCIR-5 QAC3 (Question Answering Challenge 3)で実施された情報アクセス対話に向けた質問応答技術の評価について，そのタスクであるIAD (Information Access Dialogue)タスクとそこによせられた技術を述べる．IADタスクは，利用者がレポート執筆を目的として対話的に質問応答システムを利用する状況を想定したもので，そこで必要となる対話文脈を考慮した適切な質問の解釈，つまり照応解消や省略処理等のいわゆる文脈処理を評価の対象に含めている．IADタスクによる評価はQAC2のsubtask 3としての実施に次いで２度目となるが，今回は質問範囲，正解範囲の精緻化を行うとともに，その評価を自然なものとするための多段階評価の採用や正解セットという概念の導入等，様々な工夫を行っている．また，今回の実施におけるテストセット構築ではWoZ方式という新しい試みを行った．その実施結果からは，新しい試みやこのタスクに関する着実な技術進歩が伺われる．, This paper describes the evaluation task of question answering technologies for handling information access dialogues and a workshop using it conducted in NTCIR-5 QAC3 (Question Answering Challenge 3). This task assumes interactive use of QA systems and evaluates, among other things, the abilities needed under such circumstances, i.e. proper interpretation of questions under a given dialogue context; in other words, context processing abilities such as anaphora resolution and ellipses handling (we refer to the task as the IAD task, where IAD stands for Information Access Dialogue, and to the whole workshop as QAC3). The IAD task in QAC3 is based on QAC2 subtask 3 with several improvements, including elaboration of the scope of questions and answers and introduction of multi-grade evaluation and the concept of a correct answer set. In addition, a new WoZ method was devised and applied in the test set construction.  New trials and advances in existing methods were observed from the submission results to the workshop.},
 title = {情報アクセス対話に向けた質問応答技術の評価 ふたたび   -- NTCIR-5 QAC3での試み --},
 year = {2006}
}