@techreport{oai:ipsj.ixsq.nii.ac.jp:00020173, author = {芥子, 育雄 and 木本, 晴夫 and 田中, 智博 and 石川, 徹也 and 増永, 良文 and 小川, 泰嗣 and 豊浦, 潤 and 福島, 俊一 and 宮内, 忠信 and 三池, 誠司 and 松井, くにお and 木谷強 and Keshi, Ikuo and Kimoto, Haruo and Tanaka, Tomohiro and Ishikawa, Tetsuya and Masunaga, Yoshifumi and Ogawa, Yasushi and Toyoura, Jun and Fukushima, Toshikazu and Miyauchi, Tadanobu and Miike, Seiji and Matsui, Kunio and Kitani, Tsuyoshi}, issue = {11(1995-DBS-106)}, month = {Jan}, note = {1996年3月にモニター公開を予定している,日本語テキストを対象とした,初めての情報検索システム評価用ベンチマークについて報告する.本ベンチマークは,600件の対象文書,60件の検索要求,及び正解集合(検索要求に対する最大正解文書数30件,最小正解文書数5件)から構成される.本ベンチマークの特徴は,情報検索システムに求められるシステム機能を5種類に分類し,各検索要求を正しく処理して正解を検索するために必要なシステム機能を付与した点にある.このため,各種の検索手法の優位性判定に本ベンチマークを利用することが可能である., In this paper, the first benchmark for Japanese information retrieval system is presented. It consists of three basic parts as follows: 600 documents, 60 questions, and right answers, which are from 5 to 30 documents, given to each question. Our working group in IPSJ-SIGDBS has developed such a benchmark, and proposed 5 functions which the best IR system should have and marked functions which were needed to get right answers to each question. By this major characteristics, the benchmark can be applied to evaluate various kinds of retrieval methods.}, title = {情報検索システム評価用ベンチマークVer.1.0(BMIR-J1)について}, year = {1996} }