日本語情報検索システム評価用テストコレクションの構築

• Item type: Journal(1)
• 公開日: 1999-09-15
• タイトル: 日本語情報検索システム評価用テストコレクションの構築
• タイトル / 言語: en
• タイトル: Construction of a Test Collection for the Evaluation of Japanese Information Retrieval Systems
• 言語: jpn
• キーワード / 主題Scheme: Other
• キーワード / 主題: 論文
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_6501
• 資源タイプ: journal article
• その他タイトル / その他のタイトル: 情報検索システム
• 著者所属: NTTサイバースペース研究所
• 著者所属: リコーソフトウェア研究所
• 著者所属: 図書館情報大学図書館情報学部
• 著者所属: お茶の水女子大学理学部
• 著者所属: 日本電気株式会社ヒューマンメディア研究所
• 著者所属: NTTコミュニケーションズ株式会社メディア技術開発センタ
• 著者所属: NTT東日本法人営業本部
• 著者所属: シャープ株式会社情報商品開発研究所
• 著者所属: 三菱電機株式会社産業システム研究所
• 著者所属: 富士ゼロックスIT事業開発部
• 著者所属: 富士ゼロックス総合研究所
• 著者所属: 富士通研究所コンピュータシステム研究所
• 著者所属: 株式会社NTTデータ技術開発本部
• 著者所属: 株式会社東芝デジタルメディア機器社情報サービス事業推進室
• 著者所属: 株式会社東芝研究開発センター
• 著者所属: 東京工業大学大学院情報理工学研究科
• 著者所属: 東京大学地震研究所
• 著者所属: 亜細亜大学教養部
• 著者所属(英): en
• 著者所属(英): NTT Cyber Space Laboratories
• 著者所属(英): en
• 著者所属(英): Software Research Center, Ricoh
• 著者所属(英): en
• 著者所属(英): University of Library and Information Science
• 著者所属(英): en
• 著者所属(英): Faculty of Science, Ochanomizu University
• 著者所属(英): en
• 著者所属(英): Human Media Res. Labs., NEC Corp
• 著者所属(英): en
• 著者所属(英): Media Technology Development Center, NTT Communications Co
• 著者所属(英): en
• 著者所属(英): Multimedia Business Department NIPPON TELEGRAPH AND TELEPHONE EAST Co
• 著者所属(英): en
• 著者所属(英): Information Systems Product Development Labs., Sharp Corp
• 著者所属(英): en
• 著者所属(英): Industrial Electrics & Systems Laboratory, Mitsubishi Electric Corp
• 著者所属(英): en
• 著者所属(英): IT Business Development Dept., Fuji Xerox Co., Ltd
• 著者所属(英): en
• 著者所属(英): Corporate Research Labs., Fuji Xerox Co., Ltd
• 著者所属(英): en
• 著者所属(英): Computer Systems Laboratories, Fujitsu Laboratories Ltd
• 著者所属(英): en
• 著者所属(英): Research and Development Headquarters, NTT DATA Corporation
• 著者所属(英): en
• 著者所属(英): Digital Media Equipment & Services Company, Toshiba Corporation
• 著者所属(英): en
• 著者所属(英): Toshiba R&D Center
• 著者所属(英): en
• 著者所属(英): Department of Computer Science, Tokyo Institute of Technology
• 著者所属(英): en
• 著者所属(英): ERI, University of Tokyo
• 著者所属(英): en
• 著者所属(英): Faculty of Liberal Arts, Asia University
• 著者名: 木本, 晴夫; 小川, 泰嗣; 石川, 徹也; 増永, 良文; 福島, 俊一; 田中, 智博; 中渡瀬, 秀一; 芥子, 育雄; 豊浦, 潤; 宮内, 忠信; 上田, 良寛; 松井, くにお; 木谷強; 三池, 誠司; 酒井, 哲也; 徳永, 健伸; 鶴岡, 弘; 安形, 輝
• 著者名(英): Haruo, Kimoto; Yasushi, Ogawa; Tetsuya, Ishikawa; Yoshifumi, Masunaga; Toshikazu, Fukushima; Tomohiro, Tanaka; Hidekazu, Nakawatase; Ikuo, Keshi; Jun, Toyoura; Tadanobu, Miyauchi; Yoshihiro, Ueda; Kunio, Matsui; Tsuyoshi, Kitani; Seiji, Miike; Tetsuya, Sakai; Takenobu, Tokunaga; Hiroshi, Tsuruoka; Teru, Agata
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: 本論文では 情報処理学会内のワーキンググループ活動によって構築し 1996年3月からモニタ公開している日本語情報検索システム評価用テストコレクションBMIR-J1の設計・構築・利用・評価について報告する. BMIR-J1は日本語情報検索システムのための初めてのテストコレクションであると向時に 情報検索システムに求められる 自然言語で表現された種々の検索要求を解釈・処理するためのファンクションの観点から検索要求を分類して提供している点が特長である. ファンクション分類したことにより システム間の比較評価として 全検索要求を用いた総合的/平均的な比較だけでなく 個別のファンクションごとの分析的な比較も行えるようになった. 同時に 高精度な情報検索システムの実現へ向けて 自然言語処理技術/知識処理技術を活用した取組みに期待される課題を 具体的な検索要求文の形で示したものでもある. 公開後 多くのモニタユーザによる活発な研究発表がなされ アンケート回答も多く寄せられている. これらからBMIR-J1の有効性と次期バージョンへの課題などが明らかになった.
• 論文抄録(英) / 内容記述タイプ: Other
• 論文抄録(英) / 内容記述: This paper describes BMIR-J1 (Benchmark for Information Retrieval Systems for Japanese texts Ver.1), which is designed as a test collection for Japanese information retrieval systems. The design principles, construction, user reports and the evaluation of BMIR-J1 are described. BMIR-J1, which was released for monitoring use in March 1996, was developed by a working group under the Special Interest Group on Database Systems in Information Processing Society of Japan. BMlR-J1 is the first test collection for Japanese information retrieval systems, although there are a couple of test collections for English information retrieval systems. One of the unique features of BMIR-J1 is that the queries are classified into five groups according to interpretation levels needed for processing these queries which are represented as natural language sentences. These query groups enable more analytical comparison of systems, while total comparison of systems using whole queries is possible. English test collections do not have these groups in themselves. The query groups presented by their queries themes to be studied and functions to be developed using natural language processing techniques and knowledge processing techniques for a next generation information retrieval system which will be more effective and user friendly. Since the release of BMIR-J1, many researchers and developers are using BMIR-J1, and there are a couple of research reports on the evaluation of each information retrieval system using BMlR-J1 as a test collection. Many BMIR-J1 user opinions show that BMIR-J1 is effective as a test collection for Japanese information retrieval systems, and also these opinions show future works for developing a next version of BMIR-J1.
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AN00116647
• 書誌情報: 情報処理学会論文誌; 巻 40, 号 9, p. 3537-3553, 発行日 1999-09-15
• ISSN / 収録物識別子タイプ: ISSN
• ISSN / 収録物識別子: 1882-7764