WEKO3
アイテム
インデックス更新のためのパイプライン化手法
https://ipsj.ixsq.nii.ac.jp/records/88756
https://ipsj.ixsq.nii.ac.jp/records/887568d69a3e8-8dcb-4548-85c9-15f287216208
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
IPSJ-DPSWS2002026.pdf (502.2 kB)
|
Copyright (c) 2002 by the Information Processing Society of Japan
|
|
| オープンアクセス | ||
| Item type | Symposium(1) | |||||||
|---|---|---|---|---|---|---|---|---|
| 公開日 | 2002-10-16 | |||||||
| タイトル | ||||||||
| タイトル | インデックス更新のためのパイプライン化手法 | |||||||
| タイトル | ||||||||
| 言語 | en | |||||||
| タイトル | A Pipeline Processing Method for Index Update | |||||||
| 言語 | ||||||||
| 言語 | jpn | |||||||
| 資源タイプ | ||||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_5794 | |||||||
| 資源タイプ | conference paper | |||||||
| 著者所属 | ||||||||
| 東洋大学工学部情報工学科 | ||||||||
| 著者所属 | ||||||||
| ti980039@ds.cs.toyo.ac.jp | ||||||||
| 著者所属 | ||||||||
| 東洋大学工学部情報工学科 | ||||||||
| 著者所属 | ||||||||
| jju@ds.cs.toyo.ac.jp | ||||||||
| 著者所属 | ||||||||
| 東洋大学工学部情報工学科 | ||||||||
| 著者所属 | ||||||||
| uehara@cs.toyo.ac.jp | ||||||||
| 著者所属 | ||||||||
| 東洋大学工学部情報工学科 | ||||||||
| 著者所属 | ||||||||
| sakai@cs.toyo.ac.jp | ||||||||
| 著者所属 | ||||||||
| 東洋大学工学部情報工学科 | ||||||||
| 著者所属 | ||||||||
| mori@cs.toyo.ac.jp | ||||||||
| 著者所属(英) | ||||||||
| en | ||||||||
| Dept., of Information and Computer Sciences, Toyo Univ., Japan | ||||||||
| 著者所属(英) | ||||||||
| en | ||||||||
| ti980039@ds.cs.toyo.ac.jp | ||||||||
| 著者所属(英) | ||||||||
| en | ||||||||
| Dept., of Information and Computer Sciences, Toyo Univ., Japan | ||||||||
| 著者所属(英) | ||||||||
| en | ||||||||
| jju@ds.cs.toyo.ac.jp | ||||||||
| 著者所属(英) | ||||||||
| en | ||||||||
| Dept., of Information and Computer Sciences, Toyo Univ., Japan | ||||||||
| 著者所属(英) | ||||||||
| en | ||||||||
| uehara@cs.toyo.ac.jp | ||||||||
| 著者所属(英) | ||||||||
| en | ||||||||
| Dept., of Information and Computer Sciences, Toyo Univ., Japan | ||||||||
| 著者所属(英) | ||||||||
| en | ||||||||
| sakai@cs.toyo.ac.jp | ||||||||
| 著者所属(英) | ||||||||
| en | ||||||||
| Dept., of Information and Computer Sciences, Toyo Univ., Japan | ||||||||
| 著者所属(英) | ||||||||
| en | ||||||||
| mori@cs.toyo.ac.jp | ||||||||
| 著者名 |
宇田川, 稔
× 宇田川, 稔
|
|||||||
| 著者名(英) |
Minoru, Udagawa
× Minoru, Udagawa
|
|||||||
| 論文抄録 | ||||||||
| 内容記述タイプ | Other | |||||||
| 内容記述 | 既存のサーチエンジンでは,インデックス作成処理は文書収集と分離して実行されていた.インデックス作成処理は,文書収集より重いため,ボトルネックとなる.したがって,インデックス作成と文書収集は統合されるべきである.そこで,我々はパイプラインに基づく処理方式を提案する.本方式では一連の処理をマクロデータフローに基づく並行プロセスの集合でモデル化する.この方式はボトルネックを容易に推定できるという特徴を持つ.本文では,本方式を用いてインデックス更新の全過程におけるボトルネックの特定について述べる. | |||||||
| 論文抄録(英) | ||||||||
| 内容記述タイプ | Other | |||||||
| 内容記述 | In traditional search engines, indexing process is separated from crawling. Indexing often becomes bottleneck because indexing a file is heavier than fetching a file. Therefore both indexing and crawling processes should be integrated. So, we propose a pipeline based processing method, in which sequence of processing is modeled as a set of macro dataflow actors. It is easy for this method to detect the bottleneck. In this paper, we describe about a bottleneck detection method using pipeline model. | |||||||
| 書誌情報 |
マルチメディア通信と分散処理ワークショップ論文集 巻 2002, 号 15, p. 147-152, 発行日 2002-10-16 |
|||||||
| 出版者 | ||||||||
| 言語 | ja | |||||||
| 出版者 | 情報処理学会 | |||||||
