Grid環境における大規模クラスタ向けジョブマネージメントアーキテクチャの実装及び性能評価

• Item type: SIG Technical Reports(1)
• 公開日: 2002-03-07
• タイトル: Grid環境における大規模クラスタ向けジョブマネージメントアーキテクチャの実装及び性能評価
• タイトル / 言語: en
• タイトル: Implementation and Evaluation of a Scalable Job Management Architecture for Large - Scale PC Cluster on the Grid Environment
• 言語: jpn
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_18gh
• 資源タイプ: technical report
• 著者所属: 東京工業大学
• 著者所属: 東京工業大学
• 著者所属: 株式会社SRA
• 著者所属: 株式会社SRA
• 著者所属: 産業技術総合研究所
• 著者所属: 産業技術総合研究所
• 著者所属(英): en
• 著者所属(英): Tokyo Institute of Technology
• 著者所属(英): en
• 著者所属(英): Tokyo Institute of Technology
• 著者所属(英): en
• 著者所属(英): Software Research Associates,Inc.
• 著者所属(英): en
• 著者所属(英): Software Research Associates,Inc.
• 著者所属(英): en
• 著者所属(英): National Institute of Advanced Industrial Science and Technology
• 著者所属(英): en
• 著者所属(英): National Institute of Advanced Industrial Science and Technology
• 著者名: 岩崎, 聖; 松岡, 聡; 曽田, 哲之; 平野, 基孝; 建部修見; 関口, 智嗣
• 著者名(英): Satoru, Iwasaki; Satoshi, Matsuoka; Noriyuki, Soda; Motonori, Hirano; Osamu, Tatebe; Satoshi, Sekiguchi
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: 我々は Grid Data Farm(Gfarm)システム用のジョブ起動アーキテクチャの設計・実装を行っている．Gfarm システムは数千から数万ノード規模の PC クラスタで構成され，ノード間の通信・認証に GSI を用いている．このため，Gfarm システムでジョブを起動する際，ナイーブな実装を用いるとノード数に比例した GSI 認証コストが発生し，数千プロセスからなるジョブの起動に数千秒かかることが予想される．本稿で述べるアーキテクチャでは，あらかじめ確立済みのコネクションを用いることで起動要求伝達時の認証コストを回避する．実装中のシステムでジョブの起動に要する時間を計測した結果，15 ノードで 3.5 秒，63 ノードで 6 秒と想定したスケーラビリティは得られなかったが，これはジョブ起動プロトコルに問題があり，プロトコルを改善することでさらなるスケーラビリティが得られると考えている．
• 論文抄録(英) / 内容記述タイプ: Other
• 論文抄録(英) / 内容記述: In this paper we describe the design and implementation of the job launch architecture for Grid Data Farm(Gfarm) system. Gfarm system is composed of PC clusters with ten thousands of nodes on the Grid. Gfarm system uses GSI for communication and authentication between nodes. Because of this, if an ingenuous method is used to start a job on the Gfarm system, the GSI authentication cost which is in proportion to the number of nodes occurs, and expects that the start of the job which consists of thousands of processes takes several thousand seconds. We avoid the authentication cost by using the connection which has been established in advance. Our system shows that the job launching time is 3.5 second with 15 nodes and 6 second with 63 nodes. We think that we can achieve more scalability by improving job-launching protocol.
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AN10463942
• 書誌情報: 情報処理学会研究報告ハイパフォーマンスコンピューティング（HPC）; 巻 2002, 号 22(2001-HPC-089), p. 37-42, 発行日 2002-03-07
• Notice: SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc.
• 出版者 / 言語: ja
• 出版者: 情報処理学会