MPI_Allreduceの「京」上での実装と評価

• Item type: SIG Technical Reports(1)
• 公開日: 2011-11-21
• タイトル: MPI_Allreduceの「京」上での実装と評価
• タイトル / 言語: en
• タイトル: Implementation and Evaluation of MPI_Allreduce on the K computer
• 言語: jpn
• キーワード / 主題Scheme: Other
• キーワード / 主題: 通信
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_18gh
• 資源タイプ: technical report
• 著者所属: 富士通株式会社
• 著者所属: 富士通株式会社
• 著者所属: 富士通株式会社
• 著者所属: 富士通株式会社
• 著者所属: 九州大学
• 著者所属: 九州大学
• 著者所属: 理化学研究所
• 著者所属: 理化学研究所
• 著者所属: 理化学研究所
• 著者所属: 理化学研究所
• 著者所属(英): en
• 著者所属(英): Fujitsu Ltd.
• 著者所属(英): en
• 著者所属(英): Fujitsu Ltd.
• 著者所属(英): en
• 著者所属(英): Fujitsu Ltd.
• 著者所属(英): en
• 著者所属(英): Fujitsu Ltd.
• 著者所属(英): en
• 著者所属(英): Kyushu University
• 著者所属(英): en
• 著者所属(英): Kyushu University
• 著者所属(英): en
• 著者所属(英): RIKEN
• 著者所属(英): en
• 著者所属(英): RIKEN
• 著者所属(英): en
• 著者所属(英): RIKEN
• 著者所属(英): en
• 著者所属(英): RIKEN
• 著者名: 松本, 幸; 安達, 知也; 田中, 稔; 住元, 真司; 曽我, 武史; 南里, 豪志; 宇野, 篤也; 黒川, 原佳; 庄司, 文由; 横川, 三津夫
• 著者名(英): Yuki, Matsumoto; Tomoya, Adachi; Minoru, Tanaka; Shinji, Sumimoto; Takeshi, Soga; Takeshi, Nanri; Atsuya, Uno; Motoyoshi, Kurokawa; Fumiyoshi, Shoji; Mitsuo, Yokokawa
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: 本報告では，8 万台以上のノードを直接網で結合した 「京」 における MPI 集団通信の高速化について述べる．従来の MPI 集団通信アルゴリズムは，間接網向けのアルゴリズムが主体であり，これを直接網に適用してもメッセージの衝突のため効率的な通信ができない．このため，高い通信性能を得るためには直接網を意識した集団通信アルゴリズムが必須となる．そこで我々は，トーラス向け Allreduce アルゴリズム Trinaryx3 Allreduce を設計し，「京」 向けの MPI ライブラリに実装した．Trinaryx3 Allreduce は，「京」 の特長である複数 RDMA エンジンを同時に活用することができる．実装を評価した結果，既存の間接網向けアルゴリズムと比較して，5 倍程度バンド幅が向上することを確認した．
• 論文抄録(英) / 内容記述タイプ: Other
• 論文抄録(英) / 内容記述: This paper reports a method of speeding up MPI collective communication on the K computer, that consists of more than 80 thousand computing nodes connected by direct network. Almost all existing MPI libraries only implement algorithms optimized for indirect network. However, such algorithms perform poor on direct network because of collisions of the messages. Thus, in order to achieve high performance on direct network, it is necessary to implement collective algorithms optimized for the network topology. In this paper, Trinaryx3 Allreduce algorithm is designed and implemented in the MPI library for the K computer. The algorithm is optimized for torus network and enables utilizing multiple RDMA engines, one of the strengths of the K computer. The evaluation result shows that the new implementation achieves five times higher bandwidth than existing one, optimized for indirect network.
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AN10463942
• 書誌情報: 研究報告ハイパフォーマンスコンピューティング（HPC）; 巻 2011-HPC-132, 号 6, p. 1-10, 発行日 2011-11-21
• Notice: SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc.
• 出版者 / 言語: ja
• 出版者: 情報処理学会