WEKO3
アイテム
GEOGrid の構築に向けたストレージシステムの予備評価
https://ipsj.ixsq.nii.ac.jp/records/28801
https://ipsj.ixsq.nii.ac.jp/records/2880155492dbf-bfe4-4cc4-a95c-3a31bbca80b7
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
IPSJ-HPC07111048.pdf (554.2 kB)
|
Copyright (c) 2007 by the Information Processing Society of Japan
|
|
| オープンアクセス | ||
| Item type | SIG Technical Reports(1) | |||||||
|---|---|---|---|---|---|---|---|---|
| 公開日 | 2007-08-03 | |||||||
| タイトル | ||||||||
| タイトル | GEOGrid の構築に向けたストレージシステムの予備評価 | |||||||
| タイトル | ||||||||
| 言語 | en | |||||||
| タイトル | Evaluation of The Storage System for Building The GEO Grid | |||||||
| 言語 | ||||||||
| 言語 | jpn | |||||||
| 資源タイプ | ||||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_18gh | |||||||
| 資源タイプ | technical report | |||||||
| 著者所属 | ||||||||
| 産業技術総合研究所 | ||||||||
| 著者所属 | ||||||||
| 産業技術総合研究所 | ||||||||
| 著者所属 | ||||||||
| 株式会社 創夢 | ||||||||
| 著者所属 | ||||||||
| 産業技術総合研究所 | ||||||||
| 著者所属 | ||||||||
| 産業技術総合研究所 | ||||||||
| 著者所属 | ||||||||
| 産業技術総合研究所 | ||||||||
| 著者所属(英) | ||||||||
| en | ||||||||
| National Institute of Advanced Industrial Science and Technology (AIST) | ||||||||
| 著者所属(英) | ||||||||
| en | ||||||||
| National Institute of Advanced Industrial Science and Technology (AIST) | ||||||||
| 著者所属(英) | ||||||||
| en | ||||||||
| SOUM Corperation | ||||||||
| 著者所属(英) | ||||||||
| en | ||||||||
| National Institute of Advanced Industrial Science and Technology (AIST) | ||||||||
| 著者所属(英) | ||||||||
| en | ||||||||
| National Institute of Advanced Industrial Science and Technology (AIST) | ||||||||
| 著者所属(英) | ||||||||
| en | ||||||||
| National Institute of Advanced Industrial Science and Technology (AIST) | ||||||||
| 著者名 |
谷村, 勇輔
× 谷村, 勇輔
|
|||||||
| 著者名(英) |
Yusuke, TANIMURA
× Yusuke, TANIMURA
|
|||||||
| 論文抄録 | ||||||||
| 内容記述タイプ | Other | |||||||
| 内容記述 | 衛星観測した数百 TB のデータをオンラインのハードディスクに保管し、必要に応じていつでも参照できる環境の整備が求められている。そのバックエンドとなるストレージは、大規模データの保存とそれらの高速処理を実現するシステムでなくてはならない。そのようなシステムを検討するために、ASTER 衛星データとそのアプリケーションを例に、Ｇfarm と Lustre を用いて同等のシステムを構築した場合のデータアクセスの性能と運用方法を比較した。性能面では ASTER アプリケーションのデータ処理を解析した上で、各ストレージシステムでのアプリケーションの実行性能を比較した。運用面では故障に対する備え方、メンテナンスの作業内容や課題を比較した。これらの調査により、より大規模な衛星観測データの保存システム、あるいは類似アプリケーションのためのストレージを構築するための指針を得た。 | |||||||
| 論文抄録(英) | ||||||||
| 内容記述タイプ | Other | |||||||
| 内容記述 | An infrastructure to store hundreds terabytes of satellite observation data in the online hard disk drives, and to allow geosciences researchers to access the data from anywhere at anytime, is highly expected. A backend storage system on that infrastructure needs to meet the requirements of huge data storing capacity and high-performance data access. In order to design and build this kind of HPC storage system, Gfarm and Lustre were compared by the ASTER satellite image data application. In terms of the performance comparison, the data processing part was profiled, and the execution time of the major data conversion program was measured on both storage systems. In addition, configuration for fault tolerance, daily maintenance and issues for operation were compared between the two systems. This study provides the information to build a larger storage system for the satellite image data, and other applications which have similar data access patterns to the ASTER application. | |||||||
| 書誌レコードID | ||||||||
| 収録物識別子タイプ | NCID | |||||||
| 収録物識別子 | AN10463942 | |||||||
| 書誌情報 |
情報処理学会研究報告ハイパフォーマンスコンピューティング（HPC） 巻 2007, 号 80(2007-HPC-111), p. 279-284, 発行日 2007-08-03 |
|||||||
| Notice | ||||||||
| SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc. | ||||||||
| 出版者 | ||||||||
| 言語 | ja | |||||||
| 出版者 | 情報処理学会 | |||||||
