| Item type |
SIG Technical Reports(1) |
| 公開日 |
2017-07-19 |
| タイトル |
|
|
タイトル |
「京」におけるジョブI/OによるローカルMDS負荷の分析 |
| タイトル |
|
|
言語 |
en |
|
タイトル |
Analysis of the Load of Local Meta Data Server Access from the Job I/O on the K computer |
| 言語 |
|
|
言語 |
jpn |
| キーワード |
|
|
主題Scheme |
Other |
|
主題 |
ストレージ |
| 資源タイプ |
|
|
資源タイプ識別子 |
http://purl.org/coar/resource_type/c_18gh |
|
資源タイプ |
technical report |
| 著者所属 |
|
|
|
理化学研究所 |
| 著者所属 |
|
|
|
富士通株式会社 |
| 著者所属 |
|
|
|
富士通株式会社 |
| 著者所属 |
|
|
|
理化学研究所 |
| 著者所属(英) |
|
|
|
en |
|
|
RIKEN |
| 著者所属(英) |
|
|
|
en |
|
|
FUJITSU, LTD. |
| 著者所属(英) |
|
|
|
en |
|
|
FUJITSU, LTD. |
| 著者所属(英) |
|
|
|
en |
|
|
RIKEN |
| 著者名 |
黒田, 明義
井上, 俊介
関澤, 龍一
南, 一生
|
| 著者名(英) |
Akiyoshi, Kuroda
Shunsuke, Inoue
Ryuichi, Sekizawa
Kazuo, Minami
|
| 論文抄録 |
|
|
内容記述タイプ |
Other |
|
内容記述 |
近年 HPC システムの運用の現場で，様々な問題が報告されている．ジョブ実行時間の変動の問題は，要因が複雑に絡まり，原因の究明や解決が難しい問題の一つである．変動が大きいものの中には，ジョブが予定時間内に終了しない事例もあり，解析により，分散ファイルシステムでの I / O によるメタデータサーバ (MDS) の負荷が，性能限界まで達している事例があることが分かった．本報では，ノード単位で蓄積されている MDS 処理命令数のカウンタ情報を集約し，ジョブとの関係を解析するためのシステムを構築したので，その概要並びに解析事例を紹介する．本解析により，MDS 負荷が高いジョブの影響で，他のジョブが想定時間内に終了しない事例が見つかった．また小規模な並列数のジョブでも MDS 負荷が高いものがあることが分かった．MDS 負荷が高い状態では I / O 処理の一部が滞るため，過負荷状態の対策を行うことは，計算資源の無駄な消費の削減につながる． |
| 書誌レコードID |
|
|
収録物識別子タイプ |
NCID |
|
収録物識別子 |
AN10463942 |
| 書誌情報 |
研究報告ハイパフォーマンスコンピューティング（HPC）
巻 2017-HPC-160,
号 27,
p. 1-6,
発行日 2017-07-19
|
| ISSN |
|
|
収録物識別子タイプ |
ISSN |
|
収録物識別子 |
2188-8841 |
| Notice |
|
|
|
SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc. |
| 出版者 |
|
|
言語 |
ja |
|
出版者 |
情報処理学会 |
IPSJ-HPC17160027.pdf (1.8 MB)
