WEKO3
アイテム
特性を考慮したHadoopジョブのI/O性能の向上
https://ipsj.ixsq.nii.ac.jp/records/195897
https://ipsj.ixsq.nii.ac.jp/records/195897457af1c6-caf5-4f0a-9eb3-868593597c9a
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
|
|
Copyright (c) 2019 by the Information Processing Society of Japan
|
|
| オープンアクセス | ||
| Item type | SIG Technical Reports(1) | |||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 公開日 | 2019-05-23 | |||||||||||
| タイトル | ||||||||||||
| タイトル | 特性を考慮したHadoopジョブのI/O性能の向上 | |||||||||||
| 言語 | ||||||||||||
| 言語 | jpn | |||||||||||
| キーワード | ||||||||||||
| 主題Scheme | Other | |||||||||||
| 主題 | ストレージ | |||||||||||
| 資源タイプ | ||||||||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_18gh | |||||||||||
| 資源タイプ | technical report | |||||||||||
| 著者所属 | ||||||||||||
| 工学院大学 | ||||||||||||
| 著者所属 | ||||||||||||
| フロリダ大学 | ||||||||||||
| 著者所属 | ||||||||||||
| 工学院大学 | ||||||||||||
| 著者名 |
中上, 誠
× 中上, 誠
× Jose, A. B. Fortes
× 山口, 実靖
|
|||||||||||
| 論文抄録 | ||||||||||||
| 内容記述タイプ | Other | |||||||||||
| 内容記述 | Hadoop はビッグデータ処理などで用いられる重要なプラットフォームとなっている.ビッグデータ処理は,大容量ストレージとして HDD を用いることも多い.Hadoop のジョブにはそれぞれ,使用資源(CPUやHDD)やストレージアクセス方法(シーケンシャルやランダム)に特徴があり,これら特徴を考慮してデータをストレージに配置することによりジョブの実行時間の短縮が可能であると予想される.本稿では,ジョブの特徴を考慮したストレージ内ファイル格納場所最適化手法を提案する.そして,性能評価によりその有効性を示す. | |||||||||||
| 書誌レコードID | ||||||||||||
| 収録物識別子タイプ | NCID | |||||||||||
| 収録物識別子 | AN10444176 | |||||||||||
| 書誌情報 |
研究報告システムソフトウェアとオペレーティング・システム(OS) 巻 2019-OS-146, 号 13, p. 1-8, 発行日 2019-05-23 |
|||||||||||
| ISSN | ||||||||||||
| 収録物識別子タイプ | ISSN | |||||||||||
| 収録物識別子 | 2188-8795 | |||||||||||
| Notice | ||||||||||||
| SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc. | ||||||||||||
| 出版者 | ||||||||||||
| 言語 | ja | |||||||||||
| 出版者 | 情報処理学会 | |||||||||||