WEKO3
アイテム
Sparkにおけるリダクション及びトランスフォーメーション処理のGPU実行
https://ipsj.ixsq.nii.ac.jp/records/161579
https://ipsj.ixsq.nii.ac.jp/records/1615791f782e97-0285-4f22-b933-092cc7ec8c61
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
IPSJ-Z78-5H-01.pdf (407.4 kB)
|
Copyright (c) 2016 by the Information Processing Society of Japan
|
|
| オープンアクセス | ||
| Item type | National Convention(1) | |||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 公開日 | 2016-03-10 | |||||||||||
| タイトル | ||||||||||||
| タイトル | Sparkにおけるリダクション及びトランスフォーメーション処理のGPU実行 | |||||||||||
| 言語 | ||||||||||||
| 言語 | jpn | |||||||||||
| キーワード | ||||||||||||
| 主題Scheme | Other | |||||||||||
| 主題 | コンピュータシステム | |||||||||||
| 資源タイプ | ||||||||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_5794 | |||||||||||
| 資源タイプ | conference paper | |||||||||||
| 著者所属 | ||||||||||||
| 慶大 | ||||||||||||
| 著者所属 | ||||||||||||
| 慶大 | ||||||||||||
| 著者所属 | ||||||||||||
| 慶大 | ||||||||||||
| 著者名 |
大野, 泰弘
× 大野, 泰弘
× 森島, 信
× 松谷, 宏紀
|
|||||||||||
| 論文抄録 | ||||||||||||
| 内容記述タイプ | Other | |||||||||||
| 内容記述 | 大規模データ向けインメモリ型分散処理フレームワークSparkにおける、リダクション及びトランスフォーメーション処理をGPUを用いて高速化する。既存のSparkは、再構成可能データセットであるRDDを用いてデータを処理するが、GPUを考慮しないためGPUが備わっていても活用できない。この論文では、計算インテンシブな処理の際、RDDを基にした配列を作成しGPUデバイス側に転送してCUDAで処理することを提案する。これにより、Sparkのリダクション及びトランスフォーメーションの計算量が多い操作を高速化できる。また、これらの操作は従来のSparkのRDD操作と同様に行え、制限はほとんどない。 | |||||||||||
| 書誌レコードID | ||||||||||||
| 収録物識別子タイプ | NCID | |||||||||||
| 収録物識別子 | AN00349328 | |||||||||||
| 書誌情報 |
第78回全国大会講演論文集 巻 2016, 号 1, p. 201-202, 発行日 2016-03-10 |
|||||||||||
| 出版者 | ||||||||||||
| 言語 | ja | |||||||||||
| 出版者 | 情報処理学会 | |||||||||||
