異種プログラミング言語間での高速なデータ共有を実現する軽量データ変換技術

• Item type: SIG Technical Reports(1)
• 公開日: 2022-05-19
• タイトル: 異種プログラミング言語間での高速なデータ共有を実現する軽量データ変換技術
• 言語: jpn
• キーワード / 主題Scheme: Other
• キーワード / 主題: クラウド
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_18gh
• 資源タイプ: technical report
• 著者所属: 慶應義塾大学
• 著者所属: 富士通株式会社コンピューティング研究所
• 著者所属: 慶應義塾大学
• 著者所属(英): en
• 著者所属(英): Keio University
• 著者所属(英): en
• 著者所属(英): Keio University
• 著者名: 野澤, 真伸; 今村, 智史; 河野, 健二
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: 異種プログラミング言語を併用することで，それぞれの長所を活かしてアプリを実装する場合がある．その際，異種プログラミング言語間でデータ構造を共有する処理が必要となる．データ共有を行うためには，データ構造を特定のプログラミング言語やマシンアーキテクチャに依存しない中立なフォーマットを経由してやりとりすることが一般的である．中立なフォーマットへの/からの変換をシリアライズ/デシリアライズといい，特に不揮発性メモリのような高速ストレージを媒介してデータ共有を行う場合，そのオーバーヘッドは無視できない．本論文では異言語間でのデータ共有高速化の手法を提案する．異言語間でのデータ共有を行う場合，あらかじめデータ共有を行う言語やアーキテクチャが特定できる場合も多く，そのような状況に特化した方式を示す．例えば，数値計算の前処理を Julia で行い，その後の計算処理を Python で行う場合などがある．このような状況では，1) 汎用性の高い中立なフォーマットを用いる必要がないため，シリアライズ/デシリアライズが簡略化できることに加え，2) ランダムアクセスが高速であるという永続メモリの特性を活かしたシリアライズ/デシリアライズ処理が可能となる．提案手法を Python と Julia 間のデータ共有に用い，Python と Julia に実装された従来のシリアライズ/デシリアライズ処理と比較したところ，Python から Julia にデータを送信する場合は，配列のシリアライズとデシリアライズがそれぞれ 1.57 倍と 3.03×106 倍，辞書のシリアライズとデシリアライズが最大でそれぞれ 2.38 倍と 1.23 倍の高速化が可能であることがことが確認できた．また Julia から Python にデータを送信する場合は，配列のシリアライズとデシリアライズはそれぞれ 3.26 倍と 4.06×105 倍，辞書のシリアライズとデシリアライズは最大でそれぞれ 1.78 倍と 14.4 倍の高速化が可能であることが確認できた．
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AN10444176
• 書誌情報: 研究報告システムソフトウェアとオペレーティング・システム（OS）; 巻 2022-OS-155, 号 7, p. 1-8, 発行日 2022-05-19
• ISSN / 収録物識別子タイプ: ISSN
• ISSN / 収録物識別子: 2188-8795
• Notice: SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc.
• 出版者 / 言語: ja
• 出版者: 情報処理学会