HeteroTSDB: 異種混合キーバリューストアを用いた自動階層化のための時系列データベースアーキテクチャ

• Item type: Symposium(1)
• 公開日: 2018-11-29
• タイトル: HeteroTSDB: 異種混合キーバリューストアを用いた自動階層化のための時系列データベースアーキテクチャ
• タイトル / 言語: en
• タイトル: HeteroTSDB: A Time Series Database Architecture for Automatically Tiering on Heterogeneous Key-Value Stores
• 言語: jpn
• キーワード / 主題Scheme: Other
• キーワード / 主題: ログデータ解析
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_5794
• 資源タイプ: conference paper
• 著者所属: 株式会社はてな
• 著者所属: 株式会社はてな
• 著者所属: 株式会社はてな
• 著者所属: 株式会社はてな
• 著者所属: 株式会社レピダム／ココン株式会社／北陸先端科学技術大学院大学
• 著者所属: GMOペパボ株式会社／さくらインターネット株式会社
• 著者名: 坪内, 佑樹; 脇坂, 朝人; 濱田, 健; 松木, 雅幸; 阿部, 博; 松本, 亮介
• 著者名(英): Yuuki, Tsubouchi; Asato, Wakisaka; Ken, Hamada; Masayuki, Matsuki; Hiroshi, Abe; Ryosuke, Matsumoto
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: システム管理者からの需要の増加に伴い，システムの状態を時系列データとして収集するためのモニタリングシステムがサービスとして提供されるようになってきている．モニタリングサービスの時系列データベースには，高解像度な時系列データ，時系列データの長期間保存，高い書き込みスケーラビリティと高可用性が求められている．一方で，これまでサービスの機能追加のためにデータ構造の拡張性を考慮した時系列データベースは提案されていない．本研究では，インメモリのキーバリューストア （KVS） とオンディスクの KVS を組み合わせた異種混合 KVS により自動階層化する時系列データベースアーキテクチャを提案する．提案手法では，メモリとディスクのデータ構造を異なる KVS として分離することにより，書き込み効率とデータ保存効率を保ちつつ，用途ごとに最適化されたデータ構造へ書き込みを複製するといった拡張が容易となる．
• 論文抄録(英) / 内容記述タイプ: Other
• 論文抄録(英) / 内容記述: A monitoring system has been provided as a monitoring service as the demand from system administrators increases. Providing a monitoring service requires high resolution time series, long-term retention, high write scalability, and high availability to a time series database (TSDB). On the other hand, TSDBs in consideration of the extensibility of the data structures for function addtions of a monitoring service has not been proposed so far. In this paper, we introduce a TSDB architecture for automatically tiering on heterogeneous Key-Value Stores (KVS) that combines with an in-memory KVS and an on-disk KVS. Our proposed architecture enables the TSDBs extensibility to duplicate the writes to new data structures optimized each use case without reducing writing efficiency and the data storage efficiency by unbundling the data structure on memory and disk as different KVSs.
• 書誌情報: インターネットと運用技術シンポジウム論文集; 巻 2018, p. 7-15, 発行日 2018-11-29
• 出版者 / 言語: ja
• 出版者: 情報処理学会