HBase在时间序列数据库中的应用.pdf

HBase在时间序列数据库中的应用 数据库高级技术专家 悠你 1 2 3 时序数据和时序数据库介绍 HiTSDB针对时序场景的优化 HBase作为底层存储的优势 时序数据和时序数据库介绍 时序数据就是分布在时间上的一系列数值 例子: • 股票价格 • 广告数据 • 气温变化 • 网站的PV/UV • 健康数据 • 工业传感器数据 • 服务器系统监控数据 • 车联网 时序数据和时序数据库介绍 一个时序数据的例子 时序数据和时序数据库介绍 时序数据的特点 • 数量巨大的数据源 • 持续产生大量数据 • 最近的数据最有价值 • 数据老化 • 多维度标签 • 聚合/分析 时序数据和时序数据库介绍 时序数据 vs 传统数据库 把时序数据按行保存在MySQL的innoDB引擎里，用SQL语句做聚合/分析 写入慢 查询慢 存储成本高 Btree结构的索引随机写入性能不佳 联合索引只能使用空间优先的方式 每行的标签列重复出现 时序数据和时序数据库介绍 OpenTSDB的Hbase Schema • Async Hbase Client • Tag - id • rowkey时间优先 • 数据按小时打包 • 热点问题 • Row scan