2021 DTCC 专场19- 时序数据库(PPT)

2021-10-23 00:00:00 数据 数据库 时序 开源 时空

Prometheus数据模型与花式玩法

演讲简介:

监控系统是时序数据库的核心应用场景之一,而Prometheus是一个开源的监控解决方案,其中自带了一个时序数据库。

Prometheus的数据模型吸取了关系型数据库,时序数据库,NoSQL的特长,针对监控系统而优化设计,灵活实用、富有表现力。

本次分享将介绍Prometheus的数据模型、底层时序数据库的实现,以及一些使用PromSQL的小技巧。

大纲:

1、Prometheus简介

2、Prometheus 数据模型

3、Prometheus 的时序数据库实现

4、Prometheus 与外部时序数据库集成

5、PromQL 技巧


冯若航 探探科技(北京)有限公司 DBA

嘉宾介绍:

冯若航,独立开源贡献者,Pigsty作者,PostgreSQL中国社区开源委员会委员。PostgreSQL专家,全栈开发者。《DDIA》与《PG Internal》译者。曾任职于Alibaba,Apple,TanTan。


工业物联网时序数据库Apache IoTDB新特性与应用实践

演讲简介:

Apache IoTDB时序数据库是面向工业物联网领域的、由我国自主研发并开源给Apache的Apache开源项目。随着触发器、UDF等功能不断引入,IoTDB的应用场景越来越丰富。报告简要介绍了IoTDB,详细介绍了自0.12版本起引入的新功能,以及包括工业数据质量在内的在工业应用实践中的思考。

分享提纲:

a.IoTDB项目介绍;

b.介绍IoTDB的分布式、触发器、UDF、数据质量函数库等新特性;

c.分享工业物联网应用解决方案中的技术选型思考;

分享要点:

重点分享IoTDB的新特性,以及在工业物联网应用解决方案中的技术选型思考,希望对相关从业人员在做技术选型和整体架构设计有所帮助。


黄向东 清华大学 助理研究员

嘉宾介绍:

黄向东,清华大学软件学院助理研究员,中国科协青年托举人才,CCF数据库专委会通讯委员,Apache国际开源软件基金会委员,Apache IoTDB 项目V.P.。主要研究领域为大数据管理技术,聚焦工业大数据管理。获国家发明专利授权30余项。参与研制了我国新一代气象大数据平台,负责研制了工业物联网时序数据库管理系统软件IoTDB,开源版成为我国高校发起的Apache项目。主持国家自然科学基金项目、中国博士后科学金金各一项。获2018年教育部技术发明一等奖, 2018年中国气象学会科技进步一等奖。


JUST京东城市时空数据引擎2.0架构实践

演讲简介:

时空数据蕴含着丰富的信息,能够应用于各种城市应用。时空数据更新频率高、数据体量大、结构复杂,传统的方案面临着接不住、查不快、用不好、看不清的问题。首先,城市中80%的数据都与空间相关,而且源源不断地产生,传统数据平台应对高频海量时空数据捉襟见肘,无能为力;其次,传统平台面向的是ID聚合场景,而城市应用往往需要基于时空维度对数据进行聚合;第三,时空数据具有空间维度上的层次性、邻近性,时间维度上的周期性、趋势性等特点,通用挖掘算法难以直接用于时空数据中;后,传统的GIS引擎面向的是静态数据为主、叠加少量动态数据的场景,当应对动态为主的海量时空数据,传统GIS引擎无法与底层计算平台进行分析联动,也无法清楚地展示出数据的隐含信息。京东城市时空数据引擎JUST采用先进的数据建模方法、数据存储技术、分布式索引技术和分析技术,预置了多种有效的时空挖掘算法,研发自有分布式GIS引擎,提供了集数据存储、查询、分析、可视化一体的解决方案,具有接得稳、查得快、用得巧、看得深的特点,能够帮助人们便捷高效地管理海量时空数据。JUST团队连续两次获得了ACM SIGSPATIAL十年影响力大奖,发表了国际论文20余篇,申请了专利30余项。JUST已在多个智能城市项目成功落地,也在新冠防疫中也发挥了重要作用。


刘钧文 京东城市(北京)数字科技有限公司 架构师

嘉宾介绍:

刘钧文,哈工大本科和硕士,京东城市时空数据组(即JUST团队)2.0引擎架构师,京东城市研究院研究员,负责时空数据平台架构设计及时空索引与分布式相结合研究等工作。2018年12月加入京东城市,经历了JUST京东城市时空数据平台从零到一再到广泛对外部署的全过程,并在各个阶段的架构选型以及实现当中都起到了关键作用。现为中国计算机学会(CCF)会员,在数据库顶会中(例如ICDE)发表论文数篇,提交专利多项。其主要参与的JUST京东城市时空数据引擎在多个项目(例如:雄安块数据平台、南通市域治理现代化平台等)中成功落地。


时序数据库终局开放探讨

演讲简介:

近几年IoT、IIoT、AIoT和智慧城市快速发展,时序/时空数据库成为数据架构技术栈的标配。根据国际知名网站DB-Engines数据,时序数据库在过去24个月内排名高居榜首,且远高于其他类型的数据库,可见业内对时序数据库的需求迫切。相应的时序数据库产品近年来也快速发展,出现了多款新的时序数据库产品,一些老牌时序数据库也推出下一代产品。本讲座首先介绍现有的主流时序数据库技术架构,然后开放探讨时序数据库的终局形态。

大纲:

1、数据处理平台60年

2、时序数据库:家族中年长的“婴儿”

3、主流时序数据库架构解析

4、时序数据库终局形态探讨


姚延栋 四维纵横 CEO

嘉宾介绍:

北京四维纵横数据有限公司(https://ymatrix.cn)创始人、原Greenplum 北京研发中心总经理、Greenplum中国开源社区创始人、PostgreSQL中文社区常委、壹零贰肆数字基金会(非营利组织)联合发起人。

2020年创立四维纵横,设计并开发出面向IoT、IIoT、车联网和智慧城市的第三代超融合时空数据库MatrixDB,比InfluxDB、OpenTSDB等传统时序数据库快50-100倍,内建完善安全机制,支持线性扩展且简单易用,是省心、省力、省时的一站式时空数据平台。创立四维纵横之前,曾在Sun Microsystem 与 Symantec 系统和存储部门工作6年,后于2010年加入Greenplum,创建并培养了一支世界的数据库内核开发团队,十年时间把Greenplum打造为世界排名第三(Gartner 报告)的分析型数据库和企业级HTAP数据库。自Greenplum开源之后,致力于Greenplum生态和开源社区的发展,开源用户包括阿里云、腾讯云和京东云等。2005年毕业于中科院软件所, 拥有多项国内外云计算和大数据专利,并著有《Greenplum:从大数据战略到实现》。


相关文章