2021 DTCC 专场20-数据库安全与智能运维(下)(PPT)
数据库异常智能分析与诊断
演讲简介:
业务的高速扩张,带来数据库实例的井喷,伴随而来的是大量的告警。这些告警的根因往往需要运维人员长时间的分析,并带来了不可控的时间成本以及误判风险,由此造成的小故障扩大成大事故的案例数不胜数。如何及时找到告警问题的症结,快速的完成告警发现、分析、处理、运营的闭环,是本主题将要阐述的内容。
分享大纲:
1.告警的现状和问题
2.解决的思路
3.选择的技术方案
4.取得的结果
分享要点:告警分析是一项重大工程,涉及到诸多前置条件,由于对数据库的实时性和准确性有较高的要求,所以需要大量的实时数据,包括监控指标、全量SQL、慢查询、变更操作等等。为了实时和准确的分析,我们需要搭建一套海量的数据处理和分析平台,并通过对数据的挖掘,智能的识别出告警的根因。
蔡金龙 美团 数据库工具研发组主管
嘉宾介绍:
2014年加入美团,从事过MySQL运维、SRE、工具平台开发等相关工作,目前在数据库中心下的数据库工具组,负责数据库自治、数据库安全、数据库自动化平台等相关工作。
证券行业多元混合数据库场景下的智能运维
演讲简介:
过去很长一段时间内,证券行业主要以Oracle、SQL Server等数据库为主支撑业务,如今,随着国产化浪潮,开源和国产数据库也开始被大量使用。既要支撑业务创新,像公有云上一样按需快速供给可弹性扩缩、安全稳定的数据库服务,也要对现网业务中基于物理机、虚拟机的数据库进行高效运维。这种情况下如何实现数据库的自治与智能运维呢?如何实现告警闭环,智能预测,根因分析,甚至故障自愈?本主题将和您分享我们与多家证券伙伴的实践经验。
演讲内容重点提纲:
1. 现状如何,证券行业在数据库运维中面临的挑战是什么?分化势态,头部PAAS/dbPAAS已日趋成熟;其他公司还有不同困扰,分散管理、非标准化部署、自动化程度低、响应式运维、安全合规。
2. 调查分析与实践,证券公司在数据库运维中希望达成的目标是什么?
从标准化、自动化到服务化、智能化,头部公司开始从运维迈向运营;开始国产化探索;行业内数据库统一运维能力建设汇总。
3. 关键点,如何云化整合数据库资源全数据库支持,统一调度,现网纳管,新资源服务化供给。
4. 关键点,如何自治与智能运维呢通过抽象响应原则,为安装部署、空间扩容、高可用切换、恢复演练形成可控动作,提升自治率。
5. 关键点,如何告警闭环通过告警分类,自治类-自愈机制,非自治类-送到责任人/跟踪处理进展/升级/直至恢复。
6. 关键点,如何智能预测通过对单指标,建立机器学习训练模型,预测未来1天的指标变化情况。
7. 关键点,如何智能诊断通过对多指标,关联分析形成数据库健康评分,依据专家诊断库,对发现的风险项/问题点进行智能诊断。
巩飞 云和恩墨 数据库云管平台产品总经理
嘉宾介绍:
2002年工作至今,搞过开发、架构、运维等,如今专注产品,都是围绕着数据库这个领域。经历了两层架构时代关系型数据库技术的蓬勃发展、三层架构时代关系型数据库技术的砥砺前行、互联网+时代数据库技术面临的诸多挑战、一直到现在百家争鸣的数据库新时代。作为数据领域的老兵,很高兴能继续奋战在一线,和大家一起学习成长,乐在其中。
擅长复杂现网下运维平台的规划和建设、熟悉Oracle、MySQL、SQL Server、PostgreSQL等,OceanBase、达梦、Redis等也有所了解。
民生银行数据库智能运维实践2.0
演讲简介:
AI人工智能是当前热主题,使用AI技术提升运维能力,就是AIOPS智能运维。民生银行自2018年开始尝试使用AI技术运用到数据库的日常运维中,至今已经建立了基础软件智能运维平台。而数据库智能运维就是这个平台的重要产物。之前在大会分享过在民生银行建设的数据库的智能运维实现了异常检测、根因分析和智能场景等AI功能。本次带来全新的数据库画像,容量预测和日志异常检测等AI场景,介绍相关功能采用的智能算法,遇到的问题和挑战,获取的效益以及未来的展望。
分享提纲:
a.介绍智能运维和民生银行基础软件智能运维平台情况
b.数据库智能运维实现的重要场景:数据库画像功能介绍,实现思路,算法介绍,效果展示。
c.容量预测功能功能介绍,实现思路,算法介绍,效果展示。
d.日志检测功能功能介绍,实现思路,算法介绍,效果展示。
e.案例分享
f.未来智能运维场景展望
分享要点:
1.介绍民生银行打造基础软件智能运维平台的情况。
2.从实际运维需求出发,利用AI技术提升运维能力。
3.从数据库的智能运维发起,介绍实现思路、方法和历程。
4.从实际案例验证智能运维的必行。
孔再华 民生银行 数据专家
嘉宾介绍:
民生银行数据库专家,具有丰富的数据库环境问题诊断和性能调优的经验。尤其是在数据库架构包括同城双活、集群、多分区、分布式等项目咨询和实施上具有丰富的经验。现工作致力于数据库国产化推进建设和智能运维(AIOps)。建设了民生银行基础软件智能运维平台,实现基础软硬件的产品深度智能运维,引导传统运维向智能运维发展。
苏宁数据库基于任务编排引擎的场景化运维实践
演讲简介:
苏宁数据库团队基于日常运维场景,自研开放式自动化任务编排引擎,介绍其在自动化变更、智能巡检、告警自愈等典型运维场景下的应用,以及DBA怎样通过使用该引擎的能力灵活快速地构建自动化运维工具;
本次主要分享内容如下:
1、苏宁数据库自动化运维平台的演进历程;
2、自动化任务编排引擎的设计思路和功能介绍;
3、基于任务编排引擎的场景化运维能力提升;
4、怎样构建运维平台的开放能力。
严洁 苏宁易购 技术经理
嘉宾介绍:
苏宁云运维中心数据库技术经理,负责苏宁数据库运维平台的开发和运营,10年以上数据库从业经验,专注于数据库智能化运维的规划、建设和实践
相关文章