1、平安银行转型路上平安银行转型路上的的GOP S 全 球 运 维 大 会 2019 上 海 站 自动化运维实践及中台建设自动化运维实践及中台建设运维开发经理今天聊些啥今天聊些啥What we talk about todayGOP S 全 球 运 维 大 会 2019 上 海 站 转型重构，意味着改革改革，不管是从业务的种种类类，数量数量，都会发生快速的增长，业务量的 扩容，微服务的改造，运维将会有更高的要求，来支撑业务的发展井喷式的服务井喷式的服务 器数量增长器数量增长更高的交付时更高的交付时 间要求间要求大量的新项目大量的新项目 上线上线银行转型银行转型Internet transforma
2、tionGOP S 全 球 运 维 大 会 2019 上 海 站 今天聊些啥今天聊些啥What we talk about todayGOP S 全 球 运 维 大 会 2019 上 海 站 01自动化覆盖率低自动化覆盖率低项目上线后，服务器的需求量会发 生井喷，在交付的过程中只要有一 个环节是人工的，就会存在风险， 交付，发布，运营等运维工作，都 将面临挑战02配置信息不闭环，不透明配置信息不闭环，不透明交付的信息无法形成闭环，在各团队内维护， 沟通 成本高，准确率低，在故障发生时，会致命03标准化不到位标准化不到位原本标准化就做的不是很好，在业务增 长期，随着需求量的增加， 就会更加突 出
3、04流程管控复杂流程管控复杂复杂的流程管控，会额外的增加运营者 的成本， 降低产能， 如果不简化流程， 势必会成为短板05自主工具能力差自主工具能力差外购的管理系统跟不上需求增长， 必须 要自研识别问题识别问题Identification problemGOP S 全 球 运 维 大 会 2019 上 海 站 今天聊些啥今天聊些啥What we talk about todayGOP S 全 球 运 维 大 会 2019 上 海 站 自动化系统设计从场景出发，自动化设计的原则是解决 一个一个的场景，而并非是一个大而全的框架建设流程中台建中台，揉合场景，对标准化的变更 操作可以模糊前端的合规要求
4、，由中台 来解决重建CMDBCMDB需要解决数据透明，数据闭环， 数据关联，新治旧的多重问题建设运营中台将执能，灰度能，收敛能，聚合能加强献计献策献计献策IdeasGOP S 全 球 运 维 大 会 2019 上 海 站 CMDB 设计设计CMDB system design到底要做一个怎么样的CMDBGOP S 全 球 运 维 大 会 2019 上 海 站 负载均衡领域负载均衡领域应用关系领域应用关系领域容器容器领域领域网网络领域络领域虚虚拟化领域拟化领域数据数据库领域库领域CMDB 设计设计CMDB system designGOP S 全 球 运 维 大 会 2019 上 海 站 设计思
5、想：设计思想： 规划各领域系统 新建统一上报规则 优先解决闭环，逐步解决存量 使用RSS方式进行领域间互通CMDB 设计设计CMDB system design各领域数据模型的不规则性很产生通用模各领域数据模型的不规则性很产生通用模型型关联后的数据将会错综复杂关联后的数据将会错综复杂数据检索需要快准易数据检索需要快准易领域系统上报的数据校验问题领域系统上报的数据校验问题立新容易，废旧难立新容易，废旧难GOP S 全 球 运 维 大 会 2019 上 海 站 领域上报数据汇聚入领域上报数据汇聚入 口，使用队列保证松口，使用队列保证松 耦合耦合使用使用ESES集群，使集群，使宽表设宽表设计计，增加
6、常，增加常索引，适当使索引，适当使Redis作为热数据的存储作为热数据的存储使使流式处理，清洗数流式处理，清洗数 据，建据，建关系，发送订关系，发送订 阅通知阅通知CMDB 设计设计CMDB system designGOP S 全 球 运 维 大 会 2019 上 海 站 CMDB 设计设计CMDB system design数据落地领域模型领域数据交叉比对（非实时）监 听 数 据 变 更以 宽 表 方 式 存 储 在ElasticSearch通 过GraphQL数 据 检 索对外 提 供GOP S 全 球 运 维 大 会 2019 上 海 站 数据闭环：自动化交付系统Automated D
7、elivery System安全安全/系系统基线统基线创建主机创建主机安装依安装依赖软件赖软件交付堡交付堡垒机垒机 使用流水线的方式贯串各个部门 使用消息队列的方式可以很轻松的解决耦合，异常重试等问题 CMDB在开始的时候产生一个CICODE流水线开始，结束后，Agent上报 数据，完成数据闭环。GOP S 全 球 运 维 大 会 2019 上 海 站 难点：流水线的方法不适应短频快的流程。改进：1. 将流程和消息队列剥离，抽象流水线，形成一个可快速配置的流水线2. 通过公共平台预处理部分简单数据，减少领域系统对每一个流程都有定制开发的需求。流程编排任务调度OPENFAAS用户提交数据闭环：自
8、动化交付系统Automated Delivery SystemGOP S 全 球 运 维 大 会 2019 上 海 站 CMDB system design数据闭环：配置更新闭环流程引擎 发起流程(CMDB)置为变更 状态领域系统 自动化变 更领域系统 上报变更 后的数据(CMDB)收新数据， 更新状态专业领域配置项的 变更闭环数据流GOP S 全 球 运 维 大 会 2019 上 海 站 CMDB 经典使用案例经典使用案例CMDB system designGOP S 全 球 运 维 大 会 2019 上 海 站 运运营中台营中台Operation middleground运营中台应该要有哪
9、些能力GOP S 全 球 运 维 大 会 2019 上 海 站 运营中台能力建设运营中台能力建设Operation middleground任务编排能力可编排场景中需要 执行的任务集任务灰度能力可灰度执行场景中任务及节点高危检测能力高危任务的识别和拦截关联识别能力DSU的关联识别能力GOP S 全 球 运 维 大 会 2019 上 海 站 合规能力建设Operation middleground单据 单存据储管管理理系统（签 签 报 报 /系审统批）老旧的，外购的，简陋的，变更单据 管理系统，迭代效果不好，动一动就 影响好多，典型的中台能力场景凭据中台凭据中台解耦系统，建立流程中台，在中台上
10、做更多的场景上的一些粘合，比如预 授权变更，常规变更，紧急变更等不 同的签报方式业务系统业务系统业务系统可以无需对签报和审批的方 式做对接，只需要关注场景就可以了， 更快更高效的提高业务系统开发能力GOP S 全 球 运 维 大 会 2019 上 海 站 运运营能力的使用场景营能力的使用场景Operation middleground场景工具上的一切操作按钮场景工具上的一切操作按钮GOP S 全 球 运 维 大 会 2019 上 海 站 CMDB 实时粘合出来的关联信息实时粘合出来的关联信息场景化的变更流程场景化的变更流程原子化的操作过程原子化的操作过程今天聊些啥今天聊些啥What we ta
11、lk about todayGOP S 全 球 运 维 大 会 2019 上 海 站 中台初现Middleground运营管理系统ODBOBIFireflyAlertSSONoahDragonflySaturnWormholePabCloudWaynePolarisLime(CMDB)LeoOmegaDBaaSCherryetc.etc.etc.etc.业务系统业务系统中台建设中台建设底层构建底层构建GOP S 全 球 运 维 大 会 2019 上 海 站 总结Summary 底层的构建要松耦合，越具有原子性越好 中层的构建要贴合运营场景的需要，一个场景一个场景的解决 上层的业务系统只需要考虑解决实际的运营能力问题 运维中台的建设一定要从运营场景触发 运维中台的建设需要一个有闭环数据流的CMDB 从现阶段的实际问题出发，不盲目引入大框架，新技术GOP S 全 球 运 维 大 会 2019 上 海 站
