大众点评运维架构全览和平台自动化演变.pptx

1、大众点评运维架构全览和平台自动化演变大众点评运维架构全览和平台自动化演变大众点评运维架构全览和平台自动化演变张冠宇 大众点评&马哥教育分享大纲 点评运维团队和职责说明 点评运维体系架构 点评运维系统介绍 点评运维演变过程运维团队介绍 实现工具化 实现运维自动化 实现运维平台化 Troubleshoorting 同开发支撑业同开发支撑业务务 线上服务管理线上服务管理 线上服务优化线上服务优化 Zabbix维护 7*24值班 告警通知 简单故障处理 IDC管理/装机 操作系统定制 跳板机管理 系统级问题处理运维开发应用运维监控运维系统运维分享大纲 点评运维团队和职责说明 点评运维体系架构 点评运维

2、系统介绍 点评运维演变过程点评IDC整体结构生生产产测测试试&灾灾备备 光纤硬件4层负载均衡Database用户A机房机房B机房机房硬件防火墙智能DNSCDN加速软件7层负载均衡服务器集群服务器集群服务器集群（操作系统：Centos6.3）硬件4层负载均衡DatabaseB机房机房硬件防火墙软件7层负载均衡服务器集群服务器集群服务器集群（操作系统：Centos6.3）静态资源访问动态资源访问点评运维整体架构DB内网DNS分布式存储ServiceServiceService监控网络系统应用业务智能DNSCDN加速 硬件负载均衡（4层）Static&灾备页面缓存页面缓存页面缓存WebWebzabb

3、ixCatCMDbPuppetWorkflow运维系统Button 软负载均衡（7层）网络设备&防火墙Centos 6系统开发语言java运维系统介绍运维系统介绍 全方位监控系统 自动化平台系统 配置类和管理系统 记录和运营分析系统点评运维系统介绍全方位监控系统全方位监控系统自动化工作系统自动化工作系统配置类和管理系统配置类和管理系统记录记录和运营分析和运营分析系统系统Cat(业务 应用)Zabbix (网络 系统)Logscan(日志扫描)Workflow(流程系统)GO平台系统 Button系统(代码上线系统)任务调度系统 Puppet配置管理应用配置管理SLB配置管理 CMDB资产系统I

4、ssue故障管理系故障管理系统统Dom运营质量平运营质量平台台运维安全平台运维安全平台雷达系统雷达系统Cat业务监控业务层面监控Cat业务大盘应用报错大盘Cat显示应用完整调用运维系统介绍运维系统介绍 全方位监控系统 自动化平台系统 配置类和管理系统 记录和运营分析系统Workflow流程系统 自动化工具：Workflow 目标：将80%的常见操作流程化自动化释放运维人力以便可以做更多高质量的工作将运维工作做成平台化，让业务研发团队自助Workflow流程系统自动扩容流程展示工作流订单展示高效操作工具：Go 目标：命令行操作变成网页操作Workflow 不能覆盖的 20%操作实现所有运维操作的

5、：可定制可追踪可重复Go平台系统 Go平台系统 Button上线系统 运维系统介绍运维系统介绍 全方位监控系统 自动化平台系统 配置类和管理系统 记录和运营分析系统Puppet配置管理系统SLB配置管理汇总-工具平台化为什么要走工具&平台化？一开始，面对的问题很传统大量繁琐和重复的手工操作无法消灭的变更出错人员变动的培训门槛随时随地的应急鸡飞狗跳解决方案也很自然：工具化平台化 目的：形成规范、一致的操作用脚本程序代替繁琐的人工执行所有操作可纪录操作发起人不再局限于运维 工具化平台化解决的问题是什么 效 率 那它带来的问题是什么？失 控工具开发管理的失控工具使用本身的失控工具所产生的结果失控点评

6、运维经历过程 业务支撑化 规则标准化 运维工具化 平台产品化 技术运营化运维系统介绍运维系统介绍 全方位监控系统 自动化平台系统 配置类和管理系统 运营质量和故障分析系统介绍DOM 运维与研发质量平台 目标：建设一套可多方位和多层次描述线上运营质量的指标体系从海量的监控数据中实时的提取DOM运营质量平台DOM运营质量平台数据到位，让背锅嘎然而止记录和分析系统角色改变“运维”变为“运营”之后运维从辅助角色，变成主导角色从替补变为裁判从挨打变成打人工作内容的转变无序化平台化运营化团队构成的转变运维运维开发产品运营做事方式的变化提供支持解决故障做工具平台持续运营问题：运维不是什么？不是背锅侠 不是救火侠 不是忙成狗，还没业绩的路人总结：运维到底是干什么的？制定规则的裁判 资源分配的决策者 保证业务服务质量的主导者谢谢