数据之大云动未来-传统企业从IT到DT的互联网创新最佳实践.pptx
- 【下载声明】
1. 本站全部试题类文档,若标题没写含答案,则无答案;标题注明含答案的文档,主观题也可能无答案。请谨慎下单,一旦售出,不予退换。
2. 本站全部PPT文档均不含视频和音频,PPT中出现的音频或视频标识(或文字)仅表示流程,实际无音频或视频文件。请谨慎下单,一旦售出,不予退换。
3. 本页资料《数据之大云动未来-传统企业从IT到DT的互联网创新最佳实践.pptx》由用户(无敌的果实)主动上传,其收益全归该用户。163文库仅提供信息存储空间,仅对该用户上传内容的表现方式做保护处理,对上传内容本身不做任何修改或编辑。 若此文所含内容侵犯了您的版权或隐私,请立即通知163文库(点击联系客服),我们立即给予删除!
4. 请根据预览情况,自愿下载本文。本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
5. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007及以上版本和PDF阅读器,压缩文件请下载最新的WinRAR软件解压。
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 数据 未来 传统 企业 IT DT 互联网 创新 最佳 实践
- 资源描述:
-
1、数据之大,云动未来弹性敏捷的RDS架构与互联网最佳实践爱可生公司中国领先的企业数据处理技术整体方案提供商开源数据库商用一体化产品领军企业爱可生用户情况1000+需求分析;300+项目合作;100+大型用户;30+行业标杆十年磨砺,薄积厚发金融行业通信行业广电行业互联网金融行业其他行业传统企业互联网转型的应用架构以数据处理技术为核心,持续为互联网转型企业打造高端服务PaaS平台爱可生服务范围Enterprise Ready Open Source开源软件的特点和在企业应用中的问题以MySQL为例5简单,易用,十分钟数据库6生产应用中普遍面临扩展性和高可用的难题7扩展性:读写分离是互联网行业提升数
2、据库吞吐量的常规方案存在的问题:Web/App Servers 在应用程序中包含 读JDBC/ODBC 写JDBC/ODBCDBProxyWrites&ReadsReads读写分离组件 应用程序逻辑决定哪些SQL调用读数据源,哪些调用写数据源My SQL M asterSer verMy SQL SlaveSer verWrites 已有应用需做大量修改才可使Index&BinaryLog Rotation用ReplicationWrites 数据复制的效率得不到有效保障,复制延迟影响业务的结果8各类高可用方案不能保证数据完整性 Pacemaker/Keepalived/MHA/MySQLCl
3、uster.配置和运维复杂;VIP1.2 针对MySQ 不ActionHA 在 数据文件存在于Backup192.168.1.4.168.1.3障点。冷备,备机不提供服务,浪费一半资源 不支持故障节点自动修复存储设备9“互联网+”需要这样的数据库云集高可用技术之大成合横向扩展能力于一身互联网金融高可用数据云平台架构应用通知秒杀客服市场风控交易活动分析其他Redis RedisRedisService IpZabbix数据缓存负载均衡管理门户HAProxy 1HAProxy 2Balm mcBalm mcRedis RedisHAProxy group 1高可用管理外部支付系统读写分离DBPro
4、xy 1DBProxy 2DBProxy 1DBProxy 2交易库读写分离其他库读写分离MySQL高可用集群LUNLUNLUNLUN风控交易库支付库短消息其他1其他8其他1其他8其他nbotbotbotbot mgrSer ver-4botSer ver-30balm物理集群Ser ver-1Ser ver-2Ser ver-3存储设备(支持SCSI-3 PR)存储设备(支持SCSI-3 PR)11管理平台展示12技术演进:分布式数据库集群的无缝迁移支撑100万/秒红包设计容量交易业务红包业务业务系统 线上借贷产品交易,红包库数据规模 总量1TB爱可生分布式数据库集群软件爱可生分布式数据库集
5、群软件 注册用户6千万以上性能指标 红包数量按照100万/秒容量设计系统特性。全局自增ID 拆分表多维度复制 中间层1%影响以内的异步审计日志 在水平拆分基础上支持单节点自定义分表16个分片节点,拆分数据:红包数据1 组非拆分数据节点,4 组分片节点。所在节点是1 主3 从,其它节点时1主2从。拆分数据:产品、账号、好友相关运行级别 7x24x365数据库云PaaS平台的优势集高可用之大成-部署简单,运维方便-极端情况不丢任何数据-切换时间短,5秒以内-多套灵活高可用分组-同城灾备,异地灾备一体化-贴近MySQL设计,自动处理上百种MySQL故障多年数据库服务积累-十年数据服务经验-完善的数据
6、生态系统-自主知识产权产品快速投产无需更改应用-中间层透明MySQL接口-中间层自动读写SQL路由主从读写分离水平扩展-降低主节点的负载压力-提高资源利用效率-在线添加MySQL从机,不影响业务-根据业务SQL统计调整主从比例-高性能,中间层的性能损耗低于10%-事务可强制读主库-业务维度的延迟检测和自动处理MySQL数据库自动化运维管理自动化运维管理平台方案数据库智能管理平台软件功能:运维管理平台功能架构 Dashboard:显示平台中各类节点的逻辑拓扑图和健康状态,并提供标准接口,供第三方软件对接节点管理DBProxy管理集群节点管理和维护 集群节点管理:实现集群节点主机的配置、管理及维拓
7、扑结构节点服务状态告警状态仪表计量DBProxy管理护,如添加/删除主机、停止/启动HA等集群节点配置DBProxy配置 数据库管理:MySQL数据库的日常管理和维护,如高可用组的动态创建、扩展等,数据库实例的创建、激活、移除/加入高可用组、移出/加入路由、停止/启动实例等,备份策略管理,还原数据库备份等数据库日志节点日志操作日志日志管理数据库实例管理数据库实例管理备份策略管理 监控报表:实现对集群内的节点主机、M ySQ L数据库告警管理的运行状态进行监控,并生成性能诊断报表。未处理告警已处理告警 告警管理:实现预设报警规则的配置,提供邮件、短还原数据库备份信的异常告警提醒用户管理角色管理权
8、限配置用户管理 DBProxy管理:实现DBProxy(读写分离中间件)的全生命周期的管理,如创建、配置、删除、添加/删除路由等监控报表数据库监控系统监控报表生成 用户及日志管理:实现用户及权限、各节点及组件日志的管理物理主机管理管理控制台组件实例管理数据库实例管理读写分离组件管理负载均衡组件管理监控告警管理用户审计用户管理平台组件拓扑结构图“互联网+”对于大规模云数据集的处理技术需求分布式集群分库分表分布式MySQL集群原理应用服务器应用服务器应用服务器负载均衡集群管理平台爱可生分布式集群中间件SQL转换和分发SQL转换和分发数据分片数据分片MyS Q L数据库集群节点并行计算分布式数据库分
展开阅读全文