传统金融行业企业架构创新与实践.pptx

1、架构创新之路目录架构概览架构概览总体架构总体架构应用架构应用架构数据架构数据架构技术架构技术架构架构是什么架构在大家头脑是什么样子？千人千样平台架构规则？约定？企业组织软件架构架构是业务与架构是业务与IT对应的工具，是业务人员与技术人员沟通和理解的桥梁。对应的工具，是业务人员与技术人员沟通和理解的桥梁。架构是对实现组织业务及战略目标的整体梳理和规划。架构是对实现组织业务及战略目标的整体梳理和规划。架构规划带来的价值提升提升IT投资回报比投资回报比规避规避IT项目建设风险项目建设风险具有整体的适用于业务的技术战略架构图具有整体的适用于业务的技术战略架构图形成标准的流程和形成标准的流程和IT建设规

2、范建设规范实现整体信息和数据共享实现整体信息和数据共享传统架构 以IT为主，极少涉及业务接入层接入层PC移动设备移动设备电话接入电话接入网络层网络层交换机交换机路由器路由器防火墙防火墙负载均衡负载均衡应用层应用层TomcatWeblogicWebSphere服务器层服务器层数据库层数据库层传统架构面临的新挑战业务变化快业务变化快灵活度不高灵活度不高无法快速部署无法快速部署系统间耦合度高系统间耦合度高IT标准缺乏标准缺乏缺乏对业务整体支持的规划缺乏对业务整体支持的规划出路在哪里？架构方法论TOGAFFEAFZachmanDoDAFCBM 国际标准权威组织The 美国联邦政府制订的电子政务顶层设计

3、。Zachman提出的独立于企业所使用的工具的平台框架。美国国防部提出的控制架构开发、维护和决策生成的组织机制。IBM开发的一套组件商业模型。OpenGroup制定的架构框架。架构分析方法功能性需求分析企业架企业架构分析构分析方法方法业务需求分析应用需求分析技术需求分析数据需求分析管控需求分析非功能性需求分析架构概览业务架构应用架构数据架构技术架构业务流程应用系统数据信息企业战略基础平台软件架构系统架构目录架构概览架构概览总体架构总体架构应用架构应用架构数据架构数据架构技术架构技术架构应用架构设计从业务需求出发，设计相应的功能模型，并在此基础上进行应用系统的划分，并进行场景验证和应用系统定义，

4、形成应用蓝图。业务需求业务需求功能模型设计功能模型设计系统划分系统划分场景验证场景验证应用系统定义应用系统定义功能模型（定义是什么）分层模型（定义如何实现）进一步抽象场应用系统定义应用系统蓝图数据架构设计从数据特性出发，进行数据分类和模型化，根据操作要求设计数据目标架构，同时关注数据流转，以及管控要求。数据特性数据特性数据分类数据分类数据建模数据建模形成目标架构形成目标架构场景验证场景验证数据流转数据流转数据管控数据管控数据特性数据分类数据模型数据流转数据治理场景验证目标架构技术架构设计从应用架构和数据架构出发，识别技术组件，在此基础上识别部署单元，设计逻辑部署与物理部署，同时关注基础设施规划

5、与安全架构设计应用架构应用架构基础设施基础设施技术组件识别技术组件识别部署单元部署单元逻辑部署逻辑部署物理部署物理部署数据架构数据架构安全架构安全架构位置、区域和参与人模型技术组件识别部署单元关键技术路线逻辑部署模型（部署节点）安全架构软件基础设施目录架构概览架构概览总体架构总体架构应用架构应用架构数据架构数据架构技术架构技术架构应用架构设计目标应用架构来自业务架构的导入，实现对业务架构的支撑，从业务架构出发，梳理功能模型，形成未来的应用组件模型业务架构业务战略业务能力组件业务模型高阶需求业务功能角度应用实现角度现有应用现状/已有架未来功能模型构成果应用架构应用架构设计原则未来应用组件模型未来

6、系统应用蓝图应用分层应用分组组件识别，保证功能组件的完整性和唯一性需求业务组件模型业务组件模型功能组件模型功能组件模型验证功能组件识别的重点功能组件识别的重点 着重着重“是什么是什么(what)”，而不是，而不是“怎么做怎么做(how)”当两个组件功能重叠或近似时，要细分或者合并，确保没有重叠当两个组件功能重叠或近似时，要细分或者合并，确保没有重叠 每个功能要创造价值，并有重要的产出，去掉无价值的活动每个功能要创造价值，并有重要的产出，去掉无价值的活动 从业务组件模型出发，检查功能组件覆盖度，确保功能组件覆盖所有热点业务组件从业务组件模型出发，检查功能组件覆盖度，确保功能组件覆盖所有热点业务组

7、件应用架构分层良好的分层结构是实现松耦合松耦合的关键，以便系统易于维护和扩展术语术语描述及举例描述及举例应用分层应用分层应用架构的最高分类第第0层层第第1层层应用组应用组有密切关连的一个或几个应用的逻辑组合用来搭建一个应用的业务功能组合第第2层层应用组件应用组件应用架构与子系统对应关系渠道接入层交互控制层业务处理层管理分析层数据接收反馈子系统子系统2子系统子系统7数据准备业务网门户业务网门户产子子系系统统10子系统子系统3品服子系统子系统8子系统子系统9产品加工务报送机构管理子系统子系统4子系统子系统5互联网服务平互联网服务平服务对象管理台台1数据质量管理子系统子系统1客子系统子系统6户互联网

8、服务平台互联网服务平台服务2营子系统子系统11支撑层应用架构蓝图集成及集成及服务层服务层渠道接入层渠道接入层交互控制层交互控制层业务处理层业务处理层管理分析层管理分析层客户服务（呼叫中心）产品加工数据准备数据采集数据挖掘类产品报文接收在线录入信息反馈机构码报文文件管理互联网服务平台业务网门户数据校验主体关联关系计算数据更正贷款卡管理报送机构管理统计分析类产品行业历史违约率服务交付数据质量管理信贷组合分析征信业务报表特征变量定制产品加工管理分析授信机构征信服务个人业务企业业务对外数据交换平台小微企业业务个人服务数据查询类产品企业报告其它第三方系统数据报送接口数据查询接口主体服务个人报告个人评分小

9、微企业报告重要信息提示企业服务个人身份信息整合企业身份信息整合企业评分政府/监管部门服务代理机构服务服务对象管理对内数据总线（含抽取、清洗、转换、加载）内容管理平台数据仓库运营支撑层数据管控调度监控业务配置日志管理计费管理统一用户服务目录架构概览架构概览总体架构总体架构应用架构应用架构数据架构数据架构技术架构技术架构数据模型数据模型是根据一定的业务规则，对业务概念或数据进行逻辑化表现。数据模型从大的层级可以分为概念模型、逻辑模型和物理模型。概念模型概念模型逻辑模型逻辑模型物理模型物理模型 概念模型是从业务角度对业务的抽象描述 逻辑模型是对概念模型的逻辑化，遵循第三范式 物理模型是对逻辑模型的物

10、理化，可以不遵循第三范式CustomerDataAccountDataProductDataTransactionData良好的数据分类可以促进沟通数据需求数据需求数据分类数据分类数据实体数据实体数据库表数据库表 业务人员描述所需的数据内容根据数据内容抽象出数据分类，确定数据分类属性内容 根据分类，抽取出数据实体，用ER图描述其关系将数据实体物化为数据库表，供系统使用CustomerDataAccountDataProductDataTransactionData业务人员技术人员结构化与非结构化数据整合通过标注、文本挖掘等技术，建立非结构化数据的元数据，并与结构化数据整合，供分析使用c.建立对

11、非结构化数据进行SQL语法查询的支持，实现与结构化数据的集成关联结构化数据数据仓库统计分析产品集市基础数据汇总加工基础数据库数据挖掘产品集市管理分析集市研发集市分析应用数据获取结构化内容a.建立非结构化信息的标签、摘要、索引、日志、内容等b.提取结构化的元数据信息，如类别、标引、摘要等；实现与结构化数据的整合非结构化数据非结构化数据主数据定位为基础信息整合，为其他数据库供数数据应用查询类应用库业务主体信息采集源业务主体信息采集源查询类应用身份信息主数据信息整合基础数据库信贷机构金融相关机构金融租赁公司疑似主体识别归并.资产管理公司小额贷款公司只包含主体基只包含主体基础信息，不包础信息，不包含业

12、务数据含业务数据关联关系挖掘分析证券公司其他信贷机构数据应用仓库应用公检法部门数据仓库主数据社会公共部门数据批量处理实时查询数据管控数据质量数据质量数据生命周期数据生命周期强化强化元数元数据据完善完善标准标准提供标准提供标准和规范的和规范的管理手段管理手段数据标准数据标准元数据元数据数据质量管理数据质量问题分析数据质量问题分析系统系统管理管理问题统计报告问题测量评分卡问题影响分析接口文件权限管理数据仓库数据质量数据质量规则管理规则管理数据质量数据质量数据质量数据质量分析清理分析清理数据质量数据质量知识管理知识管理问题管理问题管理调度管理数据质量数据质量稽核引擎稽核引擎规则定义规则查询规则更新问

13、题登记数据分析数据清理分类管理日志管理样本文件获取问题查询问题分发问题跟踪内容录入内容更新内容查询各问题反馈渠道数据补录接口管理元数据元数据数据标准数据标准|11/2/2016数据生命周期管理数据创建数据创建数据使用数据使用数据归档数据归档数据销毁数据销毁数据生命周期重点关注满足业务操作和管理分析满足对历史数据查询的管理制度满足审计管理减少数据冗余，提高数据一致性减少存储、硬件、运维等方面基础设施投入提升应用系统性能，提高响应速度数据标准管理数据标准是企业所有系统都应该遵守的数据定义，实现对每个数据项的统一、规范性描述。数据标准包括每个数据项的业务属性、技术属性和管控属性。数据标准数据标准统一

14、编码统一编码统一命名统一命名业务属性业务属性技术属性技术属性管理属性管理属性 标准编号 标准定义部门 标准使用系统 数据类别 数据格式 取值范围 代码编码规则 标准中文名称 标准英文名称 标准别名 业务定义 业务规则 相关标准 与相关标准关系 标准来源元数据管理元数据是描述数据的数据加强部门协作，让IT向业务看齐数据模型数据模型开发人员开发人员业务用户业务用户架构师架构师数据分析师数据分析师开发人员开发人员数据库管理员数据库管理员统一元数据管理统一元数据管理.易于集成易于集成.基于基于”可信赖可信赖”信息，更有信心使信息，更有信心使用信息用信息.易于变更管理易于变更管理&重用重用.遵循业界规范

15、和标准遵循业界规范和标准技术技术操作操作业务业务技术元数据：技术元数据：描述系统中技术领域相关概念、关系和规则的数据。管理元数据：管理元数据：管理元数据是描述管理领域相关概念、关系和规则的数据。业务元数据：业务元数据：描述业务领域相关概念、关系和规则的数据。数据架构蓝图源数据源数据内容管理内容管理数据准备数据准备数据加工数据加工数据应用数据应用数据交换数据交换实时方式/批量方式金融机构采集查询类产品应用查询类产品加工库政府部门校验加载库抽取数公共事业单位据缓加冲分析类产品应用管理分析类应用载区主数据区基础服务同业基础数据库数据仓库互联网文档管理服务统计分析产品集市基础数据汇总加工记录管理服务非

16、结构化数据数据挖掘产品集市管理分析集市研发集市联合服务数据归档数据归档运行管理运行管理数据管控数据管控数据安全数据安全目录架构概览架构概览总体架构总体架构应用架构应用架构数据架构数据架构技术架构技术架构应用分层设计展现与接入展现与接入（门户、移动终端、统一认证管理）（门户、移动终端、统一认证管理）界面展现层展现层与应用之间的交互尽可能基于服务方式实现数据采集业务数据整合业务对内服务业务对外服务业务运营管理等业务应用层数数其数信其生研产产服客服调质风其服服务和组件据据它据息它命发品品务户务度量险它务采更抽整周执目加对服管监管管渠集正取合期行录工象务理控理理道集成层数据数据总总线线流程数据层业务主

17、体信息用户信息产品信息公共信息信息信息应用集成设计将不同的功能模块定义为服务，并定义接口，采用统一的方式进行交互。对内服务、对外服务对内服务、对外服务信息交换总线信息交换总线流程整合流程整合对对流程编排、流程编排、业务规则业务规则外外集集成成核心总线核心总线层层消息传送、消息路由、协议转换、事件注册消息传送、消息路由、协议转换、事件注册监控监控状态状态、性能、性能数据整合数据整合复制策略、批处理、传输机制复制策略、批处理、传输机制结构化结构化文件文件非结构化非结构化文件文件外部应用外部应用1外部应用外部应用2外部应用外部应用3外部应用外部应用4数据库数据库SOA部署服务管理SOA建模SOA组装

18、部署单元设计部署单元是逻辑部署架构的最小构成单元；组件按照展现、接口逻辑、应用逻辑、数据存放的区分部署单元展现层展现层应用层应用层数据层数据层展现部署单元展现部署单元执行部署单元执行部署单元数据部署单元数据部署单元关注接入渠道、用户数、访问量、访问时段、用户体验等需求关注接入渠道、用户数、访问量、访问时段、用户体验等需求关注接入运行特征、响应时间、部署位置、可处理窗口等需求关注接入运行特征、响应时间、部署位置、可处理窗口等需求关注数据类型、生命周期、规模、关注数据类型、生命周期、规模、IO类型、处理方式、重要程度、安全要求、数类型、处理方式、重要程度、安全要求、数据活跃度等需求据活跃度等需求子

19、系统划分规范规范非功能需求非功能需求现有现有IT环境环境应用架构应用架构数据架构数据架构技术架构目标需求技术架构规范子系统子系统1子系统子系统2子系统子系统N组公共公共组件组件图例图例组件组件组件组件组件组件组件组件部署单元关键技术路线选择应应数数据据架架构构用用架架构构1 应用开发技术应用开发技术2 大数据技术大数据技术技术架构技术架构IT架构3 云计算技术云计算技术开发技术选择中后端开发技术前端开发技术J2EE，.NET，C+SQL，ProcedureHTML5、JavaScript、.NET、PHP、Python应用层系统压力业务逻辑的实现数据库层系统扩展性数据库技术选择数据库技术数据库

20、技术适用场景适用场景主要技术主要技术代表产品代表产品键值型数据库数据以字符串的形式存在，适用于数据的高并发读写，尤其 KVP适合实时数据分析场景Riak,Redis分布式数据库为应对海量结构或半结构化数据访问I/O问题，数据跨列存储，方便数据压缩，适合批量数据处理、实时信息交换查询和分析DFS/MapReduceHbase，Cassandra，Spark，Redis图数据库基于节点、关系、属性的图模型，适用于使用点、线、面描 Node/RelationshipNeo4J,FlockDBMongoDB、CouchDBDB4o述图形关系的设计及存储/property文档型数据库对象存储数据库XML

21、数据库传统数据库海量数据高效率存储和访问，适用于生成大量的报告，报告 JavaScript/JSON随着变化能够动态进行内容整合适用于通过对象方式存储数据，提供面向对象语言语法操作 Hibernate/JPA/EJB数据库适合半结构化数据以XML格式存储的复杂的数据结构数据集，支持XML查询语法如Xpath，XQuery对象或表格映射共享存储存在Berkeley DB XMLBaseX以结构化形式存在Oracle、DB2、SQL Server等关系型与Nosql数据库整合使用关系型数据库关系型数据库非关系型数据库非关系型数据库1.通用设计，但也带来性能的限制2.弹性扩展能力一般3.分布式能力一

22、般1.适合批量追加写简单查询操作2.具有很强的弹性扩展能力3.极强的分布式处理能力4.数据弱一致性设计4.数据强一致性设计5.标准的数据访问接口6.适合关联操作性较强的查询5.非标准化的接口6.适合大数据量的弱关联查询Bigtable客户端（library）用户层服务层管 理 控 制 层元数据表高 速 网 络 互 联主服务器N+1集 群子表服务器子表服务器子表服务器子表子表子表子表子表子表子表子表SAN存 储 层分布式文件系统支撑层集群调度分布式锁服务存 储存 储存 储存 储存 储GFS大数据技术大业务数据大业务数据大交互数据大交互数据企业社交网络互联网联机分析处理联机分析处理（OLAP）与数

23、据仓库数据仓库社交媒体数据社交媒体数据其他交互数据其他交互数据联机交易处理联机交易处理（OLTP）消费者呼叫记录、图像、呼叫记录、图像、点击流点击流物联网科学，基因组科学，基因组大数据集成与融合大数据集成与融合供应链移动终端机器机器/设备设备大数据处理与分析大数据处理与分析大交易数据：各种交易数据，包括来自电商的数据，包括B2B、B2C、C2C、团购等大交互数据：来自社交网络的数据，SNS、微博等云计算技术工业标准化流程商务旅行BPaaSBusiness Process-as-a-Service协作CRM/ERP/HRSaaSPaaS财务行业应用Software/Application-as-

24、a-ServiceWeb 2.0 ApplicationRuntimeJavaRuntime中间件Hadoop开发工具Platform-as-a-Service网络Data CenterFabric服务器存储IaaS共享的，虚拟化的，动态供给Infrastructure-as-a-ServiceDevOPS DevOPS是一个跨全生命周期的理念，强调自动化，需要以虚拟化为基础。通过持续集成、交付、反馈与优化进行端到端整合，进行跨团队、跨系统协作。QA开发开发测试测试安全安全运维运维总结架构概览架构概览总体架构总体架构应用架构应用架构数据架构数据架构技术架构技术架构总结何谓架构创新：何谓架构创新：不断的变化和扩展的业务形态，在一段时期内要不断的变化和扩展的业务形态，在一段时期内要有与之适应的可落地架构存在，业务与技术高度融有与之适应的可落地架构存在，业务与技术高度融合。合。新技术的更迭在一段时期内对整体架构影响甚微。新技术的更迭在一段时期内对整体架构影响甚微。架构是一项整体工程，而非仅仅是架构是一项整体工程，而非仅仅是IT部门的工作，部门的工作，是一项长期工作，能够带来长远利益工作。是一项长期工作，能够带来长远利益工作。