对公数据集市项目培训材料课件.pptx
- 【下载声明】
1. 本站全部试题类文档,若标题没写含答案,则无答案;标题注明含答案的文档,主观题也可能无答案。请谨慎下单,一旦售出,不予退换。
2. 本站全部PPT文档均不含视频和音频,PPT中出现的音频或视频标识(或文字)仅表示流程,实际无音频或视频文件。请谨慎下单,一旦售出,不予退换。
3. 本页资料《对公数据集市项目培训材料课件.pptx》由用户(晟晟文业)主动上传,其收益全归该用户。163文库仅提供信息存储空间,仅对该用户上传内容的表现方式做保护处理,对上传内容本身不做任何修改或编辑。 若此文所含内容侵犯了您的版权或隐私,请立即通知163文库(点击联系客服),我们立即给予删除!
4. 请根据预览情况,自愿下载本文。本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
5. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007及以上版本和PDF阅读器,压缩文件请下载最新的WinRAR软件解压。
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 数据 集市 项目 培训 材料 课件
- 资源描述:
-
1、对公数据集市介绍对公数据集市项目组2014年1月目录 03040605070102目录 03040605070102数据仓库是一个面向主题的、集成的、非易失的且随时间变化的数据集合,用来支持管理人员的决策。数据仓库的四个特点:数据仓库的四个特点:1 1)面向主题)面向主题 2 2)集成)集成 3 3)非易失)非易失 4 4)随时间变化)随时间变化数据仓库概述操作系统是面向事务处理的。事务处理关注的是整个事务操作流程,即操作系统是围绕事务操作流程来组织数据的。数据仓库是面向主题的。主题是管理人员分析问题的重点。面向主题就是所有的数据都是根据主题来组织的。即数据仓库的数据都是围绕分析的重点来进行组
2、织数据的。面向主题面向主题操作系统数据仓库票据信用证贷款客户协议产品集成是数据仓库最重要的特性。集成并不是简单的把数据聚合在一起,还要消除数据的不一致性。由于数据仓库是面向主题的,一个主题下可以包含多个源系统的数据,只有统一各个源系统不同的编码,才能在同一个主题下汇总、分析数据,从而消除不同系统间的信息孤岛问题。集成客户 A:A1性别 男:M机构 O:O1客户 A:A2性别 男:0机构 O:O2客户 A:A3性别 男:1机构 O:O3客户 A:A性别 男:M机构 O:O操作系统数据仓库核心信贷国结MAPPING操作系统是实时、事务级的更新和小数据明细的查询。数据仓库是定期、批量更新和大数据汇总
3、查询的。由于数据仓库一般并不会更新历史数据,所以数据仓库是非易失的。非易失操作系统数据仓库载入访问修改增加删除查询操作系统一般只会保留数据的最新记录。数据仓库需要保留各个历史时点的数据,已便于对数据在时间维度上进行分析、挖掘。随时间变化操作系统数据仓库时间期限:近三个月记录更新日期戳可有可无时间期限:510年复杂的快照数据时间维度自顶向下:先建设数据仓库,再建设数据集市自底向上:先独立建设数据集市,在统一维度总线的基础上合成数据仓库数据仓库的两种建设方式核心信贷国结数据仓库对公集市零售集市风险集市核心信贷国结数据仓库对公集市零售集市风险集市自顶向下自底向上统一维度总线一般银行业数据平台架构数据
4、架构中的关注点(五个维度)目标服务数据加载;直接提供基于源系统结构的简单原貌访问;长期的,细节的,整合的数据存储;为BI环境中的各类业务需求提供支持相对通用,具业务意义的初加工数据;作为上层应用数据加工的基础,或供业务人员直接访问;服务特定应用原则简单处理,不考虑整合;关注保留策略;面向全局,数据整合中性设计,灵活扩展提供规范和共享提炼应用需求共性多种数据粒度易于理解和使用面向具体应用按需设计形式偏源系统模型;少量数据保留短暂历史;部分数据保留全量面向主题设计;偏范式化;长期保留历史;初步数据加工;分层设计;形式各异,依具体应用不同;重点理解源结构主题定义框架设计整合策略实施方法应用筛选应用提
5、炼整体性一致性用途业务原貌查询即时报表数据质量检查灵活查询整合规则检查常规报表灵活查询业务规则检查特定应用 缓冲层 基础层 汇总层 应用集市层数据架构之EDW12数据平台上报数据报表数据指标数据查询数据参数数据挖掘数据.信用卡网银基金代销核心信贷国结EDW数据缓冲层(FDM)核心信贷国结信用卡网银基金代销LDM汇总数据账户汇总交易汇总产品汇总渠道汇总客户汇总整合数据层(LDM)协议团体事件账务产品渠道供统一的业务口径避免集市的重复加工随着应用建设逐步完善业务统计口径变化,ETL会随之变化视情况保留较长历史 为ETL方便设计的专用层,可加载增量或全量数据 在此层完成数据同构化 数据原样加载,保持
6、与源结构一致 一般按照业务系统进行命名识别 可保留部分最近数据以供重新加载 面向整合 主题设计 标准化数据 3NF设计 保留较长历史数据集市(DM)管理会计数据集市风险管理数据集市客户关系数据集市财务管理数据集市经营管理数据集市其他业务数据集市 面向应用,按需定制 可分为内部集市和外部集市 可通过反范式提高响应性能 可为汇总层提供扩充依据 视情况保留较长历史从前面一般银行数据仓库的架构可以看出,数据集市是数据仓库的一个子集,是为特定的分析应用而建设的。数据集市根据所处位置的不同分以下几类:数据集市数据仓库源系统.信用卡网银基金代销核心信贷国结数据缓冲层仓内物理集市仓外物理集市仓内逻辑集市整合数
7、据层共性汇总层目录 03040605070102资产业务(客户立场):资产业务(客户立场):活期:单位活期存款是指,不规定存款期限,客户可以随时存取,并按活期存款利率按季计取利息的存款。定期:单位定期存款是客户与我行事先约定存款期限,到期后支取本息的存款。保证金:保证金是指客户或第三方为担保客户履行与我行签定的相关合同义务,出于设置担保目的而存入我行的,归客户或第三方所有但由我行占有的特定化的资金。负债业务(客户立场):负债业务(客户立场):一般贷款:负债业务主要是银行对单位客户提供资金融通的表内业务。一般贷款是指一般的资金融通业务,不包含保理和贴现。保理:保理是一项综合性金融服务。在保理业务
8、中,卖方将其现在或将来的基于其与买方订立的货物销售/服务合同所产生的应收帐款转让给银行,由银行提供贸易融资、账户管理、应收账款催收、风险控制等服务。贴现:贴现是商业汇票的持票人将未到期的商业汇票转让给银行,银行按票面金额扣除贴现利息后,将贴现金额付给持票人的一种融资行为。银行对公业务表外业务:表外业务:所谓表外业务,即不计入资产负债表的业务,国家对这部分业务的限制较少,也不影响银行资产负债表,是目前银行大力发展的业务。保函:又称保证书,是指银行、保险公司、担保公司或个人应申请人的请求,向第三方开立的一种书面信用担保凭证。保证在申请人未能按双方协议履行起责任或义务时,由担保人代其履行一定金额、一
9、定期限范围内的某种支付责任或经济赔偿责任。银行保函包括履约保函、预付款保函、投标保函、维修保函、预留金保函、税款保付反担保函、海关风险保证金保函等。信用证:信用证系指,银行依照申请人的申请向受益人开出的,凭符合信用证条款规定的单据支付一定金额的付款承诺。信用证是国际结算的一种重要工具。银行承兑汇票:银行承兑汇票是指,由承兑申请人签发并向开户银行申请,经银行审查同意承兑的商业汇票。其中,商业汇票是出票人签发的,委托付款人在指定日期无条件支付确定的金额给收款人或者持票人的票据;承兑是指汇票付款人承诺在汇票到期日支付汇票金额的票据行为。银行对公业务目录 03040605070102 为更好的贯彻最佳
10、银行战略,做好公司业务客户管理和营销工作,进一步巩固和发挥平安银行业务优势实现公司银行的战略目标。为适应平安银行对公业务管理需要,为支持最新的对公业务管理工作方针,为配合、推进平安集团综合金融的战略要求;必须实现银行对公客户信息整合,形成对公数据集市,通过整合客户的数据信息,进一步挖掘客户的价值信息,更好的支持公司业务客户营销、管理分析工作的开展。挖掘客户的潜在需求,为我行制定个人业务发展战略、产品创新、客户服务的准确定位提供了良好的、科学的分析依据。同时,为战略客户的营销和管理提供依据,通过客户信息的整合,客户经理及各层级管理领导、各分支行机构能全方位的360度的了解公司客户过去及现状的全貌
11、,能第一时间了解客户的营销意向,能清晰的知道客户给我行带来的价值,以日常工作平台为高效的沟通管理工具,对重点项目、销售机会和营销活动等营销服务管理的资源共享和工作协同,实现银行E化营销销售流程管理,并带来新的客户服务体系、科学的市场营销策略、更低的营销和服务成本、更高的客户保留率、优化的银行市场价值链条、以及增加银行业务量、提高商业银行核心竞争能力,实现公司银行的战略目标。项目背景项目目标功能范围简述银行对公客户信息整合包括客户基本信息、客户产品信息、客户销售信息、客户价值信息等,建立统一完整的客户360视图建立对公营销产品目录树配合对公条线各部门基于产品营销的需求,建设一套以产品归口管理部门
12、划分的产品目录树统一对公系统群数据源各个业务单元和对公管理系统使用数据源统一由对公数据集市提供(本期为精准营销平台,对公报表提供数据支持)实现对公条线各部门各事业部功能及报表数据需求完善对公业务分析统计模型,使之能够全面的支撑各业务单元的功能及报表统计需求 支持事业部、分行等机构考核配合各部门基于产品核算的需求,协助事业部及分行等机构的考核、调整。目录 03040605070102集市总体架构对公数据集市(Oracle(11G)明细区汇总区数据采集平台应用系统ODS数据平台E T L(落地文件)历史归档数据标准管理数据质量管理业务应用数据实时数据服务数据服务区批量数据服务直连应用数据整合与输出
13、源系统核心信贷 网银票据国结第三方补录对公CRM对公绩效对公客户升级对公报表精准营销平台SAS指标区交易系统点对点文件传输应用数据整合与输出报表数据挖掘区部门特色需求收益、补录数据PDM(明细层 GreenPlum)集市数据架构应用系统数据标准管理数据质量管理源系统ODS平台汇总区指标区数据服务区报表数据部门特色需求数据差异统计临时统计其他需求专题分析挖掘区业务应用数据SAS直连固定报表多维报表管理驾驶仓对公CRM对公绩效对公客户升级精准营销平台余额汇总贡献度汇总产品汇总其他汇总交易汇总客户扁平化客户标志对公CRM对公绩效对公客户升级对公报表精准营销平台SAS账户数指标客户数指标交易量指标资产
14、类指标负债类指标收支类指标明细区利率类指标客户主题汇总区部门快报其他指标指标区精准营销平台数据服务区客户基本信息客户映射关系客户联系信息帐号主题账户基本信息账户扩展信息账户客户关系产品主题产品基本信息产品账户映射客户权益客户收益信息客户风险信息客户分层标准交易 主题交易整合信息交易对手信息银行组织财务主题附属信息各系统账务信息银行机构信息银行员工信息公共信息公共维度信息其他附加信息明细数据区集市物理架构对公数据集市环境配置:生产环境:2台 IBM P720 8C 32G 1T 存储 IP:10.1.39.224、10.1.39.225 集市数据加工流程目录 03040605070102对公数据
15、大集中(集成21个对公系统数据)序号系统业务数据1统一客户信息系统(BECIF系统)客户基本信息(客户号统一,先行统一客户升级及对公CRM)2核心系统客户基本信息、账户信息、国内保函信息、现金管理信息、存款信息、贷款信息、传票信息、机构信息、科目信息、(还款利息)、欠息等3信贷系统客户基本信息、授信业务品种信息、授信审批信息、授信合同信息、授信借据信息、抵押物信息、担保物信息、其他重要信息等4票据系统客户基本信息、承兑汇票信息、票据贴现信息、开票申请信息等5国际结算系统客户基本信息、国内信用证信息、进口信用证信息、进口保函信息、汇入汇出信息、托收(跟单、光票)信息、外汇买卖信息、传票数据等6基
16、金与理财系统客户基本信息、客户签约信息、基金交易信息、理财交易信息、基金余额信息、理财余额信息7保理系统客户基本信息、保理产品信息、保理交易信息、保理余额信息、发票信息8黄金系统客户基本信息、签约信息、黄金产品信息、现货交易信息、延期交易信息、库存信息。93方存管系统客户基本信息、签约信息、产品信息、交易信息、余额信息、券商信息10国债系统客户基本信息、签约信息、国债产品信息、国债交易信息、国债余额信息11网银系统客户基本信息、签约信息、交易信息12银企直联系统客户基本信息、签约信息、交易信息13供应链系统客户基本信息(包含核心企业信息、监管方信息)、签约信息、供应链信息、抵押物信息、供应链产
17、品信息、交易信息14中间业务平台客户信息、代发、代付账户信息、交易信息15会计核算系统(SAP)客户收益信息(ftp与利息)、产品目录树及相关信息、中间业务交易信息16风险资产管理系统(RWA)RWA风险资产信息(风险金额)17绩效系统客户、账户分配信息、客户主办客户经理信息18CRM系统客户主办客户经理信息、客户合并信息、产品目录及配置信息19人力资源管理系统(NHR)客户经理人员基本信息(编号、职位、机构等)20LDM基础模型余额积数、交易明细、机构基本信息等21OF总账系统总账信息、科目信息对公数据源统一各个业务单元和对公管理系统使用数据源统一由对公数据集市提供。其中包括:数据来源一致、
18、统计口径一致两方面的内容。数据来源一致数据来源一致数据源统一除了构建统一标准的对公数据集市之外,更为重要的是:1.统一共识,业务数据必须由对公数据集市提供。2.数据需求可向数据集市提出,数据集市必须快速响应。3.数据集市必须有足够的前瞻性和总结性,可以容纳范围更广的业务数据。统计口径一致统计口径一致统计口径一致,需要收集和约定一份能达成统一认识的统计口径说明。如:资产负债以总账为标准其它信息以公司银行部为标准。对公数据集市模型主题表前缀功能概述客户主题F_CUST归集以及统一来自各个源系统的客户信息,来源系统包括核心、信贷、银行客户信息管理系统、国结等账户主题F_ACCT归集以及统一账户信息,
19、包括存贷款、理财、表外等账户信息产品主题F_PROD归集以及统一产品信息,构建对公统一产品目录数树银行组织F_ORG归集以及统一银行组织,包括机构、人员、团队等银行内部组织信息客户权益F_RIGH存放客户权益信息,包括客户收益、分层等信息财务主题F_FIN存放各个系统的科目、科目余额等信息交易主题F_TRAD存放对公交易信息,来源主要为LDM交易整合表公共主题F_COM存放公共维度信息附属信息F_ATT存放上述主题外的附属信息 归集对公条线所有数据,按主题划分,通过不同主题分类归集并统一银行对公数据,逻辑模型采用雪花模型进行建模,形成客户、产品、客户经理分析为支撑的大数据分析模型。对公集市模型
20、-客户主题对公集市模型-账户主题对公集市模型-账户主题续对公集市模型-银行组织对公集市模型-产品主题对公集市模型-交易、客户权益与财务主题主题中文表名英文表名交易主题结售汇及外汇买卖明细表F_TRAD_EXCH_FLOW_B交易对手信息表F_TRAD_OPPO_INFO_B账户交易流水表F_TRAD_ACCT_FLOW_B账户交易整合表F_TRAD_ACCT_INTEG_B账户交易流水附加表F_TRAD_ACCT_FLOW_ADD_B网络金融部电子替代率表F_TRAD_WFIN_REPL_B理财买入交易流水表F_TRAD_CLC_BUG_FLOW_B回款交易流水表F_TRAD_REC_FLOW
21、_B中间业务平台交易批次信息表F_TRAD_BIB_BATCH_STAT_B中间业务平台资金交易日志表F_TRAD_BIB_FUND_INFO_B客户权益客户分层标准定义表F_RIGH_CUST_LVL_RULE_B加权风险资产总额表F_RIGH_RMA_RISK_B存款账户收益信息表F_RIGH_DEPO_INC_B贷款账户收益信息表F_RIGH_LOAN_INC_B中间业务客户收益信息表F_RIGH_MID_INC_B财务主题科目信息表F_FIN_SUBJ_INFO_B总账科目信息表F_FIN_GL_SUBJ_INFO_BFBS总账余额表F_FIN_FBS_GL_BAL_B总账余额表F_F
22、IN_GL_BAL_B对公集市模型-附属信息主题中文表名英文表名附属信息担保合同F_ATT_GUAR_CON_B抵押物信息F_ATT_GUAR_INFO_B贷款申请信息表F_ATT_BUS_APPL_B贷款批复信息表F_ATT_BUS_APPR_B贷款合同信息表F_ATT_BUS_CON_B贷款借据信息表F_ATT_BUS_DUE_B贷款借据信息简表F_ATT_BUS_DUE_SPF_B对公账号分配规则主表F_ATT_ACCT_RULE_MAIN_B对公账号分配规则从表F_ATT_ACCT_RULE_DETA_B对公客户权益比例分配规则主表F_ATT_CUST_RULE_MAIN_B对公客户权
23、益比例分配规则从表F_ATT_CUST_RULE_DETA_B子账号分配规则主表F_ATT_SACCT_RULE_MAIN_B子账号分配规则从表F_ATT_SACCT_RULE_DETA_B对公贴现流水分配主表F_ATT_DISC_RULE_MAIN_B对公贴现流水分配从表F_ATT_DISC_RULE_DETA_B对公中间业务流水分配主表F_ATT_MID_RULE_MAIN_B对公中间业务流水分配从表F_ATT_MID_RULE_DETA_B对公表外业务分配表F_ATT_BW_RULE_B对公虚拟用户信息表F_ATT_VAL_USR_B对公票据贴现及中间业务流水挂户表F_ATT_MID_H
24、ANG_B单位代码与客户号映射配置表F_ATT_DF_CUST_MAP_B360度客户视图数据加工建立客户立体化信息视图,汇聚各类客户信息,提供跨越客户生命周期的全方位客户信息,支撑以客户为中心的营销、销售、服务一体化。汇聚各系统客户信息,建立统一的客户信息模型;按照6大分类,汇总客户数据;对各类应用提供客户信息支持。整合客户信息、产品信息、交易信息等数据,结合精准营销平台、绩效考核等应用口径,建立客户统一视图,提供标准的客户基础信息、统一客户识别信息。客户权益关系 客户行为信息客户持有产品信息客户信用与风险客户基本信息360度客户视图客户签约信息 客户360度视图信息 客户信息360度视图是
25、全方位了解银行公司业务客户的重要方式,对公数据集市以BECIF号为银客户的唯一标识,通过整合客户的数据信息,进一步挖掘客户的价值信息,更好的支持我行公司业务客户营销、管理分析工作的开展。通过客户信息的整合,客户经理及各层级管理领导、各分支行机构能全方位的了解公司客户过去及现状的全貌,能清晰的知道客户给我行带来的价值,能第一时间了解客户的营销意向等,进而可以满足我行日常营销、分析决策以及业务发展需要。潜在客户收集信贷系统信贷系统存在客户信息,在核心系统不存在客户、账户信息的客户。供应链供应链系统存在的供应链厂商上下游关系,在核心系统不存在客户、账户信息的客户。核心系统客户在我行的所有账户月日均余
展开阅读全文