某大数据方案概览课件.pptx

1、 2019年10月中国联通大数据方案概览目录目录一大数据与金融行业联通大数据能力介绍二三联通金融大数据合作技术革命的浪潮技术革命的浪潮光纤通信数据通信移动通信互联网超级计算云计算大数据机器学习人工智能DT信息为王应用为王数据为王什么是大数据什么是大数据自然(Nature)杂志专刊The next google 第一次提出“大数据”概念2008年9月2011年2月科学(Science)杂志专刊Dealing with data，通过社会调查的方式，第一次综合分析了大数据对人们生活造成的影响。2011年5月麦肯锡研究院发布报告 Big data,the next frontier of innov

2、ation,competition,and productivity第一次给大数据做出相对清晰的定义：大数据是指其大小超出了常规数据库工具获取、存储、管理和分析能力的数据集。大数据(BIG DATA)是可以被记录、采集和开发利用的海量、实时、多样化的数据集、数据流和数据体。大数据的特点大数据的特点ABDC特点价值密度低处理速度快数据体量大数据类型繁多TB-PB日志、视频、图片“1秒定律”可用数据少5大数据是处理海量数据的过程，用最有效的方式寻找最有价值的数据的过程，是追求数据价值最大化的一个过程。全球大数据发展现状及趋势全球大数据发展现状及趋势技术营销服务商业模式机遇大数据作为一种重要的战略资

3、产，将不同程度渗透到每个行业领域和机构，并越来越广泛、深入地推动国民经济发展和企业经营：宏观层面，帮助把握经济走向、制定并实施科学的经济政策；微观方面，提高企业经营决策水平和效率，推动创新，发掘新的商机随着互联网、移动互联网、社交网络、物联网、云计算等技术的迅猛发展，当今社会已进入大数据时代n大数据正在推动第三次信息化革命全球大数据规模根据IDC监测统计：2011年全球数据总量已经达到1.8ZB(1ZB等于1万亿GB，1.8ZB也就相当于18亿个1TB移动硬盘的存储量)；这个数值在以每两年翻一番的速度增长；预计到2020年全球将总共拥有35ZB的数据量，增长近20倍我国大数据规模ZDNET数据

4、中心2013：硬件重构与软件定义年度技术报告 2013 年中国产生的数据总量超过0.8ZB（相当于8亿TB），2 倍于2012 年，相当于2009 年全球的数据总量；预计到2020 年，中国产生的数据总量将是2013年的10倍，超过8.5ZB大数据技术作为一种重要的信息技术，是全球信息化革命第三次浪潮的华美篇章；以大数据为核心的科技变革将推动社会市场营销、服务方式、商业模式、商机发掘的连锁发展n大数据将加大改变经济社会管理面貌大数据是我国经济转型发展的新动力大数据是我国经济转型发展的新动力习近平在17年12月8日主持中共中央政治局第二次集体学习时强调审时度势精心谋划超前布局力争主动实施国家大数

5、据战略加快建设数字中国2016年5月25日李克强总理在贵阳出席中国大数据产业峰会上的演讲催生更多的新产业、新业态、新模式把握这一历史机遇，抢占先机，赢得未来2016年6月27日李克强总理在第十届夏季沃达斯论坛上的演讲加快大数据，推动传统产业生产、管理和营销模式变革2017年3月5日李克强总理在第十二届全国人大五次会议上作政府工作报告大数据四次写入政府工作报告国务院关于促进大数据发展行动纲要的通知（国发201550号）宏观上，大数据有助于推动行业供给侧改革，调整经济结构，实现供需最优配置，提升行业经济增长的质量和数量。大数据带来的高效经济时代已经来临！2017年5月16日，李克强向2017中国国

6、际大数据产业博览会致贺信中国大数据市场年均增速超过50%各行业领域份额分布据贵阳大数据中心统计与预测，2017年大数据各专业领域的收入占比如下数据来源：贵阳大数据中心白皮书p2017年大数据产业规模总额将突破三千亿p 在十三五期间带动市场规模万亿之巨的IT服务业转型，促进国民经济其他领域的飞速发展大数据日趋成为一个和各行业都息息相关的重要领域，全力助推各行业发展国内国内大数据进入快速发展期大数据进入快速发展期大数据促使更多行业受益大数据促使更多行业受益大数据存在的主要问题大数据存在的主要问题10有什么数据？数据能做什么？改变金融业态，打造高效金融体系改变金融业态，打造高效金融体系为客户定制差异

7、化产品和营销方案推动金融产品和服务创新侦测、打击逃税、洗钱与金融诈骗大数据风控建立客户信用评分、监测对照体系应用经济指标预测系统分析市场走势追踪社交媒体上的海量信息评估行情变化提供广泛的投资选择和交易切换打造高效金融监管构建强大金融分析形成精准用户营销推动完善客户服务提供广泛的投资选择和交易切换利用云端数据库为客户提供记账服务催生并支撑人工智能交易目录目录一大数据与金融行业联通大数据能力介绍二三联通金融大数据合作中国中国联通大数据建设历程联通大数据建设历程l构建基础平台能力打基础建平台l整合B/M/O/E各域数据l探索研发大数据产品：联通慧眼、沃风云榜.l依托大数据完成多个模型开发l打造标杆产

8、品和项目l能力开放：平台、数据、产品l运营体系：省市一体、售前中后一站式服务l推广复制：标准化解决方案l优化大数据服务体系：全面聚合全公司大数据资源，优化大数据产品服务体系。l深化数据模型应用与研究：加强存量经营大数据应用力度，开拓产学研合作模式。20132014201520162017整数据创产品建模型树标杆推应用共运营聚资源强基础能力聚合能力开放能力升级跨 行 业 数 据 采 集 整 合 能 力大 数 据 治 理 能 力大 数 据 产 品 交 付 能 力多 行 业 解 决 方 案 能 力大 数 据 平 台 集 成 能 力大 数 据 运 营 能 力123456数 据 资 产联通大数据核心能力

9、联通大数据核心能力种类众多且完整度领先的全域数据种类众多且完整度领先的全域数据运营商大数据具备全面性、多维性、中立性、完整性是其它企业很难比拟的，而且通过这些不同维度数据的交叉关联，可以创造更多的新数据和新价值。身份上网位置社交支出通信终端时序基于通信交往圈的大小，主被叫，时间序列，得到用户的社交特征运营商的通过位置信息，可以掌握用户出行特征，给用户带来生活的极大便利基于用户访问什么网址，下载什么应用，访问什么内容等，得到上网喜好运营商不仅客户信息覆盖完整，还可以基于实际行为进行验证。通过身份信息，帮助金融机构快速判定用户的信用程度 运营商有客户最为详实的消费账单，比如流量费，短信费、语音费、

10、新业务费等，能反映用户的一些特征 通过用户的通信使用情况，比如本地，漫游，长途，了解用户通话行为特征识别记录手机终端型号，了解用户手机使用特征，发展趋势，用户换机周期等 通过用户上网，位置，通话等行为按照时间排列，了解更多规律提供更多服务 联通大数据能力丰富的数据整合能力联通大数据能力丰富的数据整合能力整合B域外部M域E域O域用户数据（6000万）基础信息、扩展信息指标、标签（7000多项）全成本数据、日记账数据海波龙报表数据通管局下发数据搜索数据、上网轨迹数据（180亿条/日）APP使用数据（34亿条/日）爬虫数据（1200万条/日）电路信令（110亿条/日）分组域信令、固网信令数据号线数据

11、、WIFI数据行业数据智慧城市异网用户日吞吐经营数据量21TB存储能力15PB日处理用户位置记录110亿条日处理手机上网记录180亿条日处理爬虫页面1200万用户域客户域渠道域“6W”问题Who:用户是谁Where:用户在哪when:什么时候What:干什么Whom:与谁联系which:什么终端 在数据整合方面，基于用户数据整合联通结构化数据、非结构化数据，形成各种高效的用户标签信息。同时我们还在其它项目如政务大数据、银行大数据等方面进行了数据的整合。联通大数据能力数据建模能力 在数据建模方面，除了联通内部的营销建模外如老板在哪，交往关系圈等；其中交往圈的应用在银行项目中追欠应用中发挥出色；另

12、外在互联网金融征信等建模能力均获得业界认可。用户数据主叫通话被叫通话短信记录彩信记录基础特征更多家庭职场朋友交往圈家庭影响力朋友影响力职场影响力交往圈关键人营销交往圈老板在哪银行短信锁定老板进出帐频率（行业短信）用户稳定度分析识别老板特征（用户特征）商圈位置信令数据，圈定老板用户群体（位置信令）通过对目标客户群体多重筛选，准确定位老板人群。老板识别步骤首创通过元数据解决异构数据整合，实现大数据平台的松耦合、可扩展性。该平台除了成功应用于中国联通大数据平台，同时对外应用于中国省网上办事大厅的客户关系管理系统及广发大数据平台。联通大数据能力自主设计异构大数据平台架构联通大数据能力自主设计异构大数据

13、平台架构产品库模型库数据合作主机资源池网络资源池存储资源池B域、域、域、域、外部数据应用支撑数据采集、清洗、转换、汇总（ETL）结构化数据存储（MPP）流计算实时处理平台标准化数据服务接口指标数据汇总计算大数据汇总、挖掘计算实时汇总、分析计算非结构化/大数据存储（Hadoop）自主架构设计自主平台选型自主数据整合自主运维核心数据掌控数据安全敏捷式开发实现产品快速迭代构建松耦合平台具备线性扩展能力元数据管理数据质量管理生命周期管理数据安全管理3.4.2.1.联通大数据能力产品应用设计能力联通大数据能力产品应用设计能力在大数据方面，我们致力成为大数据的生产者、提供者、传输者与服务者，以号码为唯一的

14、ID来整合各类数据，解决移动互联网时代最为关注的三个问题：我是谁，我在哪里，我在干什么。在数据对外运营的摸索期中，形成集团、省多个对外运营的大数据产品。Wo风控01Wo指数02Wo营销04智慧足迹03能力开放平台05Wo旅游06总部省分联通慧眼01社会治安大数据平台02气象灾害预警平台03强大的运营能力优势强大的运营能力优势中国联通已建立专业化大数据人才梯队,打造集团、省、市三级纵向一体化运营体系，以及售前、售中、售后横向一站式服务体系，在政府、金融、旅游、交通、传媒、零售等行业开展广泛应用和合作，积累丰富经验。中国联通依靠强有力的大数据本地队伍，将成为“中国联通大数据华南基地”。售前、售中、

15、售后一站式服务打造集团省市专业化人才梯队政府、行业大数据专家 大数据研究生大数据平台应用建设大数据业务运营大数据数据建模大数据战略专家挖掘客户需求实现售后服务承诺数据输出运行维护售前售中售后方案设计挖掘需求方案交流DEMO演示 质量监管 过程控制战客系统集成地市公司集客需求 开发实施联通（中国）产业互联网有限公司支撑目录目录一大数据与金融行业联通大数据能力介绍二三联通金融大数据合作金融大数据金融大数据合作合作探索探索n针对金融行业业务需求，联通大数据在以下业务内容中与金融行业进行合作新开金融网点合作内容：网点选址分析金融产品销售合作内容：产品精准营销客户办理金融业务合作内容：金融风控验真金融客

16、户流失合作内容：客户失恋修复 沉睡用户唤醒1234联通金融大数据探索构建大数据平台及应用：构建大数据平台、整合数据、建设专门的大数据应用。1自有数据联通数据1 1、构建金融大数据平台、构建金融大数据平台n联通金融大数据平台合作的优势：1、大数据平台采用元数据解决平台松耦合扩展性 2、银行数据与运营商数据的深度融合数据源层数据交换层数据运算层数据服务层数据应用层以往客户数据互联网数据运营商数据.Flume实时数据采集传输ETL批量数据采集传输RedisHbaseMPP数据实时查询StormRedis数据实时运算Hive/HbaseSparkMapReduce数据离线运算数据应用区流式计算区数据存

17、储和分析区统一数据服务接口数据服务对外接口统一接口客户全景视图权限服务调度数据安全导出自定义报表日志分析对外数据合作案例案例1 1：金融大数据平台搭建：金融大数据平台搭建n 联通凭借自身的大数据人才、技术和经验优势，为某银行提供从平台架构咨询到平台代建，再到模型共建、数据特区（共享）等一揽子服务，是联通大数据能力全方位输出的典范。架构咨询大数据平台规划技术体系规划配套管理规划内外部调研平台搭建PAASIAAS主机资源网络资源存储资源MPP架构搭建Hadoop集群搭建应用建设精准营销模型建设数据运营数据特区征信应用123标签合作SAAS自助工具客户全景视图2 2、金融网点选址、金融网点选址n对区

18、域人群整体分布特点及人群流动趋势进行分析，帮助客户快速识别潜在高价值地段，节约调研成本，提高选址决策效率n对已有网点进行评估，评估该网点的周边人群画像数据，人流量情况、人口特征情况、人口消费偏好、社交信息、行为习惯等信息，确定网点影响力范围选址分析区域选址行业分类生成推荐报告选址标签权重网点画像消费偏好外部数据行为习惯人口特征人流量社交信息案例案例2 2：金融网点选址：金融网点选址某银行网点选址某银行网点选址热度区域挖掘根据工作、居住、到访等多个维度对区域人群量级进行统计，挖掘最热点区域用户行为分析人流量情况、人口特征情况、人口消费偏好、社交信息、行为习惯（APP使用情况）等信息区域干扰分析及

19、竞争分析分析区域内已有的银行网点影响辐射范围，避免重复建设，同时结合区域内竞争对手情况，进行区域竞争分析，确定是否进行跟随区域市场贡献度分析区域内已有网点营业额度，确定区域潜力地块研究针对地块的交通情况，确定最优点指数评估及建议结合前5点情况，进行指数分析，得出建设建议选址优势数据规范节约成本结合实际量化评估可视直观3 3、金融产品精准营销、金融产品精准营销n通过大数据，对用户行为特征进行深度挖掘，结合营销内容，确定目标用户群，并通过大数据对营销产品、营销时机和营销渠道进行精准定位后，执行营销过程，评估营销效果，并进行营销模型和营销目标的调整优化1、选取目标用户2、营销分析策划3、营销过程执行

20、4、营销效果评估客户细分特征分析偏好预测行为偏好客户分析渠道分析产品匹配方案定制任务建立任务管理任务审批任务执行引流率转化率根据营销效果，优化调整营销模型，调整目标用户金融产品精准营销优势金融产品精准营销优势通过联通大数据，进行金融产品精准营销，可以有效实现对用户的精准分析、全方位触达。降低营销成本，提高营销效果基本属性年龄性别地域帐期通信行为类在网时长业务类型上网时间偏好交往圈购物偏好手机淘宝京东商城1号店唯品汇银行消费个人还贷能力交易总金额月均交易金额月均交易笔数支付偏好支付宝银联钱包京东钱包翼支付位置信息工作地居住地国内出差次数国内出差时长终端偏好苹果华为小米金融产品精准营销优势金融产品

21、精准营销优势 互联网投放模式l 通过数据分析对目标群体进行精准推送,以对用户贴标签和用户画像为基础，通过互联网渠道实时投放，进行精准触达。批量营销模式 沉淀用户行为作为接入点的线下批量营销，引入中国联通大数据，精准的找到产品的目标人群。支持联通丰富的渠道精准触达。实时场景营销模式 以用户实时行为作为接入点的实时场景营销，场景包括位置类、APP类、URL类、搜索关键词类、固定电话类。失联复联模式l 面向行业客户的存量用户，依据其提供的身份证号、终端MAC、终端IDFA、终端IMEI等账号，复联出用户当前的手机号。多样化营销模式线下渠道Wo邮箱彩信短信外呼线上渠道互联网广告渠道手机营业厅 爱奇艺

22、百度 腾讯广点通Wo门户 116114 Wo阅读 今日头条线上线下全方位触达渠道联通线上广告渠道案例案例3 3：精准营销案例：精准营销案例某银行精准营销某银行精准营销n*银行需求为针对自身的存量用户维系推广新产品，提供的3万存量用户通过用户群导入、用户群筛选、营销计划创建功能后通过FTP接口下发目标用户清单，及对筛选的目标用户群分析，以截图的形式告知北京银行用户群分析结果。方案流程通过专线下发目标用户清单（用户号码+身份证后6位）精准营销平台3万存量用户号码+身份证后6位用户群导入大数据平台数据处理（标记标签）创建用户群提供用户清单至大数据平台用户群筛选关联特征标签生成目标用户群营销计划创建数

23、据下发用户群画像专线网络案例案例3 3：精准营销案例：精准营销案例某银行精准营销效果某银行精准营销效果n通过联通精准营销模式为*银行24010个存量用户进行了精准用户定位用户分群用户数占有效用户比营销指导关注商务应用类网站2330.97%稳定性高理财产品推荐关注炒股类APP11,36547.33%高收益理财产品推荐接听客服电话超过30秒5,54623.10%适合外呼营销关注*银行APP1,4746.14%VIP客户注重维系用户ID 终端类型近三个月出账收入(元)上网流量(MB)客户评级在网时长(月)触媒偏好TOP1近六个月出差天数（出国）访问购物网站次数非北京银行手机银行APP马连道支行_wo

24、rk186*1234iPhone 6 Plus(A1524)298624无级别179今日头条465203186*3456iPhone 6 Plus(A1524)633.55 2392.9金卡55微信2541111186*2678iPhone 5S1383.8 818.1银卡46网易新闻3723121*银行本次营销有效用户与联通用户电话号码匹配度达80.26%（给了31639个样本，剔除了不在北京的1725个、重复数据27个，销户的、无状态的用户后达到24010个有效用户）为*银行个性化定制标签34个，涵盖用户身份属性、终端基本属性、位置状态、上网行为、兴趣偏好等几大类别根据标签分类细分用户群进

25、行精准用户定位，进而提供个性化营销指导通过接听银行客服电话的时间分布统计，建议针对超过30秒的用户再次使用联通精准营销平台外的外呼触达功能，优化银行营销模式4 4、完善金融风控体系、完善金融风控体系n通过运营商掌握的真实全面的用户信息，为金融行业提供贷前、贷中用户信息验真评估，贷后失联用户修复等一系列风控服务，帮助其降低风险用户身份信息核查比对用户通信消费的历史信用记录月均消费能力评估业务使用行为特征分析黑名单状态验证终端价值评估.实时位置比对，阻截可疑金融交易互联网访问内容异常监控交际圈异常监控过户/销户感知频繁换机感知消费行为突降/突增异常监控.失联用户信息重判定与复联协助贷前预防及贷中防

26、控能力完善.前-预防中-防控后-分析分析报告服务模式API查询接口分析报告风控产品优势风控产品优势联通金融风险控制产品，较市面上其他公司的金融风控产品，具有以下特点和优势：整合联通、电信、移动三网全国手机用户数据，覆盖全国所有手机用户全面性01 运营商自身数据，实时更新，更及时更准确及时性02 提供招联与联通合作开发沃信用分进行商业，价值高，可用性强可用性03可靠性 联通集团自身情况，保证数据及合作的可靠性04征信验真产品征信验真产品沃信用分应用沃信用分应用授信用户不良贷款率小于放贷款量同行业排名1400万1.2%第一手机号码信用报告征信授权金融机构新用户银行业务申请身份信息核查黑名单状态验证

27、终端类型评估月均消费能力评估风控平台银行放贷案例案例4 4：征信验真案例：征信验真案例蚂蚁金服蚂蚁金服n合作伙伴：蚂蚁金服即阿里小微金融服务集团，旗下业务包括支付宝、支付宝钱包、余额宝、招财宝、蚂蚁小贷、网商银行等。n应用场景：用于辅助用户支付账户操作的安全风险控制，如大额转账、交易瞬间多笔转账、快捷支付换绑手机、被骗授权（频繁发校验码）等。n产品形态：一致性判断、评价分值。用户用户身份嫌疑查询用户隐私授权（注册时）风险控制（用户身份嫌疑）业务操作是/否5.5.金融产品信息补全、失联修复金融产品信息补全、失联修复回款率提升超5%催收员时间成本降低约25%案件触达率提升约13%备注：根据某金融机

28、构M1案件进行的数据测算n 通过运营商数据，进行金融机构相关客户的信息补全、失联修复工作，可以大大节约成本，提高准确性案例案例5 5：某保险老用户召回：某保险老用户召回n通过分析保险公司存量客户信息数据，制定个性营销计划，进行精准召回1.用户群：只有身份证号的失联老用户2.提供字段：身份证号MD5加密XX保险精准营销平台数据匹配触点导入用户群外呼目标用户群清单需求分析+号码筛选未来可以根据标签更加精准定位用户群用户群分析条件1条件2条件3标签1：男性 标签2：年龄50岁以下自由设定条件标签7：*保险APP 标签8：理财偏好标签4：职业 标签5：金融爱好者赠险成功打标联通返回标记成功的完整电话号

29、码及对应的身份证号实施方案整体架构数据清洗过程河南外呼用户 35591490一个身份证号对应一个号码且身份证号姓名一致919一个身份证号对应一个号码身份证号一致姓名不一致764一个身份证号对应两个号码且身份证号一致姓名一致386一个身份证号对应两个号码身份证号一致姓名不一致河南地区外呼赠险营销活动成功率（接受赠险率）高达18.88%案例案例5 5：某保险老用户召回效果：某保险老用户召回效果n通过分析保险公司存量客户信息数据，制定个性营销计划，进行精准召回外显号码和话术内容以及坐席的说话方式是影响赠险成功率的重要因素，因此提升外显号码的规律性、精简话术内容、加强坐席外呼培训等改进手段，可以较大提

30、升赠险成功率，提高保险失联老用户找回的效率42.20%18.88%15.17%河南地区测试样本身份证号23458个7天共计接通1502个号码，接通率占比42.2%（如果外显号码更加规律预估能到50%以上）最终同意接受赠险用户672个，赠险成功率18.8%筛选出正常在网联通用户电话号码3559个，占比15.17%联通大数据联通大数据业务业务安全合规安全合规n从管理制度、技术手段、实施运营体系三方面出发，建立了覆盖全面、数据细分的端到端安全管控体系；n中国联通数据中心首次以独立的大数据业务为主体于2016年12月18日顺利通过ISO/IEC27001认证，标志着中国运营商的大数据建设和运营在信息安全管理领域与国际标准接轨。ISO/IEC27001管理制度完备严谨技术手段先进科学运营体系灵敏闭环资质认证覆盖端到端安全管控体系谢 谢