北京移动大数据研究项目27课件.pptx

1、Information Change the World2013年6月北京东方国信科技股份有限公司北京移动大数据研究项目投标方案Information Change the World目录3成功案例介绍2本项目的要求及我们的理解4 项目组织安排东方国信公司简介 1总体技术方案5Information Change the World2东方国信是国内唯一一家以商业智能为题材的上市公司在2013年1月福布斯中文版发布其2013年度榜单“中国潜力企业榜”中，我公司再一次被列入“中国最具潜力100家上市公司”榜单第七位，这是我公司连续两年被福布斯中国收录该榜单之中。我公司被列入“中国潜力上市公司100

2、强”，证明了福布斯中文版对东方国信的未来发展规划、商业运行模式、核心技术实力、管理理念和人才理念的认可。最适用的商业智能产品及解决方案最优产品，最佳服务构筑民族BI全产业链第一品牌公司致力于夯实国内商业智能与软件服务第一品牌最专业的商业智能业务专家库最高效的商业智能交付实施团队Information Change the World东方国信为多行业客户提供专业化的商业智能解决方案3 作为核心合作伙伴供应商，我公司承建了中国联通25个省分公司及联通集团公司集中化经营分析系统的建设工作。这其中东方国信帮助中国联通构建了全国最大的数据仓库系统集中化数据仓库（总数据量193PB）；我公司承建了中国电信

3、14个省分公司的数据仓库系统和核心经营分析系统的建设和运营工作；我公司为中国移动9个省分公司和移动集团公司提供数据仓库系统和经营分析系统的建设及运营工作。同时为中国移动全资子公司中国铁通集团公司及4个省分公司提供核心系统软件及建设服务；东方国信为国家电网、中国石油、西部机场集团、中航三星人寿及多家地方商业银行等客户，提供数据仓库及商业智能解决方案。Information Change the World东方国信在商业智能领域的核心竞争力4领先经验团队专注资金大规模研发资金投入，紧跟云计算、“大数据”处理、社交化、数据可视化等业界脉搏汇聚业内800名精通商业智能业务的专家，辅助客户有效地挖掘数据

4、资产超过2600人的专业服务队伍提供专业化商业智能定制方案1997年至今，始终专注于国内数据仓库及商业智能领域的产品研发，专注于做适合国内客户的Bi软件借助资本市场的有利条件，实现充沛的资金保障，确保公司的稳定和可持续发展在群雄逐鹿的商业智能领域，东方国信靠什么一路走来？Information Change the World多年的BI领域运营经验告诉我们：商业智能系统的价值彰显本质上依靠持续不断的运营5东方国信一直采用“T+B”的运营模式辅助客户用好BI系统，确保客户投入的商业智能系统有效地发挥其价值Think业务咨询Build系统建设将业务咨询的分析与研究成果在平台上进行固化，使系统能够更

5、有效地满足业务部门的支撑需求平台中的技术数据是业务分析与模型构建的基础，咨询的成果来源于系统平台，通过业务咨询能够充分发挥平台建设的价值 主要工作描述 业务梳理 问题诊断 原因定位 监控分析 模型设计 策略建议 效果评估 需求编写 主要工作描述 平台规划 架构设计 需求理解 数据准备 接口建设 系统开发 系统测试 调优Information Change the World目录3成功案例介绍2本项目的要求及我们的理解4 项目组织安排东方国信公司简介 1总体技术方案5项目需求本项目主要针对管理支撑域大数据专题研究，其范围主要为本项目主要针对管理支撑域大数据专题研究，其范围主要为MSS域，旨在梳理

6、企业内部管理数据化域，旨在梳理企业内部管理数据化工作现状，探索管理支撑领域大数据的应用价值，规划管理支撑领域大数据的实施路线。研究内容包工作现状，探索管理支撑领域大数据的应用价值，规划管理支撑领域大数据的实施路线。研究内容包括企业内部管理数据化现状调研与梳理、管理支撑大数据应用价值及方案研究、管理支撑大数据实施括企业内部管理数据化现状调研与梳理、管理支撑大数据应用价值及方案研究、管理支撑大数据实施规划建议几部分。规划建议几部分。1企业内部管理数据化现状调研与梳理：伴随企业内部管理的电子化水平不断提升，企业内部管理数据也在逐年增长，包括企业内部人财物信息、内部知识、业务流程数据、企业内部用户的工

7、作行为等。本部分针对MSS域，梳理目前企业内部管理数据化现状，旨在考察目前企业管理的数据化现状。2管理支撑大数据应用价值及方案研究：在数据化现状调研的基础上，借鉴大数据的宏观思想，结合目前企业内部管理的问题与面临的挑战，以挖掘企业内部管理数据价值为目标，总结出目前北京公司管理支撑大数据的应用价值。基于挖掘出的大数据应用价值分析，结合北京公司目前MSS域建设现状及数据现状，设计出大数据思想落地实施的初始化方案建议，建议可以包括组织及流程、人员能力、设计思想、业务逻辑、技术建议等。该建议可以较全面指导北京公司MSS域大数据工作的落地，较完备的保证前期分析的大数据应用价值能够有效的产生。3管理支撑大

8、数据实施规划建议：根据北京公司实际情况制定出阶段性的演进路线，给出未来三年大数据实施的目标及工作步骤，以及大数据思想下未来MSS域的发展建议。Information Change the World目录3成功案例介绍2本项目的要求及我们的理解4 项目组织安排东方国信公司简介 1大数据咨询过程介绍5大数据现状调研与梳理访谈及现状梳理大数据分类及分布评估业务流程评估问题分析报告大数据现状梳理报告实施规划业务流程改进设计管控规范设计大数据维护业务流程报告大数据方案功能、技术架构设计大数据模型设计大数据管控规范功能及技术架构设计报告大数据模型设计报告工具、流程输 入输 出阶阶段段一一阶段二阶段三大数据

9、战略管理架构调研业务现状调研系统现状调研数据现状调研目标评估方案研究及应用建议大数据架构设计业务流程优化大数据方案大数据应用建议大数据应用研究大数据方案研究演进路线规划实施方案规划大数据特点及难题大数据主要特征：量大（PB级别的数据）、实时性（更短的时间处理数据）、多样性（非结构的文档数据为主）。也正是它的这些独具特点，给我们主要带来了“存”、“管”、“用”这三个方面的难题。“存”如何解决 PB 级别大数据的存储问题？“管”如何解决非结构化数据的管理问题？“用”如何解决这种大规模复杂结构下的实时应用问题？大数据与云计算云计算有几个很显著的特征：它基于资源共享，这样就可以实现资源的池化共享和管理

10、，为大数据提供最基本的生存基础它基于服务可用性与快速交付，这样可以降低IT管理的复杂度，提高资源利用率，降低大数据管理的复杂性它基于按需服务与交付能力，通过高性能的扩展，为大数据的实时应用环境提供可能性大数据逻辑架构云服务提供：为云服务对象提供统一的界面和访问，包装云服务资源，建立服务等级(SLA)，管理云服务对象状态和请求云服务管理：管理和维护云计算架构，保障云架构的稳定和可靠云平台资源：构建服务器、存储资源池，实现IaaS；建设企业级数据中心，实现PaaS；通过SOA架构整合系统应用，以提供SaaS。大数据涉及的关键技术X86 虚拟化技术VMware-vSphereMicrosoftHyp

11、er-VCitrix XenServerLinuxXen/KVM/UMLParallels Server Bare MetalUNIX 虚拟化技术IBM AIX LPar、Micro-partitionHP-UXvPar/nParSun-Domain大数据处理技术目前，从技术层面大数据处理技术种类繁多，主要包括数据仓库技术、Hadoop、NoSql、流式处理技术等北京移动大数据演进路线第一试验验证阶段。选择具有典型意义的系统开展试验验证，为大面积现网推广部署提供试验数据，进行云平台的探索和验证，结合云计算标准化工作，逐渐规划出统一云平台的基础框架。第二，试点部署阶段。试点部署应遵循先易后难的原

12、则，优先选取对实时性要求较低，对业务影响较小的系统，开展现网部署。第三，规模推广阶段。在试点部署的基础上，总结经验，优化方案。稳步推进云计算平台在整个管理支撑系统的应用部署。大数据应用价值北京移动大数据成本规划资源池资源池 项目项目 投资投资(万元万元)比例比例 x86资源池 硬件投资 软件投资 IBM资源池 硬件投资 SUN/HP资源池 硬件投资 集成费 软件费 合计 北京移动大数据项目前期成本主要是建立虚拟化资源池的硬件、软件及集成费成本，后期成本会因规划建设的进度有较大的变化。Information Change the World目录3成功案例介绍2本项目的要求及我们的理解4 项目组织

13、安排东方国信公司简介 1大数据咨询过程介绍5项目人员安排Information Change the World北京移动大数据实施步骤关于大数据的几点建议北京移动数据采集和预处理可采用基于Hadoop的分布式ETL技术，引入流计算提高数据转换效率。数据存储和处理采用Hadoop和数据仓库混搭的方式，通过透明访问机制为上层应用提供透明的访问环境采用PaaS的方式向各部门提供资源和应用开发、运行环境，解决平台/数据集中化和各部门应用开发个性化的矛盾。充分利用各种处理平台的特征，实现高效低成本非结构化数据处理在Hadoop平台上存储与处理。结构化、不需要关联分析、Ad-hoc查询较少的数据，建议保存

14、在Nosql数据库或hadoop平台。结构化、需要关联分析或经常ad-hoc查询的数据保存在关系型数据库中，短期高价值数据放在高性能平台，中长期放在低成本产品中。Information Change the World目录3成功案例介绍2本项目的要求及我们的理解4 项目组织安排东方国信公司简介 1大数据咨询过程介绍5通信行业大数据项目经验东方国信承建的中国联通数据大集中项目是目前为止国内最大的基于云计算架构的大数据落地项目。项目名称建设内容描述2012年中国联通总部数据服务支撑平台U-Cloud_D 2.0应用软件更新改造工程(M域-东方国信）应用软件开发合同整合M域及外部数据，实现财务、业务

15、、资源数据的深度关联，建立基于云架构的企业级集中化数据仓库，成为企业唯一的数据服务提供者。2012年中国联通总部渠道集中管理系统应用软件更新改造工程总部数据分析系统全渠道全数据整合及服务部分委托开发合同整合M域及外部数据，实现财务、业务、资源数据的深度关联，建立基于云架构的企业级集中化数据仓库，成为企业唯一的数据服务提供者。2012年中国联通总部数据服务支撑平台U-Cloud_D 2.0应用软件（B域分析应用优化部分）更新改造工程实现经营的日监控和企业绩效的一点展现，保障各级分析服务及营销的全面化支撑，充分发挥大数据在经营中的商机效用，实现集团对业务运营的垂直化管理。11.2.1.4 2012

16、年中国联通总部数据服务支撑平台U-Cloud_D 2.0应用软件（B域数据部分）更新改造工程通过从生产到应用的端到端数据管控和流程保障，构建上下统一的数据管控和评价体系。从而构建基于数据集中化的业务和数据联动。新华社全球一体化多媒体采编和数字生产加工平台技术开发及服务合同新华社全球一体化多媒体采编和数字生产加工平台实现了对文字、网页、图片、视频音频等多种结构化、半结构化和非结构化数据的采集、存储、分析能力，并在此基础上进行多媒体信息的编辑、发布。中航三星人寿TM系统服务框架协议三星人寿电话营销系统，建设内容包括客户信息、客户行为信息、客户访谈音视频信息等大数据采集、存储和分析，为公司产品战略及

17、发展战略提供依据。2424产品监控体系p 围绕产品发展、产品设计、销售效果、用户质量及违规监控，打造产品全程管控体系p 向管理层提供清晰准确的决策数据 p 支撑业务部门营销策略执行效果的跟踪和管理例：3G套餐违反六统一原则发现用户质量体系p 建立了3G、2G用户质量的分析体系p 直接服务于业务部门营销策略执行效果的跟踪和管理p 向管理层提供清晰准确的决策数据 例：三无用户，由总用户数占比的30%降至8%营销支撑体系p 细分市场，立足用户全生命周期，结合产品架构体系，打造全过程营销体系p 直接服务业务部门对省分营销策略制定的指导及营销效果评估 例：如意通随意打套餐政策：集团直接制定一线方案，快速

18、执行，快速复制成本管控体系p 梳理收入、欠费、结算流程p 洞悉欠费、结算成本规模与影响p 挖掘成本上升原因，服务于业务部门引导优势业务发展p 提升利润空间，向管理层提供决策数据例：12省佣金超标,5省违规叠加费用快速定位终端监控体系p 统一终端政策，防范省分违规操作，统筹资源规划，形成终端引进、销售、评估、优化终端政策闭环终端体系p 助力3G规模发展。例：仅5个月机卡分离率从41.7%降低至5%，节约终端补贴17.5个亿服务评价体系p 结合用户通话重接率评估网络服务支撑，借助结算数据，洞悉客服接触规模及成效，形成软硬件并行服务评价体系p 结合用户质量、业务与消费能力、违规监控等数据实现3G业务

19、评价体系例：网络侧话单批量造假发现，合约政策违规发现集中化整合M/B/O多领域数据，完成了电信行业最大的企业级数据仓库构建，数据量达到2.8PB，由220个x86云节点提供运算支撑。以此为基础构建了六大集中化体系以大数据为中心的信息化集中建设价值大数据行业经验项目名称建设内容描述新华社全球一体化多媒体采编和数字生产加工平台技术开发及服务合同新华社全球一体化多媒体采编和数字生产加工平台实现了对文字、网页、图片、视频音频等多种结构化、半结构化和非结构化数据的采集、存储、分析能力，并在此基础上进行多媒体信息的编辑、发布。中航三星人寿TM系统服务框架协议三星人寿电话营销系统，建设内容包括客户信息、客户

20、行为信息、客户访谈音视频信息等大数据采集、存储和分析，为公司产品战略及发展战略提供依据。Information Change the World2626王侃 说:(2010-09-16 14:05:40)圆圆 部门规划给你弄了吗时文鸿-北京 说:(2010-09-16 14:06:38)正在弄。时文鸿-北京 说:(2010-09-16 14:06:47)我觉得跟你学靠谱。时文鸿-北京 说:(2010-09-16 14:06:52)整分析报告。时文鸿-北京 说:(2010-09-16 14:06:57)很有眼光。时文鸿-北京 说:(2010-09-16 14:07:06)改改东西，效果还是挺明显

21、的。Thanks!Information Change the WorldCopyright 2010by BONC1、Genius only means hard-working all ones life.(Mendeleyer,Russian Chemist)天才只意味着终身不懈的努力。20.8.58.5.202011:0311:03:10Aug-2011:032、Our destiny offers not only the cup of despair,but the chalice of opportunity.(Richard Nixon,American President)命

22、运给予我们的不是失望之酒，而是机会之杯。二二年八月五日2020年8月5日星期三3、Patience is bitter,but its fruit is sweet.(Jean Jacques Rousseau,French thinker)忍耐是痛苦的，但它的果实是甜蜜的。11:038.5.202011:038.5.202011:0311:03:108.5.202011:038.5.20204、All that you do,do with your might;things done by halves are never done right.-R.H.Stoddard,American

23、 poet做一切事都应尽力而为，半途而废永远不行8.5.20208.5.202011:0311:0311:03:1011:03:105、You have to believe in yourself.Thats the secret of success.-Charles Chaplin人必须相信自己，这是成功的秘诀。-Wednesday,August 5,2020August 20Wednesday,August 5,20208/5/20206、Almost any situation-good or bad-is affected by the attitude we bring to.-

24、Lucius Annaus Seneca差不多任何一种处境-无论是好是坏-都受到我们对待处境态度的影响。11时3分11时3分5-Aug-208.5.20207、Although the world is full of suffering,it is full also of the overcoming of it.-Hellen Keller,American writer虽然世界多苦难，但是苦难总是能战胜的。20.8.520.8.520.8.5。2020年8月5日星期三二二年八月五日8、For man is man and master of his fate.-Tennyson人就是人

25、，是自己命运的主人11:0311:03:108.5.2020Wednesday,August 5,20209、When success comes in the door,it seems,love often goes out the window.-Joyce Brothers成功来到门前时，爱情往往就走出了窗外。11:038.5.202011:038.5.202011:0311:03:108.5.202011:038.5.202010、Life is measured by thought and action,not by time.Lubbock 衡量生命的尺度是思想和行为，而不是时

26、间。8.5.20208.5.202011:0311:0311:03:1011:03:1011、To make a lasting marriage we have to overcome self-centeredness.要使婚姻长久，就需克服自我中心意识。Wednesday,August 5,2020August 20Wednesday,August 5,20208/5/202012、Treat other people as you hope they will treat you.你希望别人如何对待你，你就如何对待别人。11时3分11时3分5-Aug-208.5.202013、To d

27、o whatever needs to be done to preserve this last and greatest bastion of freedom.(Ronald Reagan,American President)为了保住这最后的、最伟大的自由堡垒，我们必须尽我们所能。20.8.520.8.5Wednesday,August 5,202014、Where there is a will,there is a way.(Thomas Edison,American inventor)有志者，事竟成。11:01:1911:01:1911:018/5/2020 11:01:19 A

28、M15、Every man is the master of his own fortune.-Richard Steele每个人都主宰自己的命运。20.8.511:01:1911:01Aug-205-Aug-2016、As selfishness and complaint cloud the mind,so love with its joy clears and sharpens the vision.-Helen Keller自私和抱怨是心灵的阴暗，愉快的爱则使视野明朗开阔。11:01:1911:01:1911:01Wednesday,August 5,202017、Do not,fo

29、r one repulse,give up the purpose that you resolved to effect.-Willian Shakespeare,British dramatist不要只因一次失败，就放弃你原来决心想达到的目的。20.8.520.8.511:01:1911:01:19August 5,202018、There is no absolute success in the world,only constant progress.世界上的事没有绝对成功，只有不断的进步。2020年8月5日星期三上午11时1分19秒11:01:1920.8.519、Nothing

30、is more fatal to happiness than the remembrance of happiness.没有什么比回忆幸福更令人痛苦的了。2020年8月上午11时1分20.8.511:01August 5,202020、No man is happy who does not think himself so.Publilius Syrus认为自己不幸福的人就不会幸福。2020年8月5日星期三11时1分19秒11:01:195 August 202021、The emperor treats talent as tools,using their strongpoint to his advantage.君子用人如器，各取所长。上午11时1分19秒上午11时1分11:01:1920.8.5谢谢观看THE END