阿里云大数据技术开发课件.pptx

1、阿里云大数据技术开发DT时代的技术进化看数据用数据运营 数据Data 1.0Data 2.0Data 3.0数据的作用成本辅助利润指挥数据即业务赋能技术的作用CIO主导CTO主导CDO主导职能的设置存通用用看数据用数据运营 数据Data 1.0Data 2.0Data 3.0信息化的信息化的 公司公司数据化的数据化的 公司公司数据公司数据公司存通用用看数据看数据Data 1.0 业务痛点：业务痛点：观察业务运行情况观察业务运行情况 老板：不能及时看到公司的业务运营情况； 业务专家：做不到“用数字说话”，被老板挑战； 技术架构：技术架构：数据集数据集市市+分析展现分析展现 基于数据集市，快速产生

2、业务报表； 直观有效地展示数据，还原业务真实状态； 下一步：实时化；数据开发套件数据开发套件QuickBIMaxComputeDataVAnalyticDBStreamCompute日志分析用数据用数据 业务痛点：业务痛点：让业务持续良好运转让业务持续良好运转 高要求：数据丰富度、算法精准度满足不了业务需求； 高风险：系统挂掉或数据出错 = 业务挂掉； 技术架构：技术架构：数据仓库数据仓库+算法挖掘算法挖掘 底层是数据仓库，整合数据，保障质量和稳定性； 上层有数据应用引擎； 具备大规模数据处理、数据挖掘和算法建模的能力；MaxCompute推荐引擎规则引擎数据开发套件数据开发套件机器学习机器学

3、习（PAI）关系网络智能服务（行业/语音/图像/视频）Data 2.0运营数据运营数据Data 3.0 业务痛点：业务痛点：让数据价值浮出水面让数据价值浮出水面 如何让数据资产持续增值、持续变现？ 如何将业务创新的门槛和代价降到最低？ 如何让数据赋能每一位员工、渗入每一个业务环节？ 如何获得更多数据（新能源）？阿里巴巴面临的挑战：阿里巴巴面临的挑战： EB级的数据算不算得动？ 百万张表如何管理？ 数据质量：一分钱一百万 大集中的数据如何确保安全？ 运营数据运营数据DTBoost应用加速器应用加速器计算平台计算平台机器学习平台机器学习平台数据市场数据交换机制行业子云（虚拟运营商）Data 3.0

4、 技术架构：技术架构：基础设施基础设施+业务中业务中台台公共技术平台One Platform 中台中台公共数据服务One Data后台后台前台前台 业务业务DWODPS，ADS统一的大数据技术平台统一的大数据技术平台统一的数据仓库统一的数据仓库公共数据产品和数据服务公共数据产品和数据服务金融营销信用安全 风控客服物流搜索数据共享数据共享算算法法共享共享知识共享知识共享生态生态 运营运营建建设设 管理管理数据安全数据安全 数数据质量据质量 数据数据标准标准 成本管成本管理理Powered by 阿里云数加8一切业务数据化，一切数据业务一切业务数据化，一切数据业务化化云计算云计算大数据大数据金融营

5、销信用安全风控客服物流搜索9大 数 据 操 作 系 统大 数 据 中 间 件计计算引算引 擎擎Core您可以省心：您可以省心：再多的数据，也存得下、算得动可租用的存储和计算资源图形化的编程和分析界面程序运行托管、运维监控您可以省力：您可以省力：10000行的代码，可能只需写 100行Focus 在核心业务逻辑实现搭积木式快速拼装应用图像视频API语音识别API 文本分析API 通用算法库推荐引擎分析引擎关系网络规则引擎开开发工具发工具GUI数加如何赋能合作伙伴？10900人天？人天？30人天！人天！开发一个个性化推荐需要多长时间？开发一个活动直播大屏需要多长时间？一个月？一个月？3天天/1小时

6、小时11数据市场12天池大赛音乐家需要自己造乐器吗？音乐家需要自己造乐器吗？企业技术部门的定位：企业技术部门的定位：基基础技础技术术设施设施 V.S 业务中台业务中台技术平台分两层第一层：基础技术平台第一层：基础技术平台 通用的技术平台，提供通用的技术平台，提供基基础性础性服服务务 业务无关性，适用于所有行业淘系 业务基础技术平台电商 业务 中台电商 行业蚂蚁业务金融 业务 中台金融 行业物流 业务 中台菜鸟 业务物流 行业第二层：业务中台第二层：业务中台 背靠基础平台，面向特背靠基础平台，面向特定定业务业务，衔接衔接技技术与术与业业务务 针对业务场景抽象和优化的技术组件（积木） 可从支撑一家

7、公司扩大到支撑一个行业示例（1）：数据中台基础基础 技术平台技术平台电商电商业务中台业务中台电商电商数据应用数据应用计算平台计算平台 | 离线计算，流计算，实时分析，电商数据中间层和公共数据服电商数据中间层和公共数据服务务导购营销信用安全 风控客服物流搜索 大数据基础技术设施，提供大规模计算能 力，解决可扩展性、稳定性、性能、成本 等通用技术问题； 非常厚，技术难度大，建设周期长；IaaS服务服务 | 机房，网络，OneData，OneService，标签体系，生意参谋， 利用中台提供的业务组件，可快速搭建数据应用； 对于中台尚未涵盖的部分，也可以直接基 于底层平台来构建数据应用（竖烟囱）；

8、非常薄，快速搭建、灵活改变； 面向电商的数据中台； 基于计算平台提供电商数据服务，对业务 场景进行抽象、封装可复用的业务组件（例如生意参谋），降低数据使用门槛； 相同的方法论和业务组件可被复制到电商 行业的其他企业，可复用，且有一定的灵 活度；基础基础 技术平台技术平台电商电商业务中台业务中台电商电商算法应用算法应用算法平台，人工智能基础服务算法平台，人工智能基础服务分布式机器学习平台，通用算法，语音识别，语音合成，自然语言理解，图像和视频分析，电商业务算法库电商业务算法库导购营销信用安全 风控客服物流搜索 面向电商的算法中台； 结合电商业务场景，抽象出可复用的算法 模型，例如虚假交易识别模型

9、； 结合电商业务场景，对算法进行优化，让 它在电商场景下的精准度和效果更佳； 机器学习平台、智能语音、图像视频分析、 自然语音理解等人工智能基础服务，具有 通用性，不必要重复投资； 要求有深厚的技术沉淀，投资大，变现周 期长IaaS服务服务 | 机房，网络，搜索算法库，个性化推荐算法，虚假交易模型， 利用中台提供的电商算法组件，可快速搭 建算法应用； 对于中台尚未涵盖的部分，也可以直接基 于底层平台来自主实现算法（定制）；示例（2）：AI中台两层平台基础基础 技术平台技术平台电商电商业务中台业务中台电商电商业务系统业务系统导购营销信用安全 风控客服物流搜索IaaS服务服务 | 机房，网络，计算平台计算平台算法平台算法平台主机，存储，数据库，主机，存储，数据库， 通用中间件通用中间件电商数据电商数据 中间层中间层电商电商 算法库算法库电商业务组件电商业务组件|中间件中间件您的技术部门您的技术部门阿里云阿里云18谢谢！