财务大数据基础课件项目一.pptx

1、项目一 财务大数据认知目标目标了解大数据概念了解大数据特点了解大数据发展历程了解大数据应用场景了解财会大数据的概念及特点了解大数据分析过程及分析工具任务一 大数据认知任务实施任务实施大数据的含义大数据的发展历程大数据的特点我国大数据发展战略大数据应用场景大数据思维大数据的含大数据的含义义大数据无法用常规数据工具在一定时间内进行采集、处理、存储和计算的数据集合大数据获取技术大数据存储和管理技术大数据分析和挖掘技术大数据可视化展现技术等处理模式需要专门的处理模式才能使其具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产大数据的定义大数据的含大数据的含义义大数据产生的原因全

2、球互联网约有40亿人都是数据源全球大约有1000亿个传感器都是数据源人类活动的进一步扩展都是数据源大数据的含大数据的含义义身边的大数据精准广告推荐专车精准匹配模型精准车险费用大数据的发大数据的发展历程展历程萌芽阶段（1980年-2008年）成长阶段（2009年-2012年）爆发阶段（2013年-2015年）快速发展阶段（2016年至今）萌芽阶段萌芽阶段（1980年年-2008年）年）198020072008未来学家托夫勒第三次浪潮著作首次提到大数据“第三次浪潮的华彩乐章”社交网络激增大数据概念注入新生机自然杂志推出“大数据”封面专栏肯尼斯库克尔在经济学人上发表了长达14页的大数据专题报告数据，

3、无所不在的数据成长阶段成长阶段（2009年年-2012年）年）20102月麦肯锡在大数据：下一个创新、竞争和生产率的前沿研究报告中指出：“大数据时代已经到来”20116月工业和信息化部关于印发物联网“十二五”发展规划海量数据存储、数据挖掘、图像视频智能分析等都是大数据的重要组成部分12月“十二五”国家战略性新兴产业发展规划“加强以网络化操作系统、海量数据处理软件等加强以网络化操作系统、海量数据处理软件等为代表的基础软件、云计算软件、工业软件、智为代表的基础软件、云计算软件、工业软件、智能终端软件、信息安全软件等关键软件的开发能终端软件、信息安全软件等关键软件的开发”20127月维克托迈尔-舍恩

4、伯格大数据时代大数据时代国内风靡，推动国内大数据发展12月爆发阶段爆发阶段（2013年年-2015年）年）我国大数据元年大数据成为国家战略促进大数据发展行动纲要发布英国政府直接投资1000万英镑建立“开放数据研究所”澳大利亚政府发布公共服务大数据战略美国发布政府网站数字化分析仪表盘快速发展阶快速发展阶段段（2016年至今）年至今）2016贵州省大数据发展应用促进条例增加“数据科学与大数据技术专业”2018达沃斯论坛把大数据作为重要议题20192018全球大数据发展分析报告显示，中国大数据技术创新能力有了显著提升大数据企业成为资本追逐的热点2020全球大数据平台市场规模达到了3745亿元预计20

5、27年将达到7874亿元，年复合增长率为11.2%大数据的特点大数据的特点大数据的特点大数据的特点Volume海量数据全球每秒发送290万封电子邮件，一分钟读一篇的话，足够一个人昼夜不停的读5.5年u 采集数据Twitter上每天发布5000万条消息，假设10秒浏览一条消息，足够一个人昼夜不停地浏览16年u 存储数据1PB是多大？u 计算数据假设一首音乐的大小约为10M，1PB的存储空间就可以存储约1亿首这样的音乐。若听一首音乐需要4分钟，那么听完1PB存储空间里的音乐约需要7,158,278小时，也就是说即使724小时不间断地听，也需要约298,261天才能听完，即需要约817年才能听完。大

6、数据的特点大数据的特点Variety多样化数据类型u 数字u 文本u 图像u 音频u 视频u 地理位置信息u 网络日志结构化数据结构化数据 关系型数据库中的数据 特点：有统一的数据结构和规范的数据访问和处理方法非结构化数据非结构化数据 办公文档 邮件 各类报表 图像 音频 视频信息 特点：不能采用预先定义好的数据模型或没有以一个预先定义的方式来组织半结构化数据半结构化数据 XML文件 HTML文件 特点：介于结构化数据和非结构化数据之间的数据大数据的特点大数据的特点Velocity大数据的时效性数据生成速度高数据处理速度高大数据的特点大数据的特点Value大数据的价值密度大数据价值密度相对较低

7、数据分析结果的商业价值很高我国大数据发展战略我国大数据发展战略2012数 据 已 经 成为 一 种 新 的经 济 资 产 类别，就 像 货币 和 黄 金 一样2014廖仁斌建议：应 尽 快 在 国家 层 面 启 动大 数 据 发 展战略2015第 一 次 将 大数 据 写 入 党的全会决议，正 式 纳 入 我国 国 家 发 展战略2017十九大提出，要 推 动 互 联网、大数据、人 工 智 能 和实 体 经 济 深度融合2018中 国 国 际 大数 据 产 业 博览会26日在贵阳开幕2019 决 定 多次 提 及 互 联网、大数据、人 工 智 能 等新 一 代 信 息技术大数据应用大数据应用场

8、景场景大数据+民生大数据+交通大数据+金融大数据+安全数据自身安全大数据大数据+民生民生贵阳的“大数据民生”工程大数据民生万企融合五级通办一个不落隔空诊脉精准扶贫大数据大数据+交通交通智慧交通现场人工执法越来越少交通通行效率越来越高交通决策越来越科学用户服务内容越来越精准交通服务自动化程度越来越高大数据大数据+金融金融智慧银行客户画像精准营销风险管控运营优化大数据大数据+安全安全大数据助力公共安全大数据助力移动互联网安全数据自身安数据自身安全全大数据安全案例20142014年年2月月17日，淘宝爆出重大安全漏洞20152015年年5 5 月月，美国国税局宣布其系统遭受攻击20162016年年9

9、 9月月22日，全球互联网巨头雅虎证实，在2014年间至少有5亿用户的账户信息被黑客窃取20172017年年3 3月月，公安部破获一起盗卖公民信息的特大案件20182018年年6 6月月，圆通10亿条快递数据，被以1比特币的价格打包出售20192019年年7 7月月，微软的Window10操作系统过度搜集用户数据被警告20202020年初年初，公安部破获了一起特大窃取贩卖公民个人信息案数据自身安数据自身安全全大数据安全防护 数据资产梳理数据资产梳理对公司拥有的数据、数据所处位置及数据敏感级别保持恰当的控制 数据库加密数据库加密主动对核心数据加密存储 数据库安全运维数据库安全运维防止运维人员对数

10、据库进行访问和操作时的恶意操作和高危操作 数据脱敏数据脱敏通过脱敏规则对数据匿名化，实现敏感隐私数据的可靠保护 数据库漏扫数据库漏扫通过授权扫描、非授权扫描、弱口令、渗透攻击等检测方式发现数据库安全隐患大数据思维大数据思维全样思全样思维维大数据时代的思维方式应该从样本思维转向全样思维，从而能够更加全面、立体、系统地认识总体状况容错思容错思维维当拥有海量即时数据时，绝对的精准不再是追求的主要目标，适当忽略微观层面上的精确度，容许一定程度的错误与混杂，可以在宏观层面拥有更好的知识和洞察力相关思相关思维维大数据时代，人们可以通过大数据技术挖掘出事物之间隐蔽的相关关系，获得更多的认知与洞见，运用这些认

11、知与洞见就可以帮助人们捕捉现在和预测未来任务二 财务大数据认知任务实施任务实施财务大数据的概念大数据对财会行业的影响大数据在财会行业的应用财务大数据的特点财务大数据财务大数据财务大数据非结构化的业务数据、政治法律环境数据、经济环境数据、社会和文化数据及技术类数据等大幅度增多财务大数据数据处理需求要求数据分析人员的反应时间要短，反应速度要快企业数字资产辅助企业进行战略决策海量结构化和非结构化的数据财务大数据时代的特征大数据对财大数据对财会行业的影会行业的影响响提高传统财会工作效率、重复性工作将被系统取代促进传统财会流程重组，财务共享中心是未来趋势预算管理更精准，财务会计走向决策高度大数据在财大数

12、据在财会行业的应会行业的应用用数据智能将成为未来企业财务的核心利用大数据和人工智能提升企业预测和决策水平从经济业务中提取到更加多维的数据，从而突破原有的简单辅助核算将财务数据工作管得更细、更全、更好，让隐藏的数据价值体现出来实现财务会计向管理会计的转型，充分体现会计职业的价值财务大数据财务大数据的特点的特点更细致的数据更多维的数据更多元的数据任务三 大数据分析处理工具认知任务实施任务实施大数据处理流程大数据处理工具大数据处理流程大数据处理流程数据获取数据预处理数据分析数据可视化数据清洗数据标准化企业内部数据企业外部数据狭义数据分析数据挖掘数据跟踪、钻取、多维度分析多数据源、实时数据更新、交互式数据展示大数据处理工具大数据处理工具ExcelPythonPython与Excel比较