相关培训方案.doc

1、相关培训方案1、大数据技术与应用 （7.23-28 芜湖）一、培训对象与要求针对高校大数据技术与应用和商务数据分析与应用相关课程教师、学校主管领导以及相关科研部门负责人。本培训班每个单位选派相关人员原则上不超过3人。各单位要认真做好选派工作，保留选派人员记录，避免重复培训。二、培训内容24日模块一、高校如何开设大数据教学课程l 大数据相关专业人才需求缺口l 大数据相关招聘岗位需求分析l 大数据技术演进与变革l 应对IT新技术变革，教师知识的储备与提升l 在哪个层面进行教学精彩案例 开展大数据分析挖掘教学的形式 高校开设大数据的教学可在多个层面上进行 有条件的高校可以开设云计算专业 不成熟的可在

2、在计算机相关专业上增设数据挖掘和分析方向 不具备条件的高校可以开设大数据方面的课程模块二、大数据产业发展与人才需求l 大数据起源和产生、大数据概念的发展与解析l 大数据在国内外发展现状、大数据在互联网发展现状l 大数据人才需求以及趋势l 大数据人才培养体系的最佳实践模块三、大数据带来的机遇和挑战l 大数据能带来什么 、引领社会进入“大数据时代” l 大数据对国家、社会的作用 、大数据将推动经济发展 l 大数据将推动科技发展进程、开启商业智能新阶段 l 数据分析的发展从数据到知识 l 大数据如何让商业更智能、大数据应用案例 l 带来数据处理新变革 、大数据的关键技术 l 大数据与云计算 、大数据

3、技术的发展趋势精彩案例 智慧政府 智慧城市与大数据 车联网 大数据舆情分析 数据治理 智能推荐 大数据与银行 大数据营销分析模块四、电商日志评论数据分析系统l 京东案例剖析l 京东数据介绍l 系统的技术框架选型l 日志采集系统介绍实战内容（现场实验环节） Linux下日志清洗、加载（实战） Web系统最终结果数据展示（演示实验）25日模块五、YARN架构设计和核心概念l YARN出现的背景l YARN的设计思想和基本概念l YARN的基础架构l YARN的工作流程l YARN基础类库详解l YARN核心模块ApplicationMaster详解l YARN核心模块ResourceManager

4、剖析l YARN核心模块NodeManager详解l Hadoop V2资源调度器详细介绍实战内容（现场实验环节） 基于YARN的应用程序设计和简单实现案例 YARN使用第三方类库，包含通信、服务、时间、状态等 从资源管理角度理解YARN框架 ApplicationMaster核心源码 ResourceManager核心源码 NodeManager核心源码模块六、基于电商日志数据MapReduce高级编程l MapReduce V2基本架构、原理和相关角色介绍l MapReduce V1和MapReduce V2l MapReduce V2中MRAppMaster的工作流程l MapReduc

5、e V2作业生命周期理解l MapReduce V2资源调度理解l MapReduce V2作业恢复和推测执行机制介绍l 剖析MapReduce V2样例程序代码流程 l 基本MapReduce V2 API 概念 l 驱动代码 Mapper、Reducerl Hadoop流在MapReduce V2中的使用l 使用Eclipse进行快速开发 l MapReduce V2的编程优化l 满足解决实际数据分析问题的高级MapReduce V2多语言编程实践实战内容（现场实验环节） Hadoop Streaming和 Java MapReduce V2编程的差异 利用Combiner来减少中间数据

6、编写Partitioner来优化负载平衡 直接访问Hadoop分布式文件系统HDFS MapReduce V2的join操作 辅助排序在Reducer方的合并 定制开发Writables和WritableComparable高级类 使用SequenceFiles和Avro文件保存二进制数据 定制开发InputFormats和OutputFormat 基于MapReduce V2的海量日志分析 熟悉Java编程IDE Eclipse MapReduce V2 wordcount实例测试 MapReduce V2 wordcount源代码查看讲解 MapReduce V2实现单词统计扩展代码逻辑并

7、测试结果 基于MapReduce V2编写海量日志的简单分析需求26日模块七、基于Hadoo2.*的Hive实战技巧（基于京东数据）l Hive和Pig架构和理论基础 l Hive的作用和原理说明l Hadoop仓库和传统数据仓库的协作关系l Hadoop/Hive仓库数据数据流l Hive部署和安装l Hive Cli的基本用法l HQL基本语法l 京东评论数据分析开发技巧详解 使用JDBC 连接Hive进行查询和分析 使用正则表达式加载数据 HQL高级语法 编写UDF函数 编写UDAF自定义函数 使用Sqoop进行数据分析 使用Oozie和HUE介绍 动手安装Hive，并验证是否安装成功

8、现场解决启动、部署问题，并总结解决问题的方法 使用Hive创建自己的数据仓库 使用Hive在数据仓库上进行增删改查操作模块八、内存计算框架Spark实战l 深入Spark核心架构l Spark集群配置介绍开发环境配置l 搭建Intellij开发环境l Spark应用案例编程 RDD 缓存策略介绍 transformation action lineage 容错处理 宽依赖与窄依赖 Spark on Yarn实践 Python简介 PySpark API27日l 模块九、Spark计算模型与核心机制l Spark计算模型l park程序模型l 弹性分布式数据集l Spark算子分类及功能l Sp

9、ark工作机制l Spark应用执行机制l Spark调度与任务分配模块l Spark I/O机制l 序列化、压缩l Spark块管理l Spark通信模块l 通信框架AKKAl Client、Master和Worker间的通信l 容错机制、Lineage机制l Checkpoint机制l Shuffler机制实战内容（现场实验环节） 实践RDD的转换函数：map、filter、flatMap、sample、 groupByKey、reduceByKey、 union、join、distinct、cartesian、mapValue、subtract、cache、persist 实践RDD的动

10、作函数：foreach collect collectAsMap reduceByKeyLocally lookup counmt top reduce fold aggregate saveAsTextFile saveAsObject Spark应用提交工具（spark-submit，spark-shell） RDD特性、常见操作、缓存策略 RDD Dependency、Stage常、源码分析 Spark on YARN运行模式及测试模块十、基于电商日志数据的Spark SQL开发l 使用Spark SQL的原因l Spark SQL的发展历程l Spark SQL的性能l Spark S

11、QL运行架构l Tree和Rulel sqlContext的运行过程l hiveContext的运行过程l catalyst优化器l 解析Spark SQL组件l LogicalPlanl SqlParserl Analyzerl Optimizerl 深入了解Spark SQL运行计划l 不同数据源的运行计划l 不同查询的运行计划l Spark SQL应用案例京东评论数据基于Sparl-sql的分析实战内容（现场实验环节） 通过Spark SQL对微博数据（JSON格式）进行分析处理 通过Spark SQL对农产品数据进行分析处理 sqlContext应用 hiveContext应用混合使用

12、、缓存的使用、DSL的使用27日模块十一、大数据本科专业申报及经验分享l 增设大数据本科专业的合理性和必要性l 增设大数据本科专业的人才培养方案l 增设大数据本科专业的基本要求和区分度l 大数据本科专业主要课程的设置要经验l 大数据专业申报过程其他经验分享三、培训时间及地点时 间：2017年7月23-28日（23日下午酒店大厅报到）报到地点：芜湖中央城大酒店（安师大新校区北门对面），前台电话：0553-2711777。四、考核、结业考核：1.集中学习的出勤、讨论发言情况，考核权重为80%；2.结业学习心得或论文，考核权重为20%。结业：考核合格的学员予以结业，由安徽省高等学校师资培训中心颁发结

13、业证书。五、培训费用本期培训收取培训费2000元/人，教材费348元，学员车旅费及住宿费由教师所在学校解决。学习期间餐饮统一安排。现金和刷卡支付都可以。转账账户名称：安徽师范大学，开户银行：中国建设银行芜湖市分行中山路支行，银行帐号：3400 1672 2080 5300 1599。请备注“高师省培”。六、几项具体要求1.学习心得：围绕大数据技术与应用进行选题，字数不少于1000字。学习心得或论文于2017年8月30日前发到邮箱07，由安徽省高等学校师资培训中心组织评阅。2.报名：请于2017年7月20日前在安徽省高等学校师资培训中心网站培训报名平台（）报名，并于报到当日直接前往上述地点报到。

14、报到时请带一张一寸正面彩照。联系人：安徽省高等学校师资培训中心 田滋军0553-3869383 13855304377安徽省高等学校师资培训中心儒林文化传媒(北京)有限公司安徽金东方大数据科技有限公司二一七年六月十六日2、创新创新骨干教师高级研修班 （7月25-30日 北京）一、课程安排日期时间具体安排地点 7月25日（第1天）10:00-16:00报到、办理入住并发放材料酒店大厅18:00-19:30晚餐酒店餐厅 7月26日（第2天）9:00-12:00理念方法高校创新创业教育生态体系建设中关村创新教育教学实践基地14:00-17:30创业思维互联网时代的创业教育思维 7月27日（第3天）9

15、:00-10:00考察交流考察中关村国家自主创新示范区展示中心中关村展示中心10:30-12:00考察中关村创业大街社会创业孵化器的运营模式交流14:00-15:00考察清华大学xlab：创意、创新、创业“三创实践空间”建设模式清华大学15:30-17:30考察北京大学全球创新创业中心北京大学 7月28日（第4天）9:00-12:00课程体系创新创业教育“五创”新模式中关村创新教育教学实践基地14:00-17:30实践教学创意激发与挖掘社会需求创新思维与创新方法7月29日（第5天）9:00-12:00样品创造与最小单元实现商业模式设计与沙盘演练14:00-17:30创业路演与融资体验 7月30

16、日（第6天）9:00-12:00创业大赛大学生创业大赛组织与获奖策略中关村创新教育教学实践基地14:00-16:00互动交流教学经验交流与学习成果分享16:00-17:30结业典礼结业典礼二、主讲师资：陈东敏：北京大学“千人学者”，北京大学创新创业中心主任，北京大学产业技术研究院院长、科技开发部部长。张国庆：中关村加一战略新兴产业人才发展中心理事长、全国知名创新创业教育专家。刘春晓：中国科学院大学创业专业执行主任。黄 威：中国科学院未来科学家种子工程管理中心创新课程研发中心主任。商克伟：啄木鸟创业俱乐部执行秘书长、蓝石天使合伙人、科技部科技创新CEO特训营助教、中国创新创业大赛导师。毛付俊：例

17、外科技公司联合创始人兼总裁、北京高校毕业生就业促进会专家委员会成员。陈志成：中国人工智能学会基础专业委员会常务委员，中国通信学会云计算专家委员会委员，北京格分维科技有限公司董事长。高 洋：北京创客加孵化服务有限公司总经理。三、项目组成员组长：曾 论 中心常务副主任成员：王后俊 中心对外联络部副主任 张 磊 中心对外联络部主管 陈艳君 中心对外联络部主管四、费用及支付方式1.本期培训收取培训费3000元/人，学员车旅费及住宿费由教师所在学校解决。学习期间餐饮统一安排。2.付款方式：转账或报到现场支付（现金或刷卡）：开户行：中国民生银行上地支行帐 号：607791108户 名：中关村加一战略新兴产

18、业人才发展中心五、报名方式1报名方式：报名人员名单由各院系自行拟定后统一报名2报名截止时间：2016年7月22日前3报到及食宿地点：北京武青会议中心（北京市海淀区杏石口路18号，电话：010-88863399），具体图示及乘车路线见附件二4.报名联系：参加培训的学员可于7月22日之前电话中关村加一战略新兴产业人才发展中心（后文有详细联系电话），并按规定日期直接前往报到、参加培训。5.请教师准备一寸正面彩照两张，照片背后写上姓名。六、联系方式1.电 话：010-62980180、185109199492.联系人：曾论3.地 址：北京市海淀区中关村软件园二期中兴通大厦B座三层。中关村加一战略新兴产

19、业人才发展中心2017年6月8日3、高校师资培训管理者高级研修班培训简章 （8月4-7日 巢湖）为贯彻落实国家和省中长期教育改革和发展规划纲要（20102020年）精神，把握新形势下师资培训新动向，提升全省高校师资培训管理者的综合能力，提高高校师资队伍整体素质，安徽省教育厅人事处委托安徽省高校师资培训中心组织开展全省高校师资培训管理者研修班，为培养高素质高端技能人才提供优质的师资保障。现将有关事宜通知如下：一、培训对象与要求针对高校高校师资培训管理者的培训。本培训班每所院校选派相关人员原则上不超过3人。各院校要认真做好选派工作，保留选派人员记录，避免重复培训。二、培训内容1、集中培训（1）拓展

20、训练（2）助力高校青年教师专业发展（3）新形势下高校教师发展的形势与任务（4）高校人事工作面临的挑战与工作方法的创新三、培训时间及地点时 间：2017年8月4-7日（4日报到）报到地点：滨湖城碧桂园凤凰酒店（巢湖市居巢区忠庙镇湖滨大道北）前台电话：(0551)88618999四、考核、结业考核：1.集中学习的出勤、讨论发言情况，考核权重为80%； 2.结业学习心得或论文，考核权重为20%。结业：考核合格的学员予以结业，由安徽省高等学校师资培训中心颁发结业证书。五、培训费用本期培训收取培训费1200元/人，学员车旅费及住宿费由教师所在学校解决。学习期间餐饮统一安排。现金和刷卡支付都可以。转账账户名称：安徽师范大学，开户银行：中国建设银行芜湖市分行中山路支行，银行帐号：3400 1672 2080 5300 1599。请备注“高师省培”。六、几项具体要求1.学习心得：围绕师资管理进行选题，字数不少于1000字。学习心得或论文于2017年8月30日前发到邮箱07，由安徽省高等学校师资培训中心组织评阅。2.报名：请于2017年8月10日前在安徽省高等学校师资培训中心网站培训报名平台（联系人：田滋军 13855304377 吴王华 13635533988安徽省高等学校师资培训中心二一七年六月十六日