新闻详情

News Information

第六届全国高校大数据专业师资培训班(邀请函)

教育部2017年产学合作协同育人项目

全国高校大数据专业师资培训班(邀请函)

2017418日,教育部高教司官网发布,北京奇观技术成为的产学合作协同育人项目的合作企业。这次与教育部、全国高校联合共建的项目包括教学内容和课程体系改革,创新创业教育改革,实践条件建设,师资培训,大学生实习实训基地五个方面,深入推进科教合作、产教融合、校企合作,深化高校创新创业教育改革,将社会优质资源转化为育人资源,为企业和高校合作搭建平台。

本期全国高校大数据暑期师资培训班即将在北京举办。本期培训由中国电子学会嵌入式系统与机器人分会主办,国内大数据知名企业一线研发人员亲自授课。本期培训课程内容是针对全国高校计算机方向量身定制的,涵盖了系统安装配置、提供上层编程API、二次开发、提供上层应用开发者二次开发的接口,可以基于底层现有平台开发多样化的管理系统等内容,其中包括OpenStackMarvel Sky CloudHadoop高级工程师等技术。课程结合Hadoop集群及运算环境,实践感知理论,案例生动丰富,力求使学员能够在短时间内掌握大数据的基本知识,提高实践指导能力。

现诚邀全国高校计算机方向的相关专业(计算机科学与技术、软件工程、信息工程、大数据、通信工程、电子工程等专业)学科带头人、一线教学实验骨干教师参加。

 主办单位:中国电子学会嵌入式系统与机器人分会

 承办单位: 中原工学院

 协办单位:北京奇观技术有限责任公司

一、培训时间:201776 712日(7天)

二、培训地点: 中原工学院

三、培训资料:提供全套大数据课程教学课程包,包括:

①全套理论PPT讲稿、教材、授课大纲、教师参考手册;

②全套实验用PPT讲稿、实验指导书;

③全部实验源代码光盘、设计型实验案例及综合实验案例源代码。

四、报名安排:

Ø  报名时间:即日起 2017630日截止报名。

Ø  我们会于2017630日前下发确认通知(培训地点、用餐、住宿、乘车路线等信息);

Ø  培训费用:4800/,含内部培训资料、上机费用、工信部颁发的结业证书费。食宿统一安排,费用自理;

Ø  学员限额:30人;

师资证书

1、  教育部2017年产学合作协同育人项目---大数据师资培训证书

2、 工业和信息化部中国电子学会颁发的培训结业证书;证书信息会在中国电子学会备案并可在中国电子学会官网教育培训处查询!

3、  培训教师可以申请加入嵌入式系统与机器人分会,成为会员。

4培训院校可以申请与嵌入式系统与机器人分会联合共建实验室。

 

 

六、报名方式:

填写“报名回执表”并发送至邮箱 xiaoyao.fu@qi-tech.com.cn

负责人:付老师  010-82177260

七、汇款方式:

报名学员请于培训前将培训费用汇款至以下账户,培训学员于培训当天领取发票。

汇款账户信息如下:(以下是唯一指定汇款账户

开户名称:北京奇观技术有限责任公司

银行帐号:0200004509201181780

开户银行:中国工商银行股份有限公司北京海淀西区支行

  

 

附件1:课程安排(上课时间:上午9:00-12:00;下午14:00-17:00

大数据

阶段1

Hadoop基础实战

周期

7

综合项目

1、基于UbuntuHadoop集群安装、配置及管理 (高可用HA)

2Eclipse连接HDFS进行文件操作

3HBase分布式数据库的安装、配置及应用开发

4MapReduce编程模型实践(数据排序、数据去重、数据统计)

5、分布式文件系统HDFS命令操作。

6Hive数据仓库应用实践

阶段目标

1、掌握Hadoop原理机制,熟悉Hadoop集群体系结构、核心技术。

2、掌握基本的Hadoop管理方式方法

3、掌握HDFS API开发技能。

4、掌握非关系数据库HBase的基本安装管理管理。

5、掌握MapReduce并行计算模型的原理与实践。

6、掌握Hive数据仓库工作原理及HiveQL应用

7、掌握Spark生态系统及Spark StreamingSpark MLlib的原理与实践

日期

内容

时间

目标/知识点

实战演示

第一天

Hadoop入门

900-12:00AM

1Hadoop概述

2Hadoop的功能与作用

3Hadoop应用现状及发展趋势

4Hadoop项目及其结构

5Hadoop体系结构

6Hadoop与分布式开发

7Hadoop计算模型

 

14:00-17:00PM

8HDFS的数据管理

9HBase的数据管理

10Hive的数据管理

11Hadoop集群安全策略

12、本章小结

第二天

Hadoop的安装与配置

900-12:00AM

13Hadoop平台搭建技术依赖

14JDK安装与配置

15tzseleck的功能介绍

16ntp时间同步服务器的描述

17SSH安全外壳协议

18SSH免密登陆验证

19Hadoop集群配置文件

20Hadoop集群配置参数

21Hadoop集群搭建帮助文档

22Hadoop分布式集群搭建的运行方式

23、搭建Hadoop集群的基本流程

 

14:00-17:00PM

24、集群网络拓扑

25、定义集群拓扑

26、基于Ubuntu环境分布式集群设计

27Ubuntu权限用户root登陆设置

28、集群服务器网络设置

29、集群服务器主机名设置

30、集群服务器IP地址解析设置

31UbuntuJDK的安装

32UbuntuSSH免密登陆验证安装设置

33zseleck的时区时间设置

34、集群ntp时间同步服务器的安装与设置

35Hadoop基本文件的配置

36Hadoop环境变量的配置

37Hadoop基本配置的分发

38Hadoop集群启动

39Hadoop集群测试

40Hadoopfs帮助命令

41Hadoopdfsadmin帮助命令

42Hadoop集群状态查看管理帮助命令

43、本章小结

第三天

实验

900-12:00AM

44、基于UbuntuHadoop集群安装与配置

Hbase分布式数据存储原理

14:00-17:00PM

45、大数据数据存储的类型

46HBase概念

47HBase体系结构

48HBase数据存储原理

49HBase数据模型

50HBaseHadoop关系

51HBaseHDFS关系

52Hregion概念与HRegion服务器

53HMaster概念与HMaster服务器

54ROOT表与METE

55Hbase的表结构

56、行、列、列族、时间戳

57、逻辑视图与物理视图

 

第四天

 

 

 

 

 

 

 

 

Hbase分布式数据存储实践

 

 

 

 

 

 

 

900-12:00AM

 

58Zookeeper概念

59ZookeeperHadoop中的工作原理

60ZookeeperHbase的关系

61Zookeeper的安装与配置

62Hbase的搭建与部署

63Hbase Shell简介

64Hbase Shell的基本用法

65create创建表命令

66list查询表命令

67describe描述表结构命令

68put增加记录命令

69get查询记录命令

70scan遍历表命令

71、其他命令

72Hbase API简介

73HBaseAdminHBaseConfiguration类的使用

74HTableHTableDescriptorHColumnDescriptor类的使用

75PutGetScanner

类的使用

14:00-17:00PM

76Eclipse开发HBase编程实例(学生成绩管理)

第五天

MapReduce核心技术

900-12:00AM

77、MapReduce编程模型介绍

78、MapReduce的执行过程

79、MapReduce在数据流和控制流

80、MapReduce编程接口体系结构

81、MapReduce API基本概念

82、序列化和回调机制

83、Reporter参数

84、MapperReducerPartition接口的使用

85、nputFormatOutputFormat接口的使用

86、MapReduce内置数据类型

87、MapReduce的开发流程

88、MapReduce开发环境配置

89、MapReduce任务调度

90、据预处理与InputSplit的大小

 

实验

14:00-17:00PM

91、案例实战:MapReduce编程模型实践(数据排序、数据去重、数据统计)

 

 

 

 

 

 

 

 

第六天

 

 

 

 

 

 

Hive数据仓库实践

 

900-12:00AM

91、数据仓库的概念、特点

92、Hive数据仓库的概述

93、Hive体系结构

94、Hive的基本组成

95、HiveMapReduce的关系简述

96、Hive工作原理

97、Hive的元数据存储

98、Hive数据仓库的搭建与部署

99、Hive访问方式

100、Hive的数据类型

101、Hive表的创建、数据的加载

102、Hive表的修改与删除

103、内部表与外部表

104、表的分区与桶的建立

105、Hive SQL简单查询语句

106、Hive SQL高级查询语句

107、HiveQL视图

108、Hive索引使用

109、Hive的存储类型和复合数据类型

110、Hive函数的使用

 

14:00-17:00PM

111、案例实战:Hive数据仓库基本操作、高级查询。

112、案例实战:基于HiveHadoop日志分析

第七天

大数据处理挖掘技术

900-12:00AM

113、Spark及其生态系统

114、Spark简介与原理

115、Spark CoreSpark SQL介绍

116、Spark StreamingMLibGraphX

117、Spark编译与部署

118、Spark编程模型(一)编程模型及SparkShell实战

119、Spark编程模型(二)IDEA搭建及实战

120、Spark运行架构分析

14:00-17:00PM

121、SparkSQL(一)SparkSQL简介

122、SparkSQL(二)深入理解运行计划及调优

123、SparkSQL(三)Spark实战应用

124、Spark Streaming实时流计算原理与实践

125、Spark MLlib(一)机器学习库SparkMLlib介绍

126、Spark MLlib(二)机器学习库SparkMLib实战

127、Spark图计算GraphX

                   

附件2:大数据师资培训班

报 名 回 执 表

为使报名程序顺利完成,请完整提供以下信息并发送至:xiaoyao.fu@qi-tech.com.cn

  

 

   

 

  

 

   

 

  

 

   

 

报名人员信  

 

性别

 

职务/职位

  

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

发票信息

发票抬头:

发票内容:培训费     还可提供 会务费、会议费,可在”培训费”处修改

发票金额:        元 ;发票数量:          

1人以上交费的,可开一张总额发票,或单笔开数张发票;根据自身情况自由改写。

   宿

入住日期:              日;   退房日期:               

房间数量:        间;(标间 或 大床)

如需要培训结业证书请提供身份证号码

姓名

身份证号码

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

全国高校大数据专业师资培训班(邀请函)附件下载链接