第8期全国高校大数据课程教师培训交流班主页
热烈祝贺本期培训班圆满落下帷幕
7月24日全天注册报到,25日-31日上课
地点:中国国际信息技术(福建)产业园 距离厦门北站40公里
(会务组有专车接送,从厦门北站接送到培训基地)
主办单位:厦门海韵博雅信息科技有限公司
协办单位:国富瑞(福建)信息技术产业园有限公司、厦门安胜网络科技有限公司
手机扫一扫访问本网页
班级名单
班主任:夏小云 老师
班长-邵玉祥
副班长-孔令美
组织委员-张立辉
学习委员-程丽娟
培训讲师
陶继平 厦门大学自动化系副教授
陶继平,男,1980年出生,博士。2010年毕业于上海交通大学控制科学与工程专业,获得工学博士学位。现任厦门大学自动化系副教授,兼任厦门市自动学会副秘书长、厦门市物流协会信息化专业委员会委员,曾为厦门大学云计算与大数据研究中心主要建设者和骨干成员。陶继平的主要研究兴趣包括运筹与优化算法理论及其在生产调度、多机器人规划、云计算、大数据分析等方面的应用。作为项目负责人主持1项国家自然科学青年基金项目(No. 11201391),已发表学术论文20多篇。作为主要参与人参与了国家自然科学基金、福建省自然科学基金等国家及省部级课题6项,同时还参与了多项行业报告的调研与撰写工作,包括《石狮市物流园区建设方案研究报告》、《厦门市城市信息化顶层设计框架研究报告》、《厦门市云计算产业发展技术路线图》、《国家物联网重大应用示范工程重点项目——福建省物联网科学院平台实施方案》等。另外,陶继平还具有机械设计、网络开发、智能楼宇等多个行业的实际从业背景,善于从实际应用的角度理解和阐述大数据等相关信息技术。
会务组
课程表
第8期全国高校大数据课程教师培训交流班课程表
(7月24日全天注册报到,25日-31日上课)
每天6节课,上午3节,下午3节,每节课45分钟
上午:9:00-9:45;10:00-10:45;11:00-11:45
下午:2:30-3:15;3:15-3:30(茶歇);3:30-4:15;4:30-5:15
(请学员自带笔记本电脑到教室上课)
课程主题
培训内容
培训讲师
第1天
(7月25日)
大数据概述
l 大数据时代和大数据概念
l 大数据的影响及关键技术
l 大数据计算模式
l 代表性大数据技术
分布式处理架构Hadoop
l Hadoop项目结构
l 实战:Hadoop的安装与使用
l 现场指导答疑
第2天
(7月26日)
分布式文件系统HDFS原理与实践
l HDFS体系结构
l HDFS存储原理
l 实战:HDFS初级编程实践
l 现场指导答疑
分布式数据库HBase原理与实践
l HBase与传统关系数据库的对比分析
l HBase访问接口
l HBase数据模型
l HBase实现原理
l 实战:HBase安装与简单编程实践
l 现场指导答疑
第3天
(7月27日)
MapReduce原理
与实践
l MapReduce工作流程概述
l MapReduce各个执行阶段
l Shuffle过程详解
l 实例分析
l 实战:MapReduce初级编程实践
l 现场指导答疑
Scala语言基础(一)
l Scala基础
l 类、对象、继承、特质、模式匹配
第4天
(7月28日)
Scala语言基础(二)
l 针对集合的操作(遍历操作、map操作和flatMap操作、filter操作、reduce操作、fold操作)
l 函数式编程实例WordCount
Spark设计与运行原理
l Spark运行架构
l RDD的设计与运行原理
l Spark的部署模式
第5天
(7月29日)
Spark安装和使用方法
l 第一个Spark应用程序:WordCount
l 使用开发工具IntelliJ IDEA和Eclipse编写Spark应用程序
l Spark集群环境搭建
l 在集群上运行Spark应用程序
RDD编程实践
l 键值对RDD
l 数据读写(文件数据读写、读写HBase数据)
第6天
(7月30日)
Spark SQL原理和实践
l DataFrame与RDD的区别
l DataFrame的创建
l 从RDD转换得到DataFrame
l 读取和保存数据
Spark Streaming原理和实践
l Spark Streaming简介
l DStream操作概述
l 输入源
l 转换操作
第7天
(7月31日)
大数据教学研讨会
参观中国国际信息
技术(福建)产业园
培训课程全部结束
课堂照片
茶歇
合影
课后活动
安溪好声音
企业参观
研讨会
毕业晚会晚宴
筹备工作
学员评价
班级相册
本主页提供压缩后的照片(每张200KB)的浏览和下载,请点击下面相册浏览下载。
注意,下面的缩略图只会显示相册中的部分图片,需要点击任意一张图片进入相册,然后,按左箭头和右箭头就可以浏览所有照片。