第6期全国高校大数据课程教师培训交流班
Spark高级研修班主页
热烈祝贺培训交流班圆满落下帷幕！
时间：2017年8月7日-13日
地点：贵州省贵阳市贵州师范大学宝山校区内
主办单位：厦门海韵博雅信息科技有限公司
班主任
班主任：夏小云 老师
班长：张明新
副班长：杨鸿雁
副班长：陈伟
组织委员：宋万里
第6期（2017年8月7日-13日）学员名单
| 姓名 | 性别 | 单位名称 |
| 张明新 | 男 | 常州理工学院 |
| 于建涛 | 男 | 西北农林科技大学 |
| 郑艺峰 | 男 | 闽南师范大学 |
| 白彦峰 | 男 | 河北经贸大学 |
| 胡玉荣 | 女 | 荆楚理工学院 |
| 贾跃 | 女 | 大连东软信息学院 |
| 汪静 | 女 | 广东东软学院 |
| 周慧 | 女 | 大连东软信息学院 |
| 赵安新 | 男 | 西安科技大学 |
| 许冲 | 男 | 闽南师范大学 |
| 林肖莹 | 女 | 闽南师范大学 |
| 黎扬 | 男 | 兰州交通大学 |
| 宋爽 | 男 | 西安科技大学 |
| 宋万里 | 男 | 南京晓庄学院 |
| 陈明华 | 女 | 大连东软信息学院 |
| 包依勤 | 男 | 南京晓庄学院 |
| 李建敏 | 男 | 厦门理工学院 |
| 钟瑛 | 女 | 厦门理工学院 |
| 翁伟 | 男 | 厦门理工学院 |
| 刘全中 | 男 | 西北农林科技大学 |
| 王小刚 | 男 | 兰州交通大学 |
| 张志兵 | 男 | 江西财经大学 |
| 刘巧红 | 女 | 上海健康医学院 |
| 邵泽国 | 男 | 上海健康医学院 |
| 刘殊 | 男 | 广东体育职业技术学院 |
| 张波 | 男 | 天津电子信息职业技术学院 |
| 杨鸿雁 | 女 | 鞍山师范学院 |
| 王家伟 | 男 | 重庆交通大学 |
| 王桂平 | 男 | 重庆交通大学 |
| 何伟 | 男 | 重庆交通大学 |
| 车艳 | 女 | 莆田学院 |
| 孙宁 | 女 | 河海大学常州校区 |
| 朱金秀 | 女 | 河海大学常州校区 |
| 胡沛 | 男 | 南阳理工学院 |
| 韩璞 | 男 | 南阳理工学院 |
| 翟自强 | 男 | 天津电子信息职业技术学院 |
| 陈伟 | 男 | 中国矿业大学 |
| 王云艳 | 女 | 湖北工业大学 |
（1）林子雨老师简介
厦门大学计算机科学系 林子雨 博士/助理教授
林子雨，男，1978年出生，博士（毕业于北京大学），现为厦门大学计算机科学系助理教授，厦门大学数据库实验室负责人。曾任厦门大学信息科学与技术学院院长助理、晋江市发展和改革局副局长。厦门大学云计算与大数据研究中心主要建设者和骨干成员，2013年度和2017年度厦门大学奖教金获得者。中国高校首个“数字教师”提出者和建设者，2009年至今，“数字教师”大平台累计向网络免费发布超过500万字高价值的教学和科研资料，累计网络访问量超过500万次。建设了高校大数据课程公共服务平台，为教师教学和学生学习大数据课程提供包括教学大纲、讲义PPT、学习指南、备课指南、上机习题、授课视频、技术资料等全方位、一站式免费服务，平台已经成为国内高校大数据教学知名品牌，平台每年访问量超过100万次。牵头建设了首个国内一流的高校大数据课程教师培训交流基地，为从事大数据课程教学的高校教师开展培训交流提供了良好的平台。主要研究方向为数据库、数据仓库、数据挖掘、大数据、云计算和物联网，并以第一作者身份在《软件学报》《计算机学报》和《计算机研究与发展》等国家重点期刊以及国际学术会议上发表多篇学术论文。作为项目负责人主持的科研项目包括1项国家自然科学青年基金项目(No.61303004)、1项福建省自然科学青年基金项目(No.2013J05099)和1项中央高校基本科研业务费项目(No.2011121049)，同时，作为课题负责人完成了国家发改委城市信息化重大课题、国家物联网重大应用示范工程区域试点泉州市工作方案、2015泉州市互联网经济调研等课题。编著出版中国高校第一本系统介绍大数据知识的专业教材《大数据技术原理与应用》并成为畅销书籍，编著出版《大数据基础编程、实验和案例教程》，编著并免费网络发布40余万字中国高校第一本闪存数据库研究专著《闪存数据库概念与技术》；主讲厦门大学计算机系本科生课程《数据库系统原理》和研究生课程《分布式数据库》《大数据技术基础》。具有丰富的政府和企业信息化培训经验，曾先后给中国移动通信集团公司、福州马尾区政府、福建省物联网科学研究院、石狮市物流协会、厦门市物流协会、福建龙岩卷烟厂等多家单位和企业开展信息化培训，累计培训人数达3000人以上。
林子雨博士在大数据教学领域，辛勤耕耘，开拓创新，成为高校大数据教学方式方法的积极探索者和有力贡献者。林子雨博士带领厦门大学计算机系数据库实验室团队，在积极践行O2O大数据教学理念的同时，提出了“以平台化思维打造中国高校大数据课程公共服务体系”的全新服务理念，成为推进国内高校大数据教学不断向前发展的一支重要力量。
（2）赖永炫老师简介
赖永炫，男，1981年出生，博士，厦门大学软件学院副教授，福建省人工智能学会理事。2004年毕业于中国人民大学信息管理系，2009年毕业于中国人民大学计算机系，获工学博士学位。研究方向是网络数据管理，车载网络，大数据分析和管理等。近年来主持过国家科技支撑计划课题1项，国家自然科学基金2项，参与国家及省部级课题10余项。发表高水平科研论文20余篇，并担任多个国际期刊和会议的审稿人。积极参与产学研项目合作，与中国移动手机动漫基地、厦门一品威客网、厦门中小在线等与多家科技企业建立了合作关系，进行技术研发和攻关。曾担任全国研究生移动终端应用设计创新大赛专家评委，英特尔杯大学生软件创新大赛专家评委。获得厦门大学厦航奖教金，厦门大学第八届青年教师教学技能比赛一等奖，厦门大学高等教育教学成果二等奖。
| 序号 | 姓名 | 性别 | 单位名称 |
| 1 | 林子雨 | 男 | 厦门大学数据库实验室 |
| 2 | 夏小云 | 女 | 厦门大学数据库实验室 |
| 3 | 赖永炫 | 男 | 厦门大学软件学院 |
| 4 | 杨帆 | 男 | 厦门大学自动化系 |
| 5 | 程璐 | 女 | 厦门大学数据库实验室 |
| 6 | 林哲 | 男 | 厦门大学数据库实验室 |
| 7 | 尤程儒 | 女 | 厦门大数据研发与教育中心 |
第6期全国高校大数据课程教师培训交流班课程表
2017年8月7日-13日
（8月7日全天注册报到，8日-13日连续6天上课）
每天6节课，上午3节，下午3节，每节课45分钟
上午：9:00-9:45;10:00-10:45;11:00-11:45
下午：2:30-3:15;3:15-3:30(茶歇)；3:30-4:15;4:30-5:15
| 时间 | 课程主题 | 培训内容 | 培训讲师 |
| 第1天 | 模块一
大数据概述 |
l 大数据时代
l 大数据概念 l 大数据的影响 l 大数据关键技术 l 大数据计算模式 l 代表性大数据技术 |
厦门大学
林子雨 |
| 模块二
Scala语言基础 |
l Scala语言概述
l Scala基础 l 类、对象、继承、特质、模式匹配 |
厦门大学
林子雨 |
|
| 第2天 | 模块三
Scala语言基础 |
l 函数定义和高阶函数
l 针对集合的操作 l 遍历操作、map操作和flatMap操作、filter操作、reduce操作、fold操作 l 函数式编程实例WordCount |
厦门大学
林子雨 |
| 模块四
Spark设计与运行原理 |
l Spark简介、Spark运行架构
l RDD的设计与运行原理 l Spark的部署模式 |
厦门大学
林子雨 |
|
| 第3天 | 模块五
Spark安装和使用方法 |
l Spark的安装与使用
l 第一个Spark应用程序：WordCount l 使用开发工具Intellij idea和Eclipse编写Spark应用程序 l Spark集群环境搭建 l 在集群上运行Spark应用程序 |
厦门大学
林子雨 |
| 模块六
RDD编程 |
l RDD编程
l 键值对RDD l 共享变量 l 数据读写（文件数据读写、读写HBase数据） |
厦门大学
林子雨 |
|
| 第4天 | 模块七
RDD编程实战案例 |
l 案例：求值
l 案例：求最大最小值 l 案例：文件排序 l 案例：二次排序 l 案例：连接操作 |
厦门大学
林子雨 |
| 模块八
Spark SQL原理和实践 |
l Spark SQL简介
l DataFrame与RDD的区别 l DataFrame的创建 l 从RDD转换得到DataFrame l 读取和保存数据（读写Parquet、通过JDBC连接数据库、连接Hive读写数据） |
厦门大学
林子雨 |
|
| 第5天 | 模块九
Spark Streaming原理和实践 |
l 流计算简介
l Spark Streaming简介 l DStream操作概述 l 输入源（文件流、套接字流、RDD队列流、Apache Kafka、Apache Flume） l 转换操作（DStream无状态转换操作、DStream有状态转换操作） l 输出操作（把DStream输出到文本文件中、把DStream写入到MySQL数据库中） |
厦门大学
林子雨 |
| 第6天 | 模块十
Spark MLlib 实践 |
l Spark MLlib简介
l 机器学习工作流（机器学习工作流、构建一个机器学习工作流、特征抽取、转化和选择[TF-IDF、Word2Vec、CountVectorizer、标签和索引的转化、卡方选择器]） l 分类与回归（逻辑斯蒂回归分类器、决策树分类器） l 聚类算法（KMeans聚类算法、高斯混合模型(GMM)聚类算法） l 推荐算法（协同过滤算法） |
厦门大学
赖永炫 |
课堂镜头
茶歇
课后活动
毕业晚会
致谢
衷心感谢贵州师范大学大数据与计算机科学学院为本次培训交流班提供场地和相关服务支持。
（备注：点击相册中的图片，可以浏览大图，才能看到所有照片，然后可以下载保存图片）
