2017Spark师资班报名-第6期全国高校大数据课程教师培训交流班

第6期全国高校大数据课程教师培训交流班

(Spark高级研修班)

报名主页

小班制,名额已满,不再接收新的报名

培训交流时间:2017年8月7日-13日

培训地点:贵阳.贵州师范大学

厦门大学 林子雨 主讲

小班制,低收费,高品质

授课方法、课程资源、实验平台一站式培训

为高校教师在短期内顺利开设Spark课程铺平道路

扫一扫手机访问本主页

讲师简介 |  培训日程安排 | 收费标准 | 报名方式

第1期班级主页|第2期班级主页|第3期班级主页|第4期班级主页

培训讲师简介

厦门大学,计算机科学系,数据库实验室,林子雨

厦门大学计算机科学系 林子雨 博士/助理教授

林子雨,男,1978年出生,博士(毕业于北京大学),现为厦门大学计算机科学系助理教授,海峡云计算与大数据应用研究中心副主任,厦门大学数据库实验室负责人。曾任厦门大学信息科学与技术学院院长助理、晋江市发展和改革局副局长。厦门大学云计算与大数据研究中心主要建设者和骨干成员,中国计算机学会数据库专业委员会委员,中国计算机学会信息系统专业委员会委员,2013年度厦门大学奖教金获得者。中国高校首个“数字教师”提出者和建设者,2009年至今,“数字教师”大平台累计向网络免费发布超过100万字高价值的教学和科研资料,累计网络访问量超过100万次。建设了中国高校大数据课程公共服务平台,为教师教学和学生学习大数据课程提供包括教学大纲、讲义PPT、学习指南、备课指南、上机习题、授课视频、技术资料等全方位、一站式免费服务。牵头建设了首个国内一流的中国高校大数据课程教师培训交流基地,为从事大数据课程教学的高校教师开展培训交流提供了良好的平台。主要研究方向为数据库、数据仓库、数据挖掘、大数据、云计算和物联网,并以第一作者身份在《软件学报》《计算机学报》和《计算机研究与发展》等国家重点期刊以及国际学术会议上发表多篇学术论文。作为项目负责人主持的科研项目包括1项国家自然科学青年基金项目(No.61303004)、1项福建省自然科学青年基金项目(No.2013J05099)和1项中央高校基本科研业务费项目(No.2011121049),同时,作为课题负责人完成了国家发改委城市信息化重大课题、国家物联网重大应用示范工程区域试点泉州市工作方案、2015泉州市互联网经济调研等课题。编著出版中国高校第一本系统介绍大数据知识的专业教材《大数据技术原理与应用》并成为畅销书籍,编著并免费网络发布40余万字中国高校第一本闪存数据库研究专著《闪存数据库概念与技术》;主讲厦门大学计算机系本科生课程《数据库系统原理》和研究生课程《分布式数据库》《大数据技术基础》。具有丰富的政府和企业信息化培训经验,曾先后给中国移动通信集团公司、福州马尾区政府、福建省物联网科学研究院、石狮市物流协会、厦门市物流协会、福建龙岩卷烟厂等多家单位和企业开展信息化培训,累计培训人数达3000人以上。

林子雨博士在大数据教学领域,辛勤耕耘,开拓创新,成为高校大数据教学方式方法的积极探索者和有力贡献者。林子雨博士带领厦门大学计算机系数据库实验室团队,在积极践行O2O大数据教学理念的同时,提出了“以平台化思维打造中国高校大数据课程公共服务体系”的全新服务理念,成为推进国内高校大数据教学不断向前发展的一支重要力量。

收费标准

本培训班收费说明:培训交流班主要目的在于向全国高校推广大数据教学,与各位高校教师一起努力,共同促进中国高校大数据教学事业的不断发展进步。本培训班采用小班制,培训班的培训费用会低于商业机构举办的小班制培训班。本培训班收取的培训费,主要用于场地费、设备使用费、专车费、聘请讲师等费用。

本培训班收费标准培训费*元(含报名费、培训费、教材资料费、场地费、设备费等,本培训班收费低于市场价格),交通费、住宿费、餐饮费自理,统一安排住宿(费用自理)。

培训日程安排

(本培训班免费提供全套大数据课程Spark综合实验案例,包含数据集,可直接用于教学)

时间

课程主题 培训内容

培训讲师

第1天 模块一

大数据概述

  • 大数据时代
  • 大数据概念
  • 大数据的影响
  • 大数据关键技术
  • 大数据计算模式
  • 代表性大数据技术
厦门大学林子雨
模块二

Scala语言基础

  • Scala语言概述
  • Scala基础
  • 类、对象、继承、特质、模式匹配
厦门大学陶继平
第2天 模块二

Scala语言基础

  • 函数定义和高阶函数
  • 针对集合的操作
  • 遍历操作、map操作和flatMap操作、filter操作、reduce操作、fold操作
  • 函数式编程实例WordCount
厦门大学陶继平
模块三

Spark设计与运行原理

  • Spark简介
  • Spark运行架构
  • RDD的设计与运行原理
  • Spark的部署模式
厦门大学林子雨
第3天 模块四

Spark安装和使用方法

  • Spark的安装与使用
  • 第一个Spark应用程序:WordCount
  • 使用开发工具Intellij idea和Eclipse编写Spark应用程序
  • Spark集群环境搭建
  • 在集群上运行Spark应用程序
厦门大学林子雨
模块五

RDD编程

  • RDD编程
  • 键值对RDD
  • 共享变量
  • 数据读写(文件数据读写、读写HBase数据)
厦门大学林子雨
第4天 模块六

RDD编程实战案例

  • 案例1:求TOP值
  • 案例2:求最大最小值
  • 案例3:文件排序
  • 案例4:二次排序
  • 案例5:连接操作
厦门大学林子雨
模块七

Spark SQL原理和实践

  • Spark SQL简介
  • DataFrame与RDD的区别
  • DataFrame的创建
  • 从RDD转换得到DataFrame
  • 读取和保存数据(读写Parquet、通过JDBC连接数据库、连接Hive读写数据)
厦门大学林子雨
第5天 模块八

Spark Streaming原理和实践

  • 流计算简介
  • Spark Streaming简介
  • DStream操作概述
  • 输入源(文件流、套接字流、RDD队列流、Apache Kafka、Apache Flume)
  • 转换操作(DStream无状态转换操作、DStream有状态转换操作)
  • 输出操作(把DStream输出到文本文件中、把DStream写入到MySQL数据库中)
厦门大学林子雨
第6天 模块九

Spark MLlib实践

  •  Spark MLlib简介
  •  机器学习工作流(机器学习工作流、构建一个机器学习工作流、特征抽取、转化和选择[TF-IDF、Word2Vec、CountVectorizer、标签和索引的转化、卡方选择器])
  •  分类与回归(逻辑斯蒂回归分类器、决策树分类器)
  •  聚类算法(KMeans聚类算法、高斯混合模型(GMM)聚类算法)
  •  推荐算法(协同过滤算法)
厦门大学赖永炫

 报名方式

温馨提示:请具备一定大数据技术基础的老师报名Spark高级研修班。如果没有大数据技术基础(包括Hadoop技术体系),建议先选择报名参加2017年7月24日-31日第5期全国高校大数据课程教师培训交流班(基础班)(报名主页)。

请点击这里下载培训通知(内含报名表),填写报名表后发送到夏小云老师邮箱:xiaxybella@163.com

(本培训班免费提供全套大数据课程Spark综合实验案例,包含数据集,可直接用于教学)

第6期(2017年8月7日-13日暑假6天小班制)

(已经接收到的报名信息,以下名单不是实时更新)

序号 姓名
S1 张明新
S3 谢加良
S5 范路桥
S6 于建涛
S7 郑艺峰
S8 白彦峰
S9 胡玉荣
S10 贾跃
S11 汪静
S12 周慧
S13 马莉
S14 赵安新
S15 许冲
S16 张志兵
S17 林肖莹
S18 黎扬
S19 周锋
S20 宋爽
S21 吕亚丽
S22 宋万里
S23
陈明华
S24
包依勤
S25
李建敏
 S26 钟瑛
 S27 翁伟
S28 聂艳明
S29
李世伟
S30
彭文忠
S31
夏池玉
S32 毛阿敏
S34
刘巧红
S35 邵泽国
S36
刘殊
小班制,限额报名,名额已满,不再接收新的报名)