大数据课程公共服务平台精华资源一览表

中国高校大数据课程公共服务平台LOGO(图上文下)

大数据课程公共服务平台

精华资源一览表

厦门大学计算机科学系  林子雨  博士/助理教授

(E-mail: ziyulin@xmu.edu.cn, 个人主页:http://www.cs.xmu.edu.cn/linziyu)

扫一扫访问本主页

1.《大数据技术原理与应用》教材

官网:http://dblab.xmu.edu.cn/post/bigdata/

林子雨老师编著的国内高校第一本系统性介绍大数据知识专业教材《大数据技术原理与应用》,教材系统论述了大数据的基本概念、大数据处理架构Hadoop、分布式文件系统HDFS、分布式数据库HBase、NoSQL数据库、云数据库、分布式并行编程模型MapReduce、大数据处理架构Spark、流计算、图计算、数据可视化以及大数据在互联网、生物医学和物流等各个领域的应用。在Hadoop、HDFS、HBase、MapReduce、Spark等重要章节,安排了入门级的实践操作,让读者更好地学习和掌握大数据关键技术。

2.大数据软件安装和编程实践指南

官网http://dblab.xmu.edu.cn/post/5663/

详细学习如何安装运行各种大数据软件以及如何进行初级编程实践,包括Hadoop、HDFS、HBase、MapReduce、Spark、MongoDB等安装、操作、编程指南。

3.教师备课指南

官网:http://dblab.xmu.edu.cn/post/5637/

详细说明了教师如何备课,包括教学大纲、讲义PPT、授课视频、课后习题、上机题目等。

4.授课视频

官网:http://dblab.xmu.edu.cn/post/bigdata-online-course/

林子雨主讲的全套大数据课程视频,供老师上课参考。课程内容涵盖大数据、云计算和物联网概念及其相互关系、大数据处理架构Hadoop、分布式文件系统HDFS、分布式数据库HBase、NoSQL数据库、云数据库、分布式并行编程模型MapReduce、图计算、流计算、基于内存的大数据处理框架Spark、基于Hadoop的数据仓库Hive、大数据在不同领域的应用等。课程视频自2016年3月28日在网易云课堂正式上线以来,一直稳居热门课程榜单前列,深受广大网友欢迎,国内多家知名大数据企业、慕课网站和培训机构采用本课程视频。截至2016年12月12日,网易云课堂学习人数突破18000人,收获评价中99%为五星级最高评价,被众多网友称为“国内难得的经典课程”。

5.实验指南

官网:http://dblab.xmu.edu.cn/post/6131/

用于机房统一上机,包含题目和答案。

6.Spark入门教程

官网:http://dblab.xmu.edu.cn/blog/spark/

Spark是当前最热门的大数据处理框架,林子雨编著《Spark入门教程》,让初学者零基础零障碍学习Spark。教程采用Scala语言编写Spark应用程序,因此,教程包括Scala入门和Spark入门两个部分的内容。

7.大数据课程实验案例《网站用户购物行为分析》

官网:http://dblab.xmu.edu.cn/post/7499/

采用2000万条用户购物数据集,案例涉及数据预处理、存储、查询和可视化分析等数据处理全流程所涉及的各种典型操作,涵盖Linux、MySQL、Hadoop、HBase、Hive、Sqoop、R、Eclipse等系统和软件的安装和使用方法。案例适合高校(高职)大数据教学,可以作为学生学习大数据课程后的综合实践案例。

8.Spark课程综合实验案例:淘宝双11数据分析与预测

官网:http://dblab.xmu.edu.cn/post/8116/

本案例采用3000万条用户购物数据集,涉及数据预处理、存储、查询和可视化分析等数据处理全流程所涉及的各种典型操作,涵盖Linux、MySQL、Hadoop、Hive、Sqoop、Eclipse、ECharts、Spark等系统和软件的安装和使用方法。案例适合高校(高职)大数据教学,可以作为学生学习Spark课程后的综合实践案例。