本班级是“高校大数据课程公共服务平台”的九大工程中的“6号子工程”
全力打造全国高校大数据教学示范班级
厦门大学网络空间安全系专业选修课
《大数据导论》2020秋季学期班级主页
时间地点：1到16周每周二下午7、8节 厦大翔安校区1号楼（学武楼）B207教室
主讲人：厦门大学计算机科学系 林子雨 博士/副教授
(E-mail: ziyulin@xmu.edu.cn, 个人主页：https://dblab.xmu.edu.cn/post/linziyu)
课程简介|教师简介|示范班级|公告板|学生服务站|课程教材|讲义PPT下载|课后作业|教学大纲|课程进度表|在线课程视频| 推荐阅读 |班级相册
（扫一扫手机访问本主页）
课程名称：《大数据导论》
课程性质：厦门大学网络空间安全系专业选修课
面向对象：厦门大学网络空间安全系2019级本科生，不需要计算机基础
课程难度：入门级，零基础（课程采用林子雨编著的入门级精品教材，丰富的教材配套资源帮助学生实现“零基础”学习大数据）
授课教师：林子雨
开课学期：2020年秋季学期（9月到12月）
课程学时：每周2节，共16周，32学时，2学分
上课时间：每周二下午7、8节 两节课
上课教室：厦大翔安校区1号楼（学武楼）207教室
课程助教：厦门大学计算机系2020级硕士研究生陆丰庆同学（E-mail: 1048614042@qq.com）
课程内容：大数据时代已经全面开启，带来了信息技术发展的巨大变革，并深刻影响着社会生产和人民生活的方方面面。了解大数据概念、具备大数据思维，熟悉大数据技术是新时代对人才的新要求。本课程高屋建瓴探讨大数据，内容深入浅出，简单易懂，适合计算机相关专业各个年级学生学习。课程内容包括大数据概述，大数据与云计算、物联网、人工智能、区块链，大数据应用，大数据基础知识（大数据安全，大数据思维，大数据伦理，数据共享，数据开放，大数据交易），数据采集与预处理，数据存储与管理，数据处理与分析，数据可视化等。
培养目标：本课程旨在实现以下几个培养目标：
- 引导学生步入大数据时代，积极投身大数据的变革浪潮之中；
- 了解大数据概念，熟悉大数据应用，培养大数据思维，养成数据安全意识；
- 熟悉大数据各个环节的相关技术，为后续深入学习相关大数据技术奠定基础；
- 激发学生基于大数据的创新创业热情。
考核方式：考勤（10%）+平时作业（20%）+期末大作业（20%）+期末考试（50%，闭卷笔试）
林子雨，男，1978年出生，博士（毕业于北京大学），现为厦门大学计算机科学系副教授，曾任厦门大学信息科学与技术学院院长助理、晋江市发展和改革局副局长。中国计算机学会数据库专业委员会委员，中国计算机学会信息系统专业委员会委员。国内高校首个“数字教师”提出者和建设者，厦门大学数据库实验室负责人，厦门大学云计算与大数据研究中心主要建设者和骨干成员，2013年度、2017年度和2020年度厦门大学教学类奖教金获得者，荣获2019年福建省精品在线开放课程、2018年厦门大学高等教育成果特等奖、2018年福建省高等教育教学成果二等奖和2018年国家精品在线开放课程。主要研究方向为数据库、数据仓库、数据挖掘、大数据、云计算和物联网，并以第一作者身份在《软件学报》《计算机学报》和《计算机研究与发展》等国家重点期刊以及国际学术会议上发表多篇学术论文。作为项目负责人主持的科研项目包括1项国家自然科学青年基金项目(No.61303004)、1项福建省自然科学青年基金项目(No.2013J05099)和1项中央高校基本科研业务费项目(No.2011121049)，主持的教改课题包括1项2016年福建省教改课题和1项2016年教育部产学协作育人项目，同时，作为课题负责人完成了国家发改委城市信息化重大课题、国家物联网重大应用示范工程区域试点泉州市工作方案、2015泉州市互联网经济调研等课题。中国高校首个“数字教师”提出者和建设者，2009年至今，“数字教师”大平台累计向网络免费发布超过1000万字高价值的研究和教学资料，累计网络访问量超过1000万次。打造了中国高校大数据教学知名品牌，编著出版了中国高校第一本系统介绍大数据知识的专业教材《大数据技术原理与应用》，并成为京东、当当网等网店畅销书籍；建设了国内高校首个大数据课程公共服务平台，为教师教学和学生学习大数据课程提供全方位、一站式服务，累计访问量超过1000万次。
林子雨主讲厦门大学本科生课程《大数据导论》是“高校大数据课程公共服务平台”重点打造的示范班级，全程严格执行“林子雨精品大数据公开课六大质量标准”，旨在努力打造高校大数据教学实践标杆。
示范班级全程践行O2O教学理念，提供线上线下完整教学服务，学生在获得良好现场教学体验的同时，可以通过班级网站获得全方位课程指导和服务。示范班级标准元素包括：班级主页、标准教室、精心备课、精彩讲解、优雅形象、标准音质、完整服务、班级活动、班级合影等。
班级学生名单（28人）
高妍、曹恒毅、陈龙飞、陈铭、陈伟鸿、董璐、高孝楠、宫纪童、郭启翔、侯洁、 李渝斌、刘畅、刘琪、刘兀、马天宇、任钊颖、王欣怡、王垚、王禹薇、吴聪霞、吴东航、许联骏、张景喨、张诗怡、赵欣蕾、郑博识、邹鹏飞、宋俊杰
| 发布时间 | 内容 |
| 2020年8月20日 | 班级主页正式发布 |
| 2020年8月20日 | 大家好，我是厦门大学计算机系林子雨老师，欢迎大家选修《大数据导论》课程。这里说明几点：（1）班级主页是（https://dblab.xmu.edu.cn/post/bigdata-introduction2020/），里面提供了课程的相关信息和课件下载。（2）课程教材是林子雨编著《大数据导论》，ISBN:978-7-115-54446-9 定价：49.8元。该纸质教材可以从京东或当当网购。 |
| 2020年10月20日 | 本学期第1次作业正式发布。写一篇论文，主题是“讨论新兴技术对人类社会发展的影响”，可以选择大数据、云计算、物联网、人工智能和区块链中的一个或多个技术来讲解。论文要包含标题、摘要、正文和参考文献，内容最少要达到2页A4纸（5号字体，单倍行距）。2020年11月2日晚11点之前发送到班级助教陆丰庆同学的邮箱1048614042@qq.com，提交内容为WORD文档，WORD文档用学号、姓名和作业次序命名，比如“2020100321王小明第1次作业.doc”，邮件标题也是类似规范，比如邮件标题是“大数据导论2020100321王小明第1次作业”。文档命名和邮件标题不规范的，直接扣10分。 |
| 2020年11月3日 | 本学期第2次作业已经发布。第2次爬虫作业要注意，每个同学不能爬取相同的网站，必须自己找一个不同的网站来爬取数据。只有这样，大家才能真正了解爬虫的使用技巧。作业要在12月2日晚9点之前发送给助教邮箱。 |
| 2020年12月1日 | 本课程的期末考试时间是第15周周二（12月22日）下午78节（考试教室待定），考试形式是闭卷笔试，题型包括选择题和问答题。 |
| 2020年12月2日 | 第3次作业（期末大作业）的任务是，使用Python的可视化组件matplotlib，绘制可视化图表，要求至少绘制5种图表，12月21日晚9点之前发送到助教邮箱（1048614042@qq.com）。提交内容为WORD文档（代码和图表粘贴到WORD文档中），WORD文档用学号、姓名和作业次序命名，比如“2020100321王小明第3次作业.doc”，邮件标题也是类似规范，比如邮件标题是“大数据导论2020100321王小明第3次作业”。文档命名和邮件标题不规范的，直接扣10分。 |
| 2020年12月2日 | 期末考试定在第15周周二（12月22日）下午4点30分到6点30分，地点在翔安校区1号楼（学武楼）C202。考试形式是闭卷笔试，题型包括选择题和问答题。 |
| 章（或节） | 主要内容 | 学时安排 |
| 第1章 大数据概述 | 数据的概念、大数据时代到来的背景、大数据的发展历程、世界各国的大数据发展战略、大数据的概念与影响、大数据的应用以及大数据产业 | 2 |
| 第2章 大数据与其他新兴技术的关系 | 物联网的概念和应用、云计算的概念和应用、大数据和云计算以及物联网的相互关系、人工智能的概念与关键技术、大数据与人工智能的关系、区块链的概念与技术原理、大数据与区块链的关系 | 4 |
| 第3章 大数据基础知识 | 大数据安全，大数据思维，大数据伦理，数据共享，数据开放，大数据交易 | 6 |
| 第4章 大数据应用 | 大数据在各行各业的主要应用 | 4 |
| 第5章 数据采集与预处理 | 数据采集、数据清洗、数据转换、数据脱敏 | 2 |
| 第6章 数据存储与管理 | 传统的数据存储与管理技术、大数据时代的数据存储与管理技术、大数据处理架构Hadoop、分布式文件系统HDFS、NoSQL数据库、云数据库、分布式数据库HBase | 4 |
| 第7章 数据处理与分析 | 数据处理与分析的概念、机器学习和数据挖掘算法、大数据处理与分析技术、大数据处理与分析代表性产品 | 6 |
| 第8章 数据可视化 | 可视化概述、可视化图表、可视化工具、可视化典型案例 | 2 |
| 第9章 大数据分析综合案例 | 案例任务、系统设计、技术选择、系统实现、案例所需知识和技能 | 2 |
| 合计 | 32 | |
| 次数 | 日期 | 内容 |
| 1 | 2020年9月15日下午78节 | 课程介绍，第1章大数据概述 1.1 数据 1.2 大数据时代 1.3 大数据的发展历程 1.4 世界各国的大数据发展战略 |
| 2 | 2020年9月22日下午78节 | 讲完了第1章大数据概述 的所有剩余内容 1.5 大数据的概念 1.6 大数据的影响 1.7 大数据的应用 1.8 大数据产业 1.9 高校大数据专业 课堂播放视频：视频4-1：训练球队和视频4-6：石油探测 |
| 3 | 2020年9月29日下午78节 | 开始讲第2章，讲完了2.1节云计算 课堂播放视频： 视频2-9：阿里云出海布局全球云计算 视频2-10：亚洲最大标准最高的金融数据中心 |
| 4 | 2020年10月6日下午78节 | 讲解2.2 物联网 课堂播放视频： 视频2-1：智能仓储物流管理系统 视频2-2：厦门自动化码头 视频2-4：京东智能分拣 视频2-11：物联网智能井盖系统 |
| 5 | 2020年10月13日下午78节 | 讲解2.3 大数据与云计算、物联网的关系、2.4 人工智能、2.5 大数据与人工智能的关系 补充内容：区块链，讲了30分钟 课堂播放视频： 视频2-3：利用Tilt Brush在虚拟三维空间里绘画 视频2-5：波士顿动力机器人抗干扰开门 视频2-6：波士顿动力机器人合作开门 视频2-7：波士顿动力Atlas人形机器人跳跃空翻 视频2-8：波士顿动力机器人野外跑步跨越障碍 视频：法院审理涉比特币纠纷 |
| 6 | 2020年10月20日下午78节 | 讲解了区块链剩余全部内容 布置了第1次作业：论文（新兴技术对人类社会发展的影响） |
| 7 | 2020年10月27日下午78节 | 讲解了第5章 数据采集与预处理 讲完第5章还剩余15分钟，继续讲解第6章 数据存储与管理，讲完了关系数据库 |
| 8 | 2020年11月3日下午78节 | 讲解第6章 数据存储与管理 讲完了6.5.1 键值数据库 |
| 9 | 2020年11月10日下午78节 | 讲完了第6章 数据存储与管理，还剩余20分钟，继续讲解第7章数据处理与分析，讲完了7.2.1节概述，讲完了机器学习与数据挖掘的关系 |
| 10 | 2020年11月17日下午78节 | 讲到讲完了7.4.3数据仓库Impala |
| 11 | 2020年11月24日下午78节 | 讲完了第7章 大数据处理与分析 |
| 12 | 2020年12月1日下午78节 | 讲完了第8章 大数据可视化 第3章 大数据基础知识，讲到3.2.4运用大数据思维的具体实例的“4.吸烟有害身体健康的法律诉讼” |
| 13 | 2020年12月8日下午78节 | 讲完了第3.3.3节大数据的伦理问题 |
| 14 | 2020年12月15日下午78节 | 讲完了第3章 大数据基础知识，最后20分钟观看大数据时代视频 |
| 15 | 2020年12月22日下午78节 | 期末考试 |
《大数据导论》教材配套讲义PPT，请到教材官网下载。
| 章节 | 作业名称 | 作业内容 | 作业提交时间 | 下载作业 |
由林子雨老师主讲的《大数据导论》全套授课视频，已经在网易云课堂发布，敬请关注！点击这里观看
本书详细阐述了培养复合型大数据专业人才所需要的大数据相关知识。全书共9章，内容包括大数据概述、大数据与其他新兴技术的关系、大数据基础知识、大数据应用、数据采集与预处理、数据存储与管理、数据处理与分析、数据可视化、大数据分析综合案例。在大数据基础知识部分，详细介绍了与培养学生的数据素养相关的知识，包括大数据安全、大数据思维、大数据伦理、数据共享、数据开放、大数据交易和大数据治理。
2020秋季学期《大数据导论》本科生班级的课程助教，厦门大学计算机系2020级硕士研究生陆丰庆同学（E-mail: 1048614042@qq.com）。
为学生留下最美的课堂记忆。
