第25期大数据师资培训班主页

平台LOGO透明背景

第25期全国高校大数据课程教师培训交流班主页

热烈祝贺本期培训班圆满落下帷幕


班级名单|培训讲师|会务组|课程表班级相册
研讨会  | 参观 | 课堂  |  课后活动  |  茶歇 |  毕业晚会晚宴 |
查询交通指南、泉州风情等内容请访问“报名主页


时间:2024年8月4日-9日

地点:泉州云庭假日酒店

扫一扫访问本网页

热烈欢迎培训班条幅1

班级名单

班主任:夏小云  老师

班长:阮慧丰

副班长:闫磊

学习委员:薛学亚

组织委员:张晓婷

第25期学员名单

序号 姓名 性别 单位名称
1 王英瑛 山东工商学院
2 肖泽青 长沙师范学院
3 高艳 内蒙古医科大学
4 刘秉政 内蒙古医科大学
5 潘可 南宁学院
6 徐蓓 九江学院
7 莫华 湖南应用技术学院
8 张艳 九江学院
9 王子轩 中南民族大学
10 闫磊 河北政法职业学院
11 余金玲 内蒙古科技大学
12 问佳琳 火箭军工程大学
13 杨玉霞 内蒙古民族大学
14 李艳 内蒙古民族大学
15 白利军 四川轻化工大学
16 薛学亚 河北经贸大学
17 胡树玮 广西财经学院
18 刘清华 浙江育英职业技术学院
19 张兴兰 重庆理工大学
20 陈华 浙江广厦建设职业技术大学
21 杨德红 重庆理工大学
22 李照璇 吉利学院
23 王永江 河北地质大学
24 阮慧丰 山东大学(威海)
25 张晓婷 西北农林科技大学
26 张涛 广西科技大学
27 吴昊 河南工程学院
28 赵志明 中国矿业大学(北京)
29 王文钰 河南工程学院
30 杨延强 河北地质大学
31 刘鑫 火箭军工程大学
32 李平 萍乡学院
33 康瑞瑞 四川轻化工大学

培训讲师

厦门大学计算机科学与技术系 林子雨 博士/副教授

DSC_4552副本

林子雨(1978-),男,博士,国内高校知名大数据教师,厦门大学计算机科学与技术系副教授,厦门大学数据库实验室负责人,中国计算机学会数据库专委会委员,中国计算机学会信息系统专委会委员,入选“2021年高校计算机专业优秀教师奖励计划”,荣获“2022年福建省高等教育教学成果奖特等奖(个人排名第一)”和“2018年福建省高等教育教学成果奖二等奖(个人排名第一)”,编著出版13本大数据系列教材,被国内1000多所高校采用,建设了国内高校首个大数据课程公共服务平台,平台累计网络访问量超过2500万次,成为全国高校大数据教学知名品牌,主持的课程《大数据技术原理与应用》获评“2018年国家精品在线开放课程”和“2020年国家级线上一流本科课程”,主持的课程《Spark编程基础》获评“2021年国家级线上一流本科课程”。建设的大数据系列MOOC课程,入选“2023年教育部国家智慧教育公共服务平台应用典型案例”。

会务组

序号 姓名 性别 单位名称
1 林子雨 厦门大学数据库实验室
2 夏小云 厦门大学数据库实验室
3 蔡炳跃 厦门大学信息学院实验教学中心
4 黄万嘉 厦门大学数据库实验室
5 曹基民 厦门大学数据库实验室
6 刘心雨 厦门大学数据库实验室
7 赖文烨 厦门大学数据库实验室

课程表

第25期全国高校大数据课程教师培训交流班课程表

2024年8月4日-9日

(8月4日全天注册报到,5日-9日上课)

每天6节课,上午3节,下午3节,每节课45分钟

上午:9:00-9:45;10:00-10:45;11:00-11:45

下午:2:30-3:15;3:15-3:30(茶歇);3:30-4:15;4:30-5:15

时间

课程主题

培训内容

培训讲师

第1天

85日)

模块一

大数据概述

l l数据、数据分析过程

l l数据采集与预处理的任务

l l数据采集、数据清洗、数据集成

l   数据转换、数据归约、数据脱敏

厦门大学林子雨

模块二

大数据实验环境搭建

l lLinux系统的安装和使用(实战)

l lPython的安装和使用(实战)

l lJDK的安装(实战)

l lHadoop的安装和使用(实战)

l lMySQL数据库的安装和使用(实战)

l lMonoDB的安装和使用(实战)

l lRedis的安装和使用(实战)

l   多位老师和助教现场指导答疑

厦门大学林子雨

第2天

86日)

模块三

网络数据采集

l l网络爬虫概述、网页基础知识

l l用Python实现HTTP请求

l l定制requests

l l解析网页(BeautifulSoup简介、遍历文档树、搜索文档树、CSS选择器)

l l实战:综合实例

实例1:采集网页数据保存到文本文件

实例2:采集网页数据保存到MySQL数据库

实例3:采集网页数据保存到MongoDB数据库

实例4:采集网页数据保存到Redis数据库)

l   多位老师和助教现场指导答疑

厦门大学林子雨

模块四

Scrapy爬虫

l lScrapy框架概述

l lXPath语言

l l实战:Scrapy框架应用实例

l l实战:通过JSON接口爬取网站数据

l   多位老师和助教现场指导答疑

厦门大学林子雨

第3天

87日)

模块五

分布式消息系统

Kafka

l lKafka简介

l lKafka在大数据生态系统中的作用

l lKafka与Flume的区别与联系

l lKafka相关概念

l lKafka的安装和使用

l l实战:使用Python操作Kafka

l l实战:Kafka与MySQL的组合使用

l l实战:Kafka采集数据保存到MongoDB中

l   多位老师和助教现场指导答疑

厦门大学林子雨

模块六

日志采集系统

Flume

l lFlume简介

l lFlume的安装和使用

l l实战:Flume和Kafka的组合使用

l l实战:采集日志文件到HDFSl

l   实战:采集MySQL数据到HDFS

l l实战:Flume多数据源应用实例

l   多位老师和助教现场指导答疑

厦门大学林子雨

第4天

88日)

模块

ETL工具

Kettle

l lKettle的基本概念、基本功能

l l安装Kettle

l l实战:数据抽取

l   多位老师和助教现场指导答疑

厦门大学林子雨

模块

ETL工具

Kettle实战案例

l  实战:数据清洗与转换

l  实战:数据加载

l  多位老师和助教现场指导答疑

厦门大学林子雨

第5天

89日)

模块

使用pandas进行

数据清洗

l lNumPy的基本使用方法

l lpandas的数据结构

l l实战:pandas导入导出文件

l l实战:pandas的基本功能

l l实战:汇总和描述统计

l l实战:处理缺失数据

l l实战:清洗格式内容

l   多位老师和助教现场指导答疑

厦门大学林子雨

模块

使用pandas进行

数据清洗综合实例

(实战)

l l实例1:对食品数据集进行基本操作

l l实例2:对电影数据集进行清洗

l l实例3:百度搜索指数分析

l l实例4:B站数据分析

l l实例5:电影评分数据分析

l   多位老师和助教现场指导答疑

厦门大学林子雨

课堂

开班仪式

茶歇

合影

户外活动

答疑

课间操

毕业晚会

毕业晚会节目《三句半》

创作与表演者:王英瑛、莫华、陈华、张晓婷

高校教师聚泉州,
大数据课程共研修,
子雨博士在前头,
真牛!

小云老师真贴心,
培训事务全操心,
服务周到暖人心,
迷人!

炳跃老师有妙招,
知识讲解呱呱叫,
学员收获真不少,
叫好!

万嘉同学有才华,
大数据里把根扎,
指导学员人人夸,
绝佳!

基民同学经验足,
难题困惑全解除,
培训效果不含糊,
佩服!

心雨同学笑盈盈,
陪伴左右送温情,
助力学习一路行,
欢迎!

文烨助教活力满,
帮忙解惑不偷懒,
认真负责大家赞,
能干!

大数据交流热又潮,

培训盛会聚英豪,

智慧碰撞火花耀,

真高!

数据海洋深且广,

技术前沿共分享,

学以致用强技能,

不忘!

山东工商王英瑛,
培训之中斗志昂,
未来教学路宽广,
向上!

长沙师范肖泽青,
培训之中展才能,
未来之路定光明,
飞腾!

 

内蒙医科秉政、高艳携手来,
努力钻研不懈怠,
提升自我有期待,
精彩!

南宁学院潘可棒,
学习劲头超级强,
收获满满心飞扬,
欢畅!

九江张艳、徐蓓忙,
认真听讲记心房,
知识运用响当当,
真棒!

湖南应用莫华勤,
培训期间很用心,
未来发展亮晶晶,
功成!

中南民族王子轩,
积极参与勇发言,
不断进步笑开颜,
心欢!

河北政法闫磊在,
努力提升不懈怠,
未来工作更精彩,
豪迈!

内蒙科大余金玲,
认真学习思路清,
未来之路亮晶晶,
光明!

火箭军刘鑫、俊萍、问佳琳,
刻苦钻研知识寻,
梦想实现定能成,
必赢!

玉霞、李艳内蒙靓,
学习知识心欢畅,
未来之路闪光芒,
漂亮!

学委学亚爱学习,
帮助同学解难题,
共同进步心欢喜,
甜蜜!

 

广西财经胡树玮,
学习过程很陶醉,
收获满满心欣慰,
欣慰!

 

浙江育英刘清华,
积极向上把油加,
未来之路美如画,
如花!

重庆理工张兴兰,
培训期间不畏难,
知识掌握很圆满,
周全!

浙江广厦陈华行,
努力学习把名赢,
未来事业定飞腾,
飞腾!

重庆理工杨德红,
学习交流心欢畅,
回去教学路宽广,
起航!

吉利学院李照璇,
认真努力勇争先,
未来之路谱新篇,
宏篇!

河北地质王永江,
积极奋进志高昂,
未来之路放光芒,
辉煌!

班长慧丰责任重,
组织协调不放松,
带领大家向前冲,
先锋!

组织委员张晓婷,
活动安排很分明,
服务大家很热情,
真情!

广西科技张涛来,
努力学习把头埋,
未来发展大步迈,
快哉!

 

吴昊、文钰工程强,
培训过后能力涨,
未来工作创辉煌,
起航!

中国矿大赵志明,
勤奋努力方向明,
未来前景亮铮铮,
飞腾!

王文钰男河工忙,
培训之中把劲闯,
收获多多心花放,
欢畅!

河北地质延强刚,
学习交流斗志昂,
未来之路响当当,
真棒!

萍乡学院李平到,
积极参与热情高,
知识海洋任逍遥,
逍遥!

四川轻化工康瑞瑞,

培训时刻全心醉,

知识海洋勇敢汇,

无畏!

 

此次培训质量高,
内容实用方法妙,
教师学员齐叫好,
真好!

培训安排特周到,
环节紧凑没烦恼,
知识海洋任游遨,
逍遥!

交流互动氛围浓,
思想碰撞火花迸,
共同进步收获丰,
成功!

泉州之行意义深,
大数据路携手奔,
未来发展定乾坤,
高分!

培训圆满成果佳,
知识传播遍地花,
期待下次再出发,
出发!

毕业晚会节目《脱口秀》

表演者:徐蓓、张艳

徐蓓:各位老师,大家晚上好!首先我们非常感谢林老师,因为有了林老师的精心组织,和团队的积极策划,才有了我们这次泉州的相聚,所以我们非常感谢他们!我们最最最要感谢的是夏老师,把两个i人,既不能说会道又没有一点幽默细胞的人请(逼)上了这个舞台。我们两个不得不抱着视死如归的精神,义无反顾的踏上了这个舞台,心里非常非常忐忑。但我两豁出去了,只要我两不尴尬,尴尬的就是大家!

张艳:虽然我们来自五湖四海,但有着共同的身份,大学老师。在外人眼里我们职业非常光鲜靓丽!但是实际上我们身处其中,也有不得已的苦衷,也有各种各样的爱恨情仇!

徐蓓:我们一定要向社会澄清一个误会,大家都觉得大学老师真让人羡慕,总觉得我们具有超能力。可是我们虽然没有超能力,但我们绝对能跟超人一决高下——我们有超强的熬夜能力。你看,我们辛苦上完一天课后,还得回去挑灯备课,夜读、改作业,搞论文,写报告。超人任务完成了还可以回去休息,我们365天全年无休。

张艳:我们计算机专业老师其还有个隐藏身份——那就是“时间旅行者”。只不过我们的时间机器不是德尔洛伦佐号,而是那台永远亮着屏的笔记本电脑。我们能在一天之内在各种环境中穿梭,有古代的算法,也有现代的编程技术,还能在课堂从数学课切换到编程课,或者从编程课切换到英语课,还要在各种各样的环境中自由切换。所以呢,我们比闪电侠还要厉害!

徐蓓:计算机是21世纪的魔法,代码就是我们这些魔法师的咒语。我深以为然,但我想说,咱们这些学计算机的,其实就是现代版的魔法师。每天对着屏幕念经(哦不,是编程),试图召唤出各种神奇的功能和应用。只不过,我们的魔法书比较厚,叫《编程入门到精通》,而且还没完没了地一直再出续集。

张艳:说到编程,有时候我真的觉得我们像是在跟计算机谈一场永无止境的恋爱,而我是他卑微的追求者。我们为它写下深情的情书(代码),它却总给我回复一些哭笑不得的“答案”——(各种错误提示)。但即使如此,我们依然乐此不疲,因为每次的“沟通障碍”,都是增进我们感情的催化剂嘛!一次一次、一封一封我写的情书被他残酷拒绝,但我和他的感情就越来越深。每当这个时候就会想起一句话:“人生就像编程,你永远不知道下一个bug会在哪里等你。”

徐蓓:我们下一个深情对待的对象就是我们的学生。我们和学生之间永远玩着 “猫和老鼠”的高级游戏。我们精心设计难题,试图让他们抓耳挠腮,让他们想破脑袋,结果他们总能找到各种各样的漏洞,像黑客一样破解我们的“安全系统”。每次看到他们得意洋洋地把答案交到我的面前,我都想大喊:“你们这群小机灵鬼,是不是偷学了《黑客帝国》的秘籍呢?”

张艳:还有啊,我们计算机专业老师都是“未来趋势预测机”,不过不是靠水晶球也不是靠各种魔法,而是靠我们敏锐的嗅觉和对学生们的了解。每当有人问我:“老师,未来什么技术最火?我们应该学什么呀?”我总能神秘一笑,然后说:“别急,等你毕业那天,我自然会告诉你。”当然了,这只是个玩笑,但说真的,我们真的很擅长从学生们的兴趣去创新,看到未来的趋势。这就是我们“第六感”。

合:能力超群的各位老师,今晚硬尬的脱口秀终于要结束了,感谢大家没把我两哄下台去。

愿我们的笑声、智慧和友谊像校园里的常青藤一样,越攀越高,越发茂盛。谢谢大家

学员评价

相册