【版权声明】版权所有，严禁转载，严禁用于商业用途，侵权必究。
作者：厦门大学信息学院2020级研究生 寿铁祺
指导老师：厦门大学数据库实验室 林子雨 博士/副教授
相关教材：林子雨、陶继平编著《Flink编程基础（Scala版）》（官网）
相关案例：基于Scala语言的Flink数据处理分析案例集锦
本实验爬取了豆瓣电影的31441条电影记录，使用scala语言进行flink编程处理了数据，最后结果使用python进行了可视化
继续阅读
基于Flink的租房数据处理与分析
【版权声明】版权所有，严禁转载，严禁用于商业用途，侵权必究。
作者：厦门大学信息学院计算机系2020级研究生 朱航
指导老师：厦门大学数据库实验室 林子雨 博士/副教授
相关教材：林子雨、陶继平编著《Flink编程基础（Scala版）》（官网）
相关案例：基于Scala语言的Flink数据处理分析案例集锦
继续阅读
基于Flink的CVPR近五年论文数据的分析与处理
【版权声明】版权所有，严禁转载，严禁用于商业用途，侵权必究。
作者：厦门大学信息学院2020级研究生 李毅男
指导老师：厦门大学数据库实验室 林子雨 博士/副教授
相关教材：林子雨、陶继平编著《Flink编程基础（Scala版）》（官网）
相关案例：基于Scala语言的Flink数据处理分析案例集锦
本实验通过python爬取了CVPR近五年的论文数据，并通过Scala语言编写了Flink程序，最后使用python进行了数据可视化
继续阅读
基于Flink的气象数据处理与分析
【版权声明】版权所有，严禁转载，严禁用于商业用途，侵权必究。
本案例由厦门大学计算机系2020级研究生方韩同学制作，这里对他表示衷心的感谢！
相关教材：林子雨、陶继平编著《Flink编程基础（Scala版）》（官网）
相关案例：基于Scala语言的Flink数据处理分析案例集锦
本实验针对气象数据进行分析，使用爬虫获取数据，再使用scala语言进行flink编程来处理数据，最后结果使用python进行可视化
继续阅读
基于Flink的Pokemon数据分析
【版权声明】版权所有，严禁转载，严禁用于商业用途，侵权必究。
作者：厦门大学信息学院2020级研究生 刘官山
指导老师：厦门大学数据库实验室 林子雨 博士/副教授
相关教材：林子雨、陶继平编著《Flink编程基础（Scala版）》（官网）
相关案例：基于Scala语言的Flink数据处理分析案例集锦
本实验用Scala语言编写了Flink程序，对Pokemon数据集进行了数据处理和分析，之后对分析结果使用Echarts编写了可视化HTML页面
继续阅读
Anaconda的下载和使用方法
将Maven源改为国内阿里云仓库
【版权声明】版权所有，严禁转载，严禁用于商业用途，侵权必究。
在使用Maven打包Scala程序时，默认是从位于国外的Maven中央仓库下载相关的依赖，造成我们从国内下载依赖时速度很慢。
可以通过修改Maven的配置文件，让Maven到国内的阿里云仓库下载相关依赖，大大提高打包的速度。
继续阅读
Spark+Kafka构建实时分析Dashboard案例——步骤三：Spark Streaming实时处理数据（python版本）
该版本是原先教程的python版本。
查看前一步骤操作步骤二：数据处理和Python操作Kafka
查看scala版本scala版本：Spark Streaming实时处理数据
《Spark+Kafka构建实时分析Dashboard案例——步骤三：Spark Streaming实时处理数据(python版本)》
开发团队：厦门大学数据库实验室 联系人：林子雨老师ziyulin@xmu.edu.cn
版权声明：版权归厦门大学数据库实验室所有，请勿用于商业用途；未经授权，其他网站请勿转载
本教程介绍大数据课程实验案例“Spark+Kafka构建实时分析Dashboard”的第三个步骤，Spark Streaming实时处理数据。在本篇博客中，将介绍如何利用Spark Streaming实时接收处理Kafka数据以及将处理后的结果发给的Kafka。