pyspark 上手项目

基于Spark（Hadoop）热门旅游景点数据分析与可视化系统，采用Django框架，Hadoop，Spark，spider爬虫，Mysql，echarts图表，智能推荐算法等技术，前台系统 ：首页、用户注册，登录，个人中心管理，中国景点推荐、旅游资讯、收藏，评分，评论，个人中心等功能，后台管理系统 ：首页，用户管理，中国景点管理，景点数据爬虫更新，个人中心管理，数据分析可视化看板等。

基于Spark（Hadoop）热门旅游景点数据分析与可视化系统，采用Django框架，Hadoop，Spark，spider爬虫，Mysql，echarts图表，智能推荐算法等技术，前台系统 ：首页、用户注册，登录，个人中心管理，中国景点推荐、旅游资讯、收藏，评分，评论，个人中心等功能，后台管理系统 ：首页，用户管理，中国景点管理，景点数据爬虫更新，个人中心管理，数据分析可视化看板等。

This project is used for tracking lineage when using spark. Our team is aimed at enhancing the ability of column relation during logical plan analysis.Spark列级血缘(字段血缘)关系处理。

理解机（英文名：Liga）：是用于调用ML模型的Spark SQL扩展框架

基于Hadoop和Spark和Flink的大数据可视化分析和协同过滤推荐系统 各类的都有，创作不易，拒绝白嫖

这是一个Spark项目，使用了修改过的亚马逊电商数据集，该数据集在推荐系统领域具有知名度。以电商网站真实业务数据架构为基础，构建了一套一体化的电商推荐系统。该系统包含离线推荐与实时推荐体系，综合运用了协同过滤算法和基于内容的推荐方法，以提供混合推荐。项目涵盖了前端应用、后台服务、算法设计实现、平台部署等多方面的业务实现。

本项目是一个全栈闭环系统，我们有用作数据可视化的web系统，然后用flume-kafaka-flume进行日志的读取，在hive设计数仓，编写spark代码进行数仓表之间的转化以及ads层表到mysql的迁移，使用azkaban进行定时任务的调度，使用技术：Java/Scala，Hadoop、Spark、Hive、Kafka、Flume、Azkaban， Echart等

基于SparkStreaming的实时项目

spark大数据框架的基本使用，用spark分析数据，数据类型为Excel或者Mysql数据。

本项目基于Spark_sql进行数据清洗，通过echarts进行数据可视化，此处为SSM的web后端项目代码。

基于spark的离线、实时电商推荐系统，提供前端展示

项目简介 大学生大数据课程实训项目 本项目使用 Hive、Pyspark、Hadoop 和 Zeppelin 等大数据技术，对 Yelp 开源数据集进行数据分析。该数据集包含用户评论、商户信息和评分等数据，旨在挖掘出用户行为、商户趋势及潜在的商业洞察

Spark相关学习源码 - spark-core - spark-sql