markwhitey / SchoolBigDataAnalysis
此项目是对大学生的一卡通消费数据、图书借阅记录和图书馆门禁数据在spark集群的大数据框架环境之下进行聚类、关联分析,分析出学生的消费水平、生活规律、学习强度等聚类结果,以及将聚类结果进行FPGrowth关联分析得出学生聚类之间存在的关联性,此项目是使用scala语言,利用sparkSQL集合hive进行大数据分析
☆60Updated last month
Related projects ⓘ
Alternatives and complementary repositories for SchoolBigDataAnalysis
- 一个简单的Hive项目,使用了Sqoop、Hadoop、Hive、MySQL,对电商数据进行分析☆45Updated 5 years ago
- 使用Hadoop、Spark等实现的大数据平台项目☆22Updated 2 years ago
- 基于Spark2.2新闻网大数据实时系统项目☆61Updated 5 years ago
- 大数据竞赛项目实战, 内容涵盖: Kaggle、阿里天池大数据、腾讯大数据、京东大数据、DataCastle大数据竞赛等等☆58Updated 5 years ago
- 拉勾网+BOSS直聘网招聘信息大数据分析项目_数据获取+数据清洗+数据分析+数据可视化☆154Updated 2 years ago
- 最好的大数据项目。《Titan数据运营系统》,本项目是一个全栈闭环系统,我们有用作数据可视化的web系统,然后用flume-kafaka-flume进行日志的读取,在hive设计数仓,编写spark代码进行数仓表之间的转化以及ads层表到mysql的迁移,使用azkaban…☆117Updated 3 years ago
- 大数据项目实战之基于Spark2.X的新闻话题的实时统计分析☆25Updated 2 years ago
- 基于spark的外卖大数据平台分析系统☆41Updated 5 years ago
- 模拟电商系统上线运行一段时间后,根据收集到大量的用户行为数据,利用大数据技术(Flink)进行深入挖掘和分析,进而得到感兴趣的商业指标并增强对风险的控制。 整体可以分为用户行为习惯数据和业务行为数据两大类。用户的行为习惯数据包括了用户的登录方式、上线的时间点及时长、点击和浏…☆110Updated 4 years ago
- 大数据离线项目之:BI上报(Hadoop、Hbase、Hive、flume、sqoop)☆13Updated 2 years ago
- 电商大数据项目-推荐系统(java和scala语言)☆197Updated last year
- Spark大型项目实战:电商用户行为分析大数据平台\Spark大型项目实战:电商用户行为分析大数据平台(史上第一套高端大数据项目实战课程)☆27Updated last year
- 大数据项目之用户上网行为分析☆59Updated last year
- 电商大数据分析平台——静态页面模板☆77Updated 4 years ago
- Spark电影数据分析实战,利用spark开发针对用户观影等历史行为数据进行采集、分析和展示☆19Updated 3 years ago
- 电商平台数据仓库搭建☆122Updated 2 years ago
- 实现了一整套电商数仓的搭建,包括数据采集平台的搭建,将用户的行为数据分为四层分别分层搭建,并实现业务数据库的分层搭建,针对数据仓库中的数据进行,留存、转化率、复购率、GMV、活跃等报表分析,使用当下主流程数的框架,这个项目采用Apache版本的框架实现,后续会上传CDH版本…☆48Updated 2 years ago
- 基于SparkSQL的电影分析项目实战☆39Updated 4 years ago
- 基于flume+kafka+HBase+spark+ElasticSearch的用户轨迹查询大数据开发项目☆109Updated 2 years ago
- 本项目旨在建立一个基于大数据处理的大学生就业方向分析预测系统,通过爬虫技术获取各大公司和著名招聘网站的大量招聘信息,然后将获取的数据进行清洗分类后储存在数据库中,最后从大学生的就业角度出发,通过算法分析数据,建立一个帮助大学生明确就业方向与社会需求的平台☆96Updated 6 years ago
- 大数据实战——商品推荐系统(Spark、Scala、MongoDB)☆94Updated last year
- [毕业设计] 承接毕业设计系统讲解+调试 承接Java SpringBoot项目和大数据部署与运行问题排查;联系微信bq2323599883☆344Updated 6 months ago
- spark大数据大型电商项目☆12Updated 4 years ago
- 基于Spark企业级用户画像项目☆109Updated last year
- 大数据实习hdfs+flume+kafka+spark+hbase+hive项目☆32Updated 7 years ago
- 基于hadoop生态搭建的电商数据仓库,整体功能架构包含数据采集、数仓搭建、数据导出、数据可视化等☆50Updated 2 years ago
- 大型电商网站session大数据分析实战项目☆17Updated 2 years ago
- 大数据相关框架实战项目(Hadoop, Spark, Storm, Flink)☆307Updated 2 years ago
- 基于spark、hive等大数据分布式工具的京东平台手机商品分析项目☆13Updated 2 years ago
- 电信大数据项目实战☆12Updated 5 years ago