markwhitey / SchoolBigDataAnalysis
此项目是对大学生的一卡通消费数据、图书借阅记录和图书馆门禁数据在spark集群的大数据框架环境之下进行聚类、关联分析,分析出学生的消费水平、生活规律、学习强度等聚类结果,以及将聚类结果进行FPGrowth关联分析得出学生聚类之间存在的关联性,此项目是使用scala语言,利用sparkSQL集合hive进行大数据分析
☆62Updated 5 months ago
Alternatives and similar repositories for SchoolBigDataAnalysis:
Users that are interested in SchoolBigDataAnalysis are comparing it to the libraries listed below
- 基于Spark2.2新闻网大数据实时系统项目☆60Updated 5 years ago
- 拉勾网+BOSS直聘网招聘信息大数据分析项目_数据获取+数据清洗+数据分析+数据可视化☆158Updated 2 years ago
- 使用Hadoop、Spark等实现的大数据平台项目☆25Updated 2 years ago
- 大数据竞赛项目实战, 内容涵盖: Kaggle、阿里天池大数据、腾讯大数据、京东大数据、DataCastle大数据竞赛等等☆58Updated 6 years ago
- 一个简单的Hive项目,使用了Sqoop、Hadoop、Hive、MySQL,对电商数据进行分析☆47Updated 6 years ago
- 最好的大数据项目。《Titan数据运营系统》,本项目是一个全栈闭环系统,我们有用作数据可视化的web系统,然后用flume-kafaka-flume进行日志的读取,在hive设计数仓,编写spark代码进行数仓表之间的转化以及ads层表到mysql的迁移,使用azkaban…☆125Updated 3 years ago
- 基于spark的外卖大数据平台分析系统☆43Updated 6 years ago
- 大数据项目实战之基于Spark2.X的新闻话题的实时统计分析☆27Updated 2 years ago
- 模拟电商系统上线运行一段时间后,根据收集到大量的用户行为数据,利用大数据技术(Flink)进行深入挖掘和分析,进而得到感兴趣的商业指标并增强对风险的控制。 整体可以分为用户行为习惯数据和业务行为数据两大类。用户的行为习惯数据包括了用户的登录方式、上线的时间点及时长、点击和浏…☆119Updated 4 years ago
- 基于Hadoop的视频收视率分析,毕设项目☆51Updated last month
- Spark大型项目实战:电商用户行为分析大数据平台\Spark大型项目实战:电商用户行为分析大数据平台(史上第一套高端大数据项目实战课程)☆30Updated last year
- spark大数据大型电商项目☆14Updated 4 years ago
- 本项目旨在建立一个基于大数据处理的大学生就业方向分析预测系统,通过爬虫技术获取各大公司和著名招聘网站的大量招聘信息,然后将获取的数据进行清洗分类后储存在数据库中,最后从大学生的就业角度出发,通过算法分析数据,建立一个帮助大学生明确就业方向与社会需求的平台☆103Updated 6 years ago
- 大数据项目之用户上网行为分析☆60Updated last year
- 基于spark、hive等大数据分布式工具的京东平台手机商品分析项目☆13Updated 3 years ago
- 电商大数据项目-推荐系统(java和scala语言)☆202Updated last year
- 基于flume+kafka+HBase+spark+ElasticSearch的用户轨迹查询大数据开发项目☆115Updated 2 years ago
- 数据挖掘可视化系统(Data Mining Visualization System)通过数据挖掘理论、机器学习算法以及数据可视化等信息技术,并基于 Flask 框架搭建 Web 服务器,实现数据挖掘可视化。☆99Updated 3 years ago
- 基于Spark企业级用户画像项目☆119Updated last year
- 尚硅谷大数据实战_电商用户行为分析(项目开发实战)学习,原始项目使用scala,自己尝试用java重写。也会结合官方文档,介绍一些api的用处。☆8Updated 3 years ago
- 1.本项目利用Hadoop处理高校无线定位大数据,有效地将位置信息应用于学生时空行为模式挖掘,建立基于精准位置信息的行为数据挖掘计算模型。 2.基于Hadoop计算平台,并实现对大数据进行可视化分析的Web系统。 3.利用一些合适的算法实现校园热点区域提取、学生异常轨迹探测…☆47Updated 2 years ago
- 大数据实习hdfs+flume+kafka+spark+hbase+hive项目☆33Updated 7 years ago
- 电商平台数据仓库搭建☆129Updated last month
- 基于spark的电商用户行为分析系统☆14Updated 2 years ago
- 大数据实战——商品推荐系统(Spark、Scala、MongoDB)☆102Updated 2 years ago
- 大数据离线项目之:BI上报(Hadoop、Hbase、Hive、flume、sqoop)☆13Updated 2 years ago
- 实现了一整套电商数仓的搭建,包括数据采集平台的搭建,将用户的行为数据分为四层分别分层搭建,并实现业务数 据库的分层搭建,针对数据仓库中的数据进行,留存、转化率、复购率、GMV、活跃等报表分析,使用当下主流程数的框架,这个项目采用Apache版本的框架实现,后续会上传CDH版本…☆51Updated 2 years ago
- Spark电影数据分析实战,利用spark开发针对用户观影等历史行为数据进行采集、分析和展示☆18Updated 4 years ago
- 本项目来源于企业级电商网站的大数据统计分析平台,该平台以 Spark 框架为核心,对电商网站的日志进行离线和实时分析☆16Updated 3 years ago
- 基于spark的商品 推荐系统☆41Updated 2 years ago