harvardfly / Spark-for-PythonLinks
基于python3使用spark的统计分析，涵盖spark的几大模块，主要有spark core、spark mllib、spark sql及spark streaming等的python实现
☆32Updated 6 years ago
Alternatives and similar repositories for Spark-for-Python
Users that are interested in Spark-for-Python are comparing it to the libraries listed below
Sorting:
- 基于 Spark Streaming + ALS 的餐饮推荐系统☆87Updated 6 years ago
- 基于Django Restframework的异常检测系统，分析服务为Spark SQL和Spark Mllib，每天通过自动跑定时job从全量数据中导入正常数据供算法模型训☆50Updated 2 years ago
- Spark中实现用户画像系统价值度、忠诚度、流失预警、活跃度等模型☆66Updated 8 years ago
- 数据挖掘，参加Kaggle的一个预测广告点击率的竞赛☆28Updated 9 years ago
- 基于SparkMLLib实现的商品推荐功能，包括：基于用户的协同过滤，基于物品的协同过滤，基于ALS交替最小二乘的协同过滤。☆38Updated 6 years ago
- 基于Spark的行为日志分析系统☆16Updated 3 years ago
- 基于SparkSQL的电影分析项目实战☆40Updated 4 years ago
- 模拟电商系统上线运行一段时间后，根据收集到大量的用户行为数据，利用大数据技术（Flink）进行深入挖掘和分析，进而得到感兴趣的商业指标并增强对风险的控制。 整体可以分为用户行为习惯数据和业务行为数据两大类。用户的行为习惯数据包括了用户的登录方式、上线的时间点及时长、点击和浏…☆131Updated 5 years ago
- hbase + spark 实现常用推荐算法（主要用于精准广告投放和推荐系统）☆68Updated 9 years ago
- csdn用户画像的源码☆20Updated 8 years ago
- 使用Spark GraphX基于PageRank算法构建一个仿微博用户好友的分布式推荐系统。☆24Updated 6 years ago
- 第二届全国大数据比赛-个性化新闻推荐☆70Updated 10 years ago
- 基于tornado实现的小型推荐系统的web应用，使用mysql数据库，基于用户的协同过滤算法以及基于内容的分类算法做推荐。☆20Updated 8 years ago
- spark自学手册，包含了例如spark core、spark sql、spark streaming、spark-kafka、delta-lake，以及scala基础练习，还有一些例如master、shuffle源码分析，总结及翻译。☆18Updated 2 years ago
- 基于Django和Hadoop集群进行的大数据分析平台☆68Updated 7 years ago
- 流程化 机器学习框架 基于 scala java语言 ,一站式自动机器学习平台 ,主要包括数据分析 特征工程 ，机器模型，自动部署，超参数优化，模型自动优化，自动扩容分配创建功能，类似第四范式、阿里PAI平台、google autoMl、亚马逊SageMaker☆65Updated 7 years ago
- 基于spark-ml,spark-mllib,spark-streaming的推荐算法实现☆96Updated 6 years ago
- 目前任职大数据开发工作，日常开发使用Python作为数据分析工具，在此比较常用的方面知识或难点总结、整理出来，以此分享，谢谢！☆18Updated 7 years ago
- 信用卡违约率分析☆19Updated 6 years ago
- 一个简单的Hive项目，使用了Sqoop、Hadoop、Hive、MySQL，对电商数据进行分析☆52Updated 6 years ago
- 基于用户行为的用户画像项目☆75Updated 7 years ago
- 参与针对于2019-nCoV数据可 视化预测项目，后端完全使用ElasticSearch集群/Redis缓存，利用Flask提供API Server，利用前端/中后/前台的接口配合完成新型冠状病毒的疫情发展的相关信息可视化以及预测，方便观察疫情发展情况，并结合机器学习模型对疫…☆23Updated 5 years ago
- 使用 python 操作大数据的各种组件☆67Updated 2 years ago
- 此项目是对大学生的一卡通消费数据、图书借阅记录和图书馆门禁数据在spark集群的大数据框架环境之下进行聚类、关联分析，分析出学生的消费水平、生活规律、学习强度等聚类结果，以及将聚类结果进行FPGrowth关联分析得出学生聚类之间存在的关联性，此项目是使用scala语言，利用…☆64Updated 10 months ago
- 唯品会用户购买行为预测☆29Updated 7 years ago
- 《Spark 快速大数据分析》学习笔记☆43Updated last year
- 基于用户行为的推荐算法大赛---第四名（临兵斗列）☆41Updated 8 years ago
- 基于RFM和决策树模型构建专家推荐系统。融合了RFM模型和决策树模型，结合专业运营人员的业务经营，发掘潜在用户，进行推荐营销召回。☆88Updated last year
- 机器学习算法模型的知识图谱（思维导图）构建☆64Updated 6 years ago
- dw etl 工具 mysql 增量、全量抽取 to hive. 合并 hive 数据表, 等数据平台清洗工具☆9Updated 8 years ago