JRhuang-96 / offline-hadoopLinks
Hadoop离线计算. 使用hadoop MR 进行数据清洗,再使用shell 脚本执行hive 进行数据统计,维度分析
☆11Updated 7 years ago
Alternatives and similar repositories for offline-hadoop
Users that are interested in offline-hadoop are comparing it to the libraries listed below
Sorting:
- 大数据招聘信息分析平台☆46Updated 9 years ago
- 实现了一整套电商数仓的搭建，包括数据采集平台的搭建，将用户的行为数据分为四层分别分层搭建，并实现业务数据库的分层搭建，针对数据仓库中的数据进行，留存、转化率、复购率、GMV、活跃等报表分析，使用当下主流程数的框架，这个项目采用Apache版本的框架实现，后续会上传CDH版本…☆57Updated 3 years ago
- 模拟电商系统上线运行一段时间后，根据收集到大量的用户行为数据，利用大数据技术（Flink）进行深入挖掘和分析，进而得到感兴趣的商业指标并增强对风险的控制。 整体可以分为用户行为习惯数据和业务行为数据两大类。用户的行为习惯数据包括了用户的登录方式、上线的时间点及时长、点击和浏…☆138Updated 5 years ago
- spark tutorial for big data mining。包括app流量运营分析、als推荐、smote样本采样、RFM客户价值分群、AHP层次分析客户价值得分、手机定位数据商圈挖掘、马尔可夫智能邮件预测、时序预测、关联规则、推荐电影好友等。☆40Updated 3 years ago
- Spark混合推荐系统大数据监控平台☆11Updated 7 years ago
- 论坛日志分析系统清洗程序(包含IP规则库，UDF开发，MapReduce程序，日志数据)☆33Updated 7 years ago
- Spark中实现用户画像系统价值度、忠诚度 、流失预警、活跃度等模型☆69Updated 8 years ago
- 基于spark-ml,spark-mllib,spark-streaming的推荐算法实现☆96Updated 6 years ago
- 基于spark的外卖大数据平台分析系统☆47Updated 7 years ago
- 电商大数据项目-推荐系统(java和scala语言)☆204Updated 2 years ago
- 一个简单的Hive项目，使用了Sqoop、Hadoop、Hive、MySQL，对电商数据进行分析☆55Updated 7 years ago
- hbase + spark 实现常用推 荐算法（主要用于精准广告投放和推荐系统）☆69Updated 9 years ago
- 大数据建模分析平台☆67Updated 7 years ago
- 基于Flink流处理的动态实时亿级全端用户画像系统可视化界面☆36Updated 3 years ago
- 大数据企业实训项目：基于SpringMVC+Spring+HBase+Maven搭建的Hadoop分布式云盘系统。使用Hadoop HDFS作为文件存储系统、HBase作为数据存储仓库，采用SpringMVC+Spring框架实现，包括用户注册与登录、我的网盘、关注用户、我…☆140Updated 7 years ago
- spark流式计算电商商品关注度+推荐系统/关联系统☆14Updated 8 years ago
- 车联网智能分析系统☆54Updated 8 years ago
- 基于spark streaming+flume+kafka+hbase的实时日志处理分析系统(分为控制台版本和基于springboot、Echarts等的Web UI可视化版本)☆39Updated 2 years ago
- 信托数据仓库及商业智能☆32Updated 7 years ago
- 电商+大数据+spark机器学习☆17Updated 8 years ago
- 使用Storm实时处理交通大数据（数据源：kafka，集群管理：zookeeper）☆51Updated 3 years ago
- 基于 Spark Streaming + ALS 的餐饮推荐系统☆87Updated 7 years ago
- 流程化 机器学习框架 基于 scala java语言 ,一站式自动机器学习平台 ,主要包括数据分析 特征工程 ，机器模型，自动部署，超参数优化，模型自动优化，自动扩容分配创建功能，类似第四范式、阿里PAI平台、google autoMl、亚马逊SageMaker☆66Updated 7 years ago
- 关于 HDFS，Yarn，MapReduce，HBase，Hive，Pig，Sqoop，Flume，Zookeeper，MemCached，Redis，Storm，Scala，Spark，Flink 等大数据框架的学习笔记☆78Updated 6 years ago
- 基于Spark2.2新闻网大数据实时系统项目☆61Updated 6 years ago
- 快速采集清洗，任务管理，实时流和批处理数据分析，数据可视化展现，快速数据模板开发，ETL工具集、数据科学等。是轻量级的一站式的大数据平台。帮用户快速搭建CDP客户数据平台，实现对移动端数据分析、用户行为分析、用户标签画像和在线营销。完美兼容神策埋点SDK、友盟埋点SDK和其…☆72Updated 2 years ago
- 基于分布式的云笔记（参考某道云笔记），数据存储在redis与hbase中☆98Updated 8 years ago
- 基于hadoop生态搭建的电商数据仓库，整体功能架构包含数据采集、数仓搭建、数据导出、数据可视化等☆63Updated 3 years ago
- 基于flume+kafka+HBase+spark+ElasticSearch的用户轨迹查询大数据开发项目☆122Updated 3 years ago
- 新闻推荐系统☆281Updated 7 years ago