wang1365 / spark-traffic
使用Spark批量处理离线交通大数据
☆15Updated 7 years ago
Alternatives and similar repositories for spark-traffic:
Users that are interested in spark-traffic are comparing it to the libraries listed below
- 使用Storm实时处理交通大数据(数据源:kafka,集群管理:zookeeper)☆51Updated 2 years ago
- 使用SpringBoot开发的基于HBASE的大数据存储分布式云计算笔记(后端)☆33Updated 5 years ago
- 大数据平台相关代码(ES/Hive/Hadoop/hdfs/hbase)☆74Updated 2 years ago
- 大数据生态圈学习☆18Updated 2 years ago
- 广告推荐系统☆20Updated 10 years ago
- 基于Hadoop和HBase的大规模海量数据去重☆29Updated 6 years ago
- 项目实战:Hadoop生态圈☆31Updated 6 years ago
- 论坛日志分析系统清洗程序(包含IP规则库,UDF开发,MapReduce程序,日志数据)☆33Updated 6 years ago
- 分布式小文件存储系统☆23Updated 8 years ago
- 京东商品推荐系统-数据爬虫☆18Updated 9 years ago
- 这是一个基于Hadoop的视频转码系统,首先视频在本地进行分割成64M左右大小,然后从本地文件夹中上传到HDFS中,然后启动一个MapReduce作业,每一个Map作业下载一个视频到本地,进行转码到在上传到HDFS中,没有reduce过程,最后客户端自行下载这些转码后的分片…☆26Updated 10 years ago
- phoenix 操作hbase和springboot的整合☆11Updated 7 years ago
- java爬虫,反爬虫策略、ETL清洗数据,以及spark离线和实时分析新闻并存入ES☆20Updated 6 years ago
- 基于flink的推荐系统,实时获取kafka数据进行数据清洗,离线计算进行文件读取(文件,mongodb,hbase)运用协同过滤算法进行计算得出推荐数据☆18Updated 2 years ago
- 大数据招聘信息分析平台☆42Updated 8 years ago
- 分布式大数据SQL查询可视化界面!☆68Updated 9 years ago
- 以知乎日报为数据源,全流程实践一个机器学习过程,从数据获取到数据分析,对知乎日报进行聚类、分类,并可视化这一过程☆17Updated 8 years ago
- spark流式计算电商商品关注度+推荐系统/关联系统☆15Updated 7 years ago
- 使用spark对hive、hbase、ES的读写, 实现一次配置可对不同数据库进行导入导出,并对ES、hbase进行封装☆32Updated 7 years ago
- 用java实现的贝叶斯分类算法。用于大数据的分类。☆41Updated 9 years ago
- 各大电商网站数据抓取分析☆32Updated 11 years ago
- 大数据实习hdfs+flume+kafka+spark+hbase+hive项目☆32Updated 7 years ago
- SpringMVC+mybaits+Maven+anguljs+html5+mysql+nodejs+BO报表 集成的大数据地产分析项目☆26Updated 8 years ago
- 车联网智能分析系统☆51Updated 7 years ago
- 用于数据迁移、缓存预热,springboot架构。支持数据区间分割、动态调整线程池配置、任务进度实时查看等特性☆45Updated 7 years ago
- Zipkin 是一款Twitter开源的分布式实时数据追踪系统(Distributed Tracking System),此库是为国内著名服务治理框架dubbo编写的zipkin instrument library,支持对dubbo调用的全链路实时调用数据统计与依赖分析。…☆20Updated 8 years ago
- hbase + spark 实现常用推荐算法(主要用于精准广告投放和推荐系统)☆65Updated 8 years ago
- 个性化推荐算法的通用处理框架,基于Mahout和Lucene☆18Updated 9 years ago
- Spark混合推荐系统大数据监控平台☆11Updated 6 years ago
- 开源p2p软件☆31Updated 8 years ago