wang1365 / spark-traffic
使用Spark批量处理离线交通大数据
☆15Updated 7 years ago
Alternatives and similar repositories for spark-traffic:
Users that are interested in spark-traffic are comparing it to the libraries listed below
- 使用Storm实时处理交通大数据(数据源:kafka,集群管理:zookeeper)☆51Updated 2 years ago
- 大数据平台相关代码(ES/Hive/Hadoop/hdfs/hbase)☆74Updated 2 years ago
- 使用SpringBoot开发的基于HBASE的大数据存储分布式云计算笔记(后端)☆34Updated 6 years ago
- 这是一个基于Hadoop的视频转码系统,首先视频在本地进行分割成64M左右大小,然后从本地文件夹中上传到HDFS中,然后启动一个MapReduce作业,每一个Map作业下载一个视频到本地,进行转码到在上传到HDFS中,没有reduce过程,最后客户端自行下载这些转码后的分片…☆26Updated 10 years ago
- 车联网智能分析系统☆52Updated 8 years ago
- 大数据招聘信息分析平台☆42Updated 9 years ago
- 处理海量数据的excel/dbf/csv文件,包括文件的读取和写入☆13Updated 5 years ago
- 基于Hadoop和HBase的大规模海量数据去重☆29Updated 6 years ago
- JEECMS是一款基于JAVA技术研发的站群管理系统。 1、支持大规模网站群管理; 2、 跨站全文检索、数据共享; 3、微官网/手机网站同步建设; 4、高效二次开发的插件化管理 5、支持可视化模板制作;☆26Updated 8 years ago
- 大数据生态圈学习☆18Updated 2 years ago
- 关于通过百度地图API采集POI数据,并存储到HBase的项目。☆24Updated 9 years ago
- java爬虫,反爬虫策略、ETL清洗数据,以及spark离线和实时分析新闻并存入ES☆20Updated 6 years ago
- 论坛日志分析系统清洗程序(包含IP规则库,UDF开发,MapReduce程序,日志数据)☆33Updated 6 years ago
- 调用第三方接口的框架,包含缓存重试策略。☆13Updated 2 years ago
- hadoop flume hbase kafka storm;读取kafka数据=》storm实时处理(分割字符,统计字符)=》写入hdfs☆21Updated 6 years ago
- 重写网盘系统,基于SpringMVC、MySQL、Redis,计划同时完成web端和Android端☆49Updated 2 years ago
- 移动用户行为统计系统,服务器端的数据采集分析,参考开源的cobub razor的设计☆36Updated 7 years ago
- spark流式计算电商商品关注度+推荐系统/关联系统☆15Updated 7 years ago
- hbase + spark 实现常用推荐算法(主要用于精准广告投放和推荐系统)☆66Updated 8 years ago
- SpringMVC+mybaits+Maven+anguljs+html5+mysql+nodejs+BO报表 集成的大数据地产分析项目☆26Updated 9 years ago
- 基于hadoop,利用ssh框架实现hdfs网盘☆27Updated 12 years ago
- SpringBoot+Solr + webmagic JD商品爬取数据,放入solr中做搜索,学习下solr使用☆44Updated 7 years ago
- 多租户架构实现企业进销存☆20Updated 8 years ago
- 基于springboot+vue 整合shiro的cms解决方案☆53Updated 7 years ago
- 用java实现的贝叶斯分类算法。用于大数据的分类。☆41Updated 9 years ago
- 使用spark对hive、hbase、ES的读写, 实现一次配置可对不同数据库进行导入导出,并对ES、hbase进行封装☆32Updated 7 years ago
- 各大电商网站数据抓取分析☆33Updated 11 years ago
- 大数据实习hdfs+flume+kafka+spark+hbase+hive项目☆33Updated 7 years ago
- Java JUC 学习项目 包括各种并发多线程的高级使用。java自带多线程并发锁高级应用☆14Updated 6 years ago
- phoenix 操作hbase和springboot的整合☆11Updated 7 years ago