wang1365 / spark-trafficLinks
使用Spark批量处理离线交通大数据
☆15Updated 7 years ago
Alternatives and similar repositories for spark-traffic
Users that are interested in spark-traffic are comparing it to the libraries listed below
Sorting:
- 使用Storm实时处理交通大数据（数据源：kafka，集群管理：zookeeper）☆51Updated 2 years ago
- 使用SpringBoot开发的基于HBASE的大数据存储分布式云计算笔记(后端)☆34Updated 6 years ago
- 京东商品推荐系统-数据爬虫☆18Updated 10 years ago
- 车联网智能分析系统☆53Updated 8 years ago
- 大数据企业实训项目：基于SpringMVC+Spring+HBase+Maven搭建的Hadoop分布式云盘系统。使用Hadoop HDFS作为文件存储系统、HBase作为数据存储仓库，采用SpringMVC+Spring框架实现，包括用户注册与登录、我的网盘、关注用户、我…☆141Updated 7 years ago
- 论坛日志分析系统清洗程序(包含IP规则库，UDF开发，MapReduce程序，日志数据)☆33Updated 7 years ago
- 开源p2p软件☆31Updated 8 years ago
- 天天基金网爬虫，可多ip节点部署，按ip节点动态调整并发数，可设置代理ip反爬，定时爬取，定时通过邮件反馈基金行情统计数据☆25Updated 2 years ago
- 基于Spring Cloud Alibaba实现分布式广告系统☆48Updated 3 years ago
- 面向学校、学院、老师的网盘,存储个人文件资源☆17Updated 7 years ago
- 整合netty的一个nio消息服务器，封装了请求、响应、广播消息，定义了线程模型，实现了客户端与服务器及服务器与服务器间的通讯☆26Updated 10 years ago
- 基于JAVA NIO 的轻量级消息传输框架。主要功能包括：文本消息传输、二进制文件传输、文本及二进制混合传输、消息的自定义实现加密传输算法、同步或异步传输、客户端、服务端框架内置心跳监听、服务端认证、支持网络断线客户端自动重连。☆44Updated 8 years ago
- 移动用户行为统计系统，服务器端的数据采集分析，参考开源的cobub razor的设计☆36Updated 8 years ago
- 线程池、任务、任务组、任务池，定时任务的类库☆23Updated last month
- 大数据平台相关代码（ES/Hive/Hadoop/hdfs/hbase）☆75Updated 3 years ago
- 社交类app后端☆13Updated 9 years ago
- zk + netty 实现集群节点文件同步服务☆32Updated 9 years ago
- java爬虫，反爬虫策略、ETL清洗数据，以及spark离线和实时分析新闻并存入ES☆20Updated 6 years ago
- 飞趣社区做了快两年了，最近也想不到什么新功能去做了，于是想起了开源的事情，我一个人开发终究不能让这个社区走向前方，于是我下定决心开源，开源之前我也蛮纠结的，就像是把自己辛辛苦苦做的东西送给别人了，但是转念一想，也许这会为我的社区向前发展提供助力，不同人的思想或许会激发灵感，…☆42Updated 3 years ago
- 数据平台(DataPlateform)，最初的设计想法是：当今大数据横行，我们也不能落后。所以就想着写一个这样的平台系统。此项目集爬虫、搜索、Hadoop、Dwr推送、Quartz定时任务于一体的平台，其目的是想通过抓取互联网数据，通过大数据推测人或者某一事物的下一行为。C…☆18Updated 8 years ago
- 微云盘，高仿百度云；使用技术jdbc/servlet/jquery MVC三层架构；同时封装了大量通用工具☆35Updated 5 years ago
- 处理海量数据的excel/dbf/csv文件，包括文件的读取和写入☆13Updated 5 years ago
- Utmost是一款基于Java的面向业务配置平台,能够迅速搭建企业级应用,集成了业界优秀的开源框架,内置任务调度,多维权限管理,规则引擎,工作流引擎,系统监控,ETL,报表,打印等企业常用组件.拥有一流的用户体验和丰富的界面展现.☆25Updated 8 years ago
- 这是一个基于Hadoop的视频转码系统，首先视频在本地进行分割成64M左右大小，然后从本地文件夹中上传到HDFS中，然后启动一个MapReduce作业，每一个Map作业下载一个视频到本地，进行转码到在上传到HDFS中，没有reduce过程，最后客户端自行下载这些转码后的分片…☆29Updated 11 years ago
- java快速上手的网络IO框架，基于netty， google protobuf 数据传输协议，disruptor队列，zookeeper服务注册发现，支持心跳检测，断线重连，tcp连接池，注解分发消息。用于服务器间长连接通讯，可搭建分布式服务器以及分布式游戏。☆20Updated 3 years ago
- SpringMVC+mybaits+Maven+anguljs+html5+mysql+nodejs+BO报表 集成的大数据地产分析项目☆27Updated 9 years ago
- 大数据招聘信息分析平台☆45Updated 9 years ago
- 分布式小文件存储系统☆24Updated 8 years ago
- 基于spark、mahout和spring boot构建的推荐系统☆130Updated 3 weeks ago
- 各大电商网站数据抓取分析☆32Updated 12 years ago