zunzhuowei / qs-hadoop
大数据生态圈学习
☆18Updated 2 years ago
Related projects ⓘ
Alternatives and complementary repositories for qs-hadoop
- 个人学习xxl-job源码 核心部分加上了中文注释☆16Updated 6 years ago
- 用于数据迁移、缓存预热,springboot架构。支持数据区间分割、动态调整线程池配置、任务进度实时查看等特性☆45Updated 7 years ago
- 基于spark streaming+flume+kafka+hbase的实时日志处理分析系统(分为控制台版本和基于springboot、Echarts等的Web UI可视化版本)☆36Updated last year
- 大型分布式系统实时监控平台☆28Updated last year
- 大数据招聘信息分析平台☆40Updated 8 years ago
- hadoop flume hbase kafka storm;读取kafka数据=》storm实时处理(分割字符,统计字符)=》写入hdfs☆21Updated 6 years ago
- springboot项目使用脚手架,集成redis、mysql、pg,hbase、elasticsearch、kafka等常用组件功能☆19Updated 2 years ago
- 大数据平台相关代码(ES/Hive/Hadoop/hdfs/hbase)☆74Updated 2 years ago
- 在公司接了一个任务,完成一个项目数据同步的模块。要求是不能操作项目的数据库。怕操作不当,数据丢失。所以想到的方案是使用log4jdbc记录数据源的SQL语句到日志文件。然后按行读取日志文件中的数据,记录读取的Point,以便下次继续读取。读取的数据进入bigqueue队列,…☆12Updated 7 years ago
- kafka传数据到Flink存储到mysql之Flink使用SQL语句聚合数据流(设置时间窗口,EventTime)☆31Updated 6 years ago
- Java JUC 学习项目 包括各种并发多线程的高级使用。java自带多线程并发锁高级应用☆14Updated 6 years ago
- 论坛日志分析系统清洗程序(包含IP规则库,UDF开发,MapReduce程序,日志数据)☆33Updated 6 years ago
- 蓝泰源大数据基础平台☆17Updated 6 years ago
- 基于Hadoop和HBase的大规模海量数据去重☆29Updated 6 years ago
- 大数据平台自助管理系统☆11Updated 6 years ago
- 【易车】- Spark、flink、HBase、Hive、flume集成了一些Hadoop的原生api的一些demo(如HDFS、MapReduce:目前就这两个);同时测试一些异常功能☆16Updated 5 years ago
- java 实现线程池☆15Updated 7 years ago
- 电商+大数据+spark机器学习☆16Updated 6 years ago
- Storm Kafka 流数据 处理系统☆20Updated 6 years ago
- DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括 MySQL、Oracle、HDFS、Hive、OceanBase、HBase、OTS、ODPS 等各种异构数据源之间高效的数据同步功能。☆23Updated 3 years ago
- 使用Storm实时处理交通大数据(数据源:kafka,集群管理:zookeeper)☆52Updated last year
- java方向书籍的学习,包括《java编程思想》,《实战java虚拟机》(作者:葛一鸣)《java高并发》(作者:葛一鸣)。☆17Updated 6 years ago
- ☆12Updated last year
- xxl-job-admin 任务调度平台 Spring Boot 版本[后台部分] ,统一改为rest接口☆37Updated 2 years ago
- poseidonX 是一个基于jstorm和flink的一体化实时计算服务平台☆55Updated 6 years ago
- phoenix 操作hbase和springboot的整合☆11Updated 6 years ago
- 基于springboot定义接口网关☆35Updated 7 years ago
- Streaming 相关项目☆15Updated 7 years ago