Ksssssssss / flinkLinks
并发消费kafka数据并写入hdfs。 基于flink统计实时ip热点统计
☆11Updated last year
Alternatives and similar repositories for flink
Users that are interested in flink are comparing it to the libraries listed below
Sorting:
- 大数据组件学习;包括dataflow,spring cloud stream;elasticsearch;flink;spark;kafka;phoenix;Hive;Hbase;☆23Updated 3 years ago
- 使用flink快速构建实时监控系统报警☆19Updated 5 years ago
- flink读取kafka数据,按照业务逻辑计算完之后以数据流的方式快速导入到redis集群,并实现了将计算结果以流的方式快速导入MySQL库中。☆15Updated 6 years ago
- 基于DataX的通用数据同步微服务,一个Restful接口搞定所有通用数据同步☆53Updated 3 years ago
- flink实时处理kafka传来的数据通过连接池技术写入hbase☆96Updated 3 years ago
- 基于Flink流处理的动态实时亿级全端用户画像系统可视化界面☆34Updated 2 years ago
- 基于flink的推荐系统,实时获取kafka数据进行数据清洗,离线计算进行文件读取(文件,mongodb,hbase)运用协同过滤算法进行计算得出推荐数据☆20Updated 3 years ago
- 【bigdata】spirngboot+spark 脚手架+相关实例☆22Updated 3 years ago
- 基于canal/kafka conenct的mysql/oracle数据实时同步、flink rest api、flink sql以及udf☆50Updated 2 years ago
- 此项目主要应用于数据中台或数据平台的数据总线,支持直接实时监听MySQL、MongoDB、PostgreSQL、Oracle、SQL Server、Db2和Cassandra等数据库的数据变更。☆62Updated last year
- kafka传数据到Flink存储到mysql之Flink使用SQL语句聚合数据流(设置时间窗口,EventTime)☆32Updated 7 years ago
- 使用Storm实时处理交通大数据(数据源:kafka,集群管理:zookeeper)☆52Updated 2 years ago
- 通过 SQL 查询 elasticsearch:集成插件elasticsearch-sql,封装查询API提供Restful接口,直接将字符串sql作为参数就可以得到json对象形式的返回结果。☆44Updated 3 years ago
- flink应用相关实例☆19Updated 6 years ago
- MySQL增量数据实时同步到HDFS/Hive☆11Updated 6 years ago
- FlinkTutorial 专注大数据Flink流试处理技术。从基础入门、概念、原理、实战、性能调优、源码解析等内容,使用Java开发,同时含有Scala部分核心代码。欢迎关注我的博客及github。☆70Updated 3 years ago
- Flink 案例开发数据清洗、数据报表☆54Updated 3 years ago
- 元数据管理系统☆18Updated 7 years ago
- ☆12Updated 6 years ago
- 基于canal.deployer-1.1.1-SNAPSHOT.tar,canal连接kafka,springboot消费kafka数据入hbase和ElasticSearch☆14Updated 6 years ago
- 基于Hadoop和HBase的大规模海量数据去重☆30Updated 7 years ago
- Spark混合推荐系统大数据监控平台☆12Updated 7 years ago
- Flink 案例代码☆43Updated 3 years ago
- 大数据平台相关代码(ES/Hive/Hadoop/hdfs/hbase)☆75Updated 2 years ago
- 使用spark对hive、hbase、ES的读写, 实现一次配置可对不同数据库进行导入导出,并对ES、hbase进行封装☆33Updated 8 years ago
- 利用SpringBoot整合HBase,基于HBaseJavaAPI的二次封装,可以直接引用jar包使用,目前测试已支持HBase1.1.2和HBase1.4.6以及HBase2.0.2三个版本。☆16Updated 9 months ago
- Java JUC 学习项目 包括各种并发多线程的高级使用。java自带多线程并发锁高级应用☆15Updated 7 years ago
- ETL Tools 数据抽取-转换-加载工具☆78Updated 8 years ago
- 金融风控系统(springboot+drools)、flink流计算、mongodb☆162Updated 3 years ago
- 大数据学习:各种计算框架:☆11Updated 3 years ago