xuanbo / flink-cdc
CDC(变化数据捕获)实时同步方案,秒级延迟。
☆61Updated 3 years ago
Alternatives and similar repositories for flink-cdc:
Users that are interested in flink-cdc are comparing it to the libraries listed below
- 分享一些在工作中的大数据实战案例,包括flink、kafka、hadoop、presto等等。欢迎大家关注我的公众号【大数据技术与应用实战】,一起成长。☆263Updated last year
- 针对datax进行2次开发,实现data 以rpc的方式传递json配置调用推数服务,同时修复datax多处bug。项目中也引入nacos作为服务的配置中心和注册中心; 同时项目内扩展了kafkawriter,rabbitmqwriter,esreader,hiveread…☆68Updated 2 years ago
- ☆49Updated 3 years ago
- The java sdk for operating Apache Dolphinscheduler.☆62Updated 2 weeks ago
- ☆69Updated 2 years ago
- 数据采集平台zdh,etl 处理服务☆70Updated this week
- datax数据同步elasticsearch的reader和writer插件,支持一对多的扁平数据转换成es的嵌套对象,也支持嵌套对象的读取和ognl表达式过滤,理论上可以无限嵌套。☆88Updated last year
- 运行时动态注册切换数据源,自动生成SQL(DDL/DML/DQL),读写元数据,对比数据库结构差异。适配100+关系/非关系数据库。 常用于动态场景的底层支持,如:数据中台、可视化、低代码后台、工作流、自定义表单、异构数据库迁移同步、物联网车联网数据处理、数据清洗、运行时自…☆250Updated 2 weeks ago
- 大数据平台后端项目☆218Updated 2 weeks ago
- 基于插件架构的数据源服务,统一接口,可操作不同类型数据源☆46Updated 2 years ago
- 你知道的越多,你不知道的也越多。Java技术栈既广且深,我们需要打破不同知识点的壁垒,形成完整的知识图谱,完成从information到knowledge的升华。☆118Updated 2 years ago
- MyDataHarbor是一个致力于解决任意数据源到任意数据源的分布式、高扩展性、高性能、事务级的数据同步中间件。帮助用户可靠、快速、稳定的对海量数据进行准实时增量同步或者定时全量同步,主要定位是为实时交易系统服务,亦可用于大数 据的数据同步(ETL领域)。☆77Updated 6 months ago
- elasticsearch java highlevel rest client demo工程☆67Updated this week
- Flink 实时ETL案例☆46Updated 2 years ago
- Kettle实战100篇博文☆245Updated last year
- 🔥🔥🔥支持插件化、可视化的数据异构框架mykit-data开源啦!支持MySQL到MySQL、MySQL到Oracle、Oracle到MySQL、Oracle到Oracle的全量、增量数据同步。完全的插件化、可视化操作。通过日志最大限度的避免同步过程中的数据丢失。支持…☆183Updated last year
- Flink cdc 整库同步 & flink 代码 demo☆43Updated 5 months ago
- Real time data processing system based on flink and CEP☆248Updated 2 months ago
- mysql binlog同步工具☆133Updated last year
- 基于flink的电商实时数据分析、推荐、风控项目☆55Updated 2 years ago
- spring boot idempotent starter☆151Updated 2 months ago
- 将datax改成一个java服务包,支持单jvm同时运行多个实例,整合调度代码,提供api调用接口,可以直接集成到已有服务框架。☆36Updated 2 years ago
- 基于flink-cdc的数据同步工具,用于mysql同步至doris☆32Updated last year
- 数据建设与大数据技术知识体系,包含hadoop、hive、spark、flink主流框架和系列框架,数据中台、数据湖、数据治理、数仓建设、数据化转型等☆354Updated 2 weeks ago
- 此项目主要应用于数据中台或数据平台的数 据总线,支持直接实时监听MySQL、MongoDB、PostgreSQL、Oracle、SQL Server、Db2和Cassandra等数据库的数据变更。☆62Updated last year
- A distributed scheduling job framework supporting DAG workflow for big data and regular jobs, providing programmable job types across dif…☆150Updated last year
- Fire框架是由中通大数据自主研发并开源的、专门用于进行Spark和Flink任务开发的大数据框架,可节约70%以上的代码量。首创基于注解进行Spark和Flink任务开发,具备实时血缘、根因诊断、动态调优、参数热调整等众多平台化功能。Fire框架在中通内部每天处理数据量高…☆34Updated 8 months ago
- zhili数据平台 主要包含统一认证(zhili-auth)、元数据管理(zhili-metadata)、即席查询(zhili-adhoc)、数据服务(zhili-dataservice)、数据采集(zhili-collect)等子项目。☆56Updated 2 years ago
- dataService platform is a low-code platform, which only needs to write SQL to realize the development of API services, solve the unificat…☆110Updated last year
- 🔥轻量级Java规则引擎☆126Updated 9 months ago