xuanbo / flink-cdcLinks
CDC（变化数据捕获）实时同步方案，秒级延迟。
☆63Updated 3 years ago
Alternatives and similar repositories for flink-cdc
Users that are interested in flink-cdc are comparing it to the libraries listed below
Sorting:
- 针对datax进行2次开发，实现data 以rpc的方式传递json配置调用推数服务，同时修复datax多处bug。项目中也引入nacos作为服务的配置中心和注册中心； 同时项目内扩展了kafkawriter，rabbitmqwriter，esreader，hiveread…☆69Updated 2 years ago
- 基于插件架构的数据源服务，统一接口，可操作不同类型数据源☆47Updated 2 years ago
- 大数据平台后端项目☆232Updated last month
- 分享一些在工作中的大数据实战案例，包括flink、kafka、hadoop、presto等等。欢迎大家关注我的公众号【大数据技术与应用实战】，一起成长。☆263Updated last year
- datax数据同步elasticsearch的reader和writer插件，支持一对多的扁平数据转换成es的嵌套对象，也支持嵌套对象的读取和ognl表达式过滤，理论上可以无限嵌套。☆88Updated last year
- ☆50Updated 3 years ago
- 从本地IDEA提交Flink/Spark任务到Yarn/k8s集群☆161Updated 3 years ago
- 运行时动态注册切换数据源，自动生成SQL(DDL/DML/DQL)，读写元数据，对比数据库结构差异。适配100+关系/非关系数据库。 常用于动态场景的底层支持,如:数据中台、可视化、低代码后台、工作流、自定义表单、异构数据库迁移同步、物联网车联网数据处理、数据清洗、运行时自…☆285Updated this week
- The java sdk for operating Apache Dolphinscheduler.☆70Updated 4 months ago
- mysql binlog同步工具☆133Updated 2 years ago
- Real time data processing system based on flink and CEP☆249Updated 6 months ago
- 早该知道的一种更高级的 transformer 自定义实现方法。☆31Updated 6 years ago
- Doris表和字段血缘项目☆80Updated last year
- Flink 实时ETL案例☆46Updated 2 years ago
- 大数据采集,抽取平台,zdh_web是zdh系列服务的可视化管理平台，包含数据采集,调度,权限,审批流,私域营销等模块☆516Updated this week
- MyDataHarbor是一个致力于解决任意数据源到任意数据源的分布式、高扩展性、高性能、事务级的数据同步中间件。帮助用户可靠、快速、稳定的对海量数据进行准实时增量同步或者定时全量同步，主要定位是为实时交易系统服务，亦可用于大数据的数据同步（ETL领域）。☆79Updated 10 months ago
- 数据建设与大数据技术知识体系，包含hadoop、hive、spark、flink主流框架和系列框架，数据中台、数据湖、数据治理、数仓建设、数据化转型等☆403Updated 3 months ago
- 京东RTF实时数据湖，是一个从底层重新构建的系统，解决了数据的接入、解析及清洗等ETL 过程，同时解决了传统离线模式达不到的实时性和流式实时数据做不到的数据清洗、还原，是一套大数据领域改革性的实时数据方案。RTF可以直接查询最新状态的数据，并且无需去重，可以让数据分析人员即…☆126Updated last year
- 基于flink-cdc的数据同步工具,用于mysql同步至doris☆31Updated last week
- 基于DataX的通用数据同步微服务，一个Restful接口搞定所有通用数据同步☆53Updated 3 years ago
- ☆69Updated 2 years ago
- 将datax改成一个java服务包，支持单jvm同时运行多个实例，整合调度代码，提供api调用接口，可以直接集成到已有服务框架。☆36Updated 2 years ago
- 🔥🔥🔥支持插件化、可视化的数据异构框架mykit-data开源啦！支持MySQL到MySQL、MySQL到Oracle、Oracle到MySQL、Oracle到Oracle的全量、增量数据同步。完全的插件化、可视化操作。通过日志最大限度的避免同步过程中的数据丢失。支持…☆185Updated 2 years ago
- Asynchronous flink connector based on the Lettuce, supporting sql join and sink, query caching and debugging.☆240Updated 2 months ago
- dataService platform is a low-code platform, which only needs to write SQL to realize the development of API services, solve the unificat…☆111Updated last year
- DataX分布式集群化、自定义DataX插件、源码修改任务监控以及脏数据存表Hook☆26Updated 4 years ago
- ☆191Updated 2 years ago
- Apache StreamPark quickstart☆72Updated 5 months ago
- 这是一个可自由拖拽的BI可视化系统 支持主流的关系数据：MySQL，Oracle，PostgreSQL等 同时支持Apache Doris☆205Updated 2 years ago
- 此项目主要应用于数据中台或数据平台的数据总线，支持直接实时监听MySQL、MongoDB、PostgreSQL、Oracle、SQL Server、Db2和Cassandra等数据库的数据变更。☆62Updated last year