nengm / cdcLinks
mysql通过binlog实现增量、oracle通过logminer实现增量
☆13Updated 3 years ago
Alternatives and similar repositories for cdc
Users that are interested in cdc are comparing it to the libraries listed below
Sorting:
- 运行时动态注册切换数据源，自动生成SQL(DDL/DML/DQL)，读写元数据，对比数据库结构差异。适配100+关系/非关系数据库。 常用于动态场景的底层支持,如:数据中台、可视化、低代码后台、工作流、自定义表单、异构数据库迁移同步、物联网车联网数据处理、数据清洗、运行时自…☆308Updated this week
- Crabc是低代码开发平台，企业级API接口发布系统，深度整合SpringBoot和Mybatis实现动态数据源和动态SQL，可视化编写SQL快速发布接口☆141Updated last month
- ERD Online is an online collaborative data warehouse design software. It does not need to install applications locally and operate databa…☆251Updated last year
- 基于flink-cdc的数据同步工具,用于mysql同步至doris☆31Updated 5 months ago
- 🔥🔥🔥支持插件化、可视化的数据异构框架mykit-data开源啦！支持MySQL到MySQL、MySQL到Oracle、Oracle到MySQL、Oracle到Oracle的全量、增量数据同步。完全的插件化、可视化操作。通过日志最大限度的避免同步过程中的数据丢失。支持…☆190Updated 2 years ago
- DataX分布式集群与负载均衡、任务执行/统计，基于DataX的通用数据同步微服务，一个Restful接口搞定所有通用数据同步☆43Updated 4 years ago
- 这个平台旨在提供一个高效、便捷的数据处理和分析环境，适用于数据科学家、数据工程师以及任何对数据处理有需求的用户。☆53Updated 3 months ago
- aliyun出的otter同步平台，配置过于恶心，如果你要配置线上1000个任务，你是不是要傻了，所以搞个自动化批量配置☆28Updated 2 years ago
- DamiBus，专为本地（单体）多模块之间交互解耦而设计（尤其是未知模块、隔离模块）。也是 DDD 开发的良配。瞬发 5000万/秒☆44Updated last week
- 史上最轻便好用的kafka 可视化图形界面客户端工具，可以生产消费消息，管理topic、group、集群。支持管理多个kafka环境。同时支持zookeeper redis 图形化界面操作☆130Updated 2 years ago
- MyDataHarbor是一个致力于解决任意数据源到任意数据源的分布式、高扩展性、高性能、事务级的数据同步中间件。帮助用户可靠、快速、稳定的对海量数据进行准实时增量同步或者定时全量同步，主要定位是为实时交易系统服务，亦可用于大数据的数据同步（ETL领域）。☆86Updated 3 months ago
- binlog2sql工具的java版☆51Updated 6 years ago
- 大数据平台后端项目☆266Updated last month
- Super-Sql 是一个基于国内外先进生成式大模型的Java框架，专注于将数据库表结构通过检索增强生成（RAG, Retrieval-Augmented Generation）技术进行训练，从而实现从自然语言文本到SQL查询的智能转换（Text to SQL）。该框架旨在…☆111Updated 3 months ago
- 基于AviatorScript的规则引擎实例☆131Updated last year
- A tool to transfer DDL between different database, including Mysql、PostgreSQL、Oracle、Hive and so on.这是一款实现不同数据库之间表结构（DDL）自动转换的工具，包括：Mysql…☆50Updated 2 years ago
- SpringBoot 整合 TrueLicense 实现 License 的授权与服务器许可☆143Updated 5 years ago
- SpringReport是一款企业级的报表系统，支持在线设计报表，并绑定动态数据源，无需写代码即可快速生成想要的报表，可以支持excel报表和word报表两种格式，同时还可以支持excel多人协同编辑☆387Updated this week
- DBSyncer（简称dbs）是一款开源的数据同步中间件，提供MySQL、Oracle、SqlServer、PostgreSQL、Elasticsearch(ES)、Kafka、File、SQL等同步场景。支持上传插件自定义同步转换业务，提供监控全量和增量数据统计图、应用性…☆811Updated this week
- etl engine 轻量级 跨平台 流批一体ETL引擎 数据抽取-转换-装载 ETL engine lightweight cross platform batch flow integration ETL engine data extraction transfor…☆74Updated 11 months ago
- 新一代全景式实时业务监控系统，承载数百万个监控项，每天可高效处理1000亿条消息，XL-LightHouse是一套支持超大数据量、支持超高并发的实时业务指标监控系统【同时支持单机版】。常见的应用场景包括：PV、UV统计；电商销售额、下单用户数统计；日志量统计；接口调用量、异…☆364Updated this week
- jvmm是一个Java虚拟机和主机服务式监控工具，可快速接入Prometheus和Grafana，支持生成火焰图、Java代码热更、反编译等功能。☆71Updated last year
- 异构数据库数据结构转换与离线同步工具来源于https://gitee.com/inrgihc/dbswitch.git☆20Updated last year
- 智数通2.0是新一代完全自主研发的数据治理平台，现拥有数据建设平台、数据治理平台、数据服务平台、任务调度平台等四大基础数据治理平台， 实现了数据集成、元数据管理、数据标准管理、数据质量管理、数据服务管理、数据建模管理、数据血缘查看、数据资产管理、任务调度管理等功能模块， 打…☆97Updated 7 months ago
- nginx4j 是 nginx 的java 版本。☆50Updated last year
- 🔥 一个快速将SQL转换为API接口的平台☆34Updated 8 months ago
- ☆103Updated last week
- nginx nacos module. subscribe service and configuration from nacos instead of modifying and reloading nginx.conf☆84Updated this week
- API敏捷开发框架，用于API接口功能的快速开发。不再定义Controller,Service,Dao,Mybatis,xml,Entity,VO等对象和方法.以springboot starter 形式集成使用☆338Updated 7 months ago
- 同时支持在线和离线解析binlog，输出标准sql☆181Updated 9 months ago