younthu / canal_demoLinks
演示canal+mysql+zookeeper+elasticsearch+kafka做增量索引(ES)更新
☆16Updated 5 years ago
Alternatives and similar repositories for canal_demo
Users that are interested in canal_demo are comparing it to the libraries listed below
Sorting:
- Rabbitmq队列服务PLUS☆95Updated 2 years ago
- DataX分布式集群与负载均衡、任务执行/统计，基于DataX的通用数据同步微服务，一个Restful接口搞定所有通用数据同步☆43Updated 4 years ago
- 数据库同步方案☆42Updated last year
- syncClient，数据实时同步中间件（同步mysql到kafka、redis、elasticsearch、httpmq）！☆280Updated 3 years ago
- 🔥🔥🔥支持插件化、可视化的数据异构框架mykit-data开源啦！支持MySQL到MySQL、MySQL到Oracle、Oracle到MySQL、Oracle到Oracle的全量、增量数据同步。完全的插件化、可视化操作。通过日志最大限度的避免同步过程中的数据丢失。支持…☆190Updated 2 years ago
- 基于Docker-compose的Elasticsearch集群，每个节点均是独立docker-compose配置而成☆29Updated 6 years ago
- 数据采集平台zdh,etl 处理服务☆73Updated last month
- datax web。datax中的web配置界面没有集成在一起开源出来，此为web端配置项目。☆100Updated 6 years ago
- 通用报警框架，支持报警方式自定义，报警配置自定义☆168Updated 2 years ago
- 通过Nacos让Nginx拥有服务发现能力☆113Updated last year
- kafka监控工具☆77Updated last year
- zookeeper web管理和监控界面，使用内置的H2数据库，此版本基于淘宝大神yasenagat的zkWeb源码基础之上进行了大幅升级和修改，主要新增了集群监控和国际化功能，直接java -jar或将war包放入tomcat即可运行！最近新增加了docker镜像功能！☆157Updated last year
- 🔥🔥🔥 mykit中分离出的强大的数据库同步工具——mykit-db-sync。 基于java开发的功能强大、配置灵活的数据库同步工具，目前支持MySQL、SQL Server和Oracle数据库的同步，在实际应用场景中，我们经常需要定期将一个数据库的数据同步…☆191Updated 3 years ago
- 针对datax进行2次开发，实现data 以rpc的方式传递json配置调用推数服务，同时修复datax多处bug。项目中也引入nacos作为服务的配置中心和注册中心； 同时项目内扩展了kafkawriter，rabbitmqwriter，esreader，hiveread…☆69Updated 2 years ago
- 一个数据库导入Elasticsearch工具，支持的数据库： mysql,maridb，postgress,oracle ,sqlserver,db2等 支持的Elasticsearch版本： 1.x,2.x,5.x,6.x,+ 支持海量PB级数据同步导入功能 使用参…☆148Updated last week
- 此项目主要应用于数据中台或数据平台的数据总线，支持直接实时监听MySQL、MongoDB、PostgreSQL、Oracle、SQL Server、Db2和Cassandra等数据库的数据变更。☆64Updated last year
- aliyun出的otter同步平台，配置过于恶心，如果你要配置线上1000个任务，你是不是要傻了，所以搞个自动化批量配置☆28Updated 2 years ago
- 支持MySQL、MongoDB数据变更订阅分发☆148Updated 3 years ago
- 将datax改成一个java服务包，支持单jvm同时运行多个实例，整合调度代码，提供api调用接口，可以直接集成到已有服务框架。☆37Updated 2 years ago
- configcenter（配置中心）：存储管理各个系统在不同环境中的配置，降低配置维护成本。具备配置发布回滚能力、配置更新实时推送能力、配置灰度发布能力、客户端配置缓存能力、对客户端验权防止生产环境配置泄漏风险能力、对敏感配置设置访问权限能力。使用http协议进行通信，可支…☆86Updated 2 years ago
- 基于日志模板构建，采集任务动态管控、数据质量精确度量，一站式日志采集平台☆269Updated 3 months ago
- 基于DataX的通用数据同步微服务，一个Restful接口搞定所有通用数据同步☆54Updated 3 years ago
- 基于插件架构的数据源服务，统一接口，可操作不同类型数据源☆48Updated 2 years ago
- 数据权限插件☆47Updated 7 years ago
- elasticsearch java highlevel rest client demo工程☆69Updated 3 weeks ago
- 🔥springcloud脚手架,配置中心(apollo/nacos) 注册中心(consul/nacos) 分布式事物(seata) 调用链(skywalking) 日志(ELK)监控(prometheus与grafana) 等,适合学习与快速开发使用☆84Updated 3 years ago
- datax-web-docker☆51Updated 2 years ago
- 基于Gitlab + Jenkins + Harbor + Sonarqube + Docker + Kubernetes 完成可持续集成与可持续交付解决方案☆211Updated 6 years ago
- DBMetadata数据库元数据☆93Updated 7 years ago
- 基于Docker-Compose 编排的Mycat分表分库、读写分离、Mysql主从复制☆25Updated 3 years ago