xuanbo / flink-cdc
CDC(变化数据捕获)实时同步方案,秒级延迟。
☆63Updated 3 years ago
Alternatives and similar repositories for flink-cdc
Users that are interested in flink-cdc are comparing it to the libraries listed below
Sorting:
- 针对datax进行2次开发,实现data 以rpc的方式传递json配置调用推数服务,同时修复datax多处bug。项目中也引入nacos作为服务的配置中心和注册中心; 同时项目内扩展了kafkawriter,rabbitmqwriter,esreader,hiveread…☆69Updated 2 years ago
- ☆69Updated 2 years ago
- 分享一些在工作中的大数据实战案例,包括flink、kafka、hadoop、presto等等。欢迎大家关注我的公众号【大数据技术与应用实战】,一起成长。☆263Updated last year
- 你知道的越多,你不知道的也越多。Java技术栈既广且深,我们需要打破不同知识点的壁垒,形成完整的知识图谱,完成从information到knowledge的升华。☆119Updated 2 years ago
- Apache StreamPark quickstart☆72Updated 3 months ago
- 大数据平台后端项目☆227Updated 3 weeks ago
- 基于插件架构的数据源服务,统一接口,可操作不同类型数据源☆47Updated 2 years ago
- datax数据同步elasticsearch的reader和writer插件,支持一对多的扁平数据转换成es的嵌套对象,也支持嵌套对象的读取和ognl表达式过滤,理论上可以无限嵌套。☆88Updated last year
- ☆49Updated 3 years ago
- The java sdk for operating Apache Dolphinscheduler.☆67Updated 2 months ago
- 🔥🔥🔥支持插件化、可视化的数据异构框架mykit-data开源啦!支持MySQL到MySQL、MySQL到Oracle、Oracle到MySQL、Oracle到Oracle的全量、增量数据同步。完全的插件化、可视化操作。通过日志最大限度的避免同步过程中的数据丢失。支持…☆185Updated 2 years ago
- 数据建设与大数据技术知识体系,包含hadoop、hive、spark、flink主流框架和系列框架,数据中台、数据湖、数据治理、数仓建设、数据化转型等☆387Updated last month
- Real time data processing system based on flink and CEP☆248Updated 4 months ago
- 网关demo,基于Nacos动态配置路由☆59Updated 4 years ago
- 从本地IDEA提交Flink/Spark任务到Yarn/k8s集群☆161Updated 3 years ago
- 一个实时数仓项目,从0到1搭建实时数仓☆59Updated 3 years ago
- 此项目主要应用于数据中台或数据平台的数据总线,支持直接实时监听MySQL、MongoDB、PostgreSQL、Oracle、SQL Server、Db2和Cassandra等数据库的数据变更。☆62Updated last year
- FlinkSQL数据脱敏和行级权限解决方案及 源码,支持面向用户级别的数据脱敏和行级数据访问控制,即特定用户只能访问到脱敏后的数据或授权过的行。此方案是实时领域Flink的解决方案,类似于离线数仓Hive Ranger中的Row-level Filter和Column Mas…☆135Updated last year
- 数据采集平台zdh,etl 处理服务☆72Updated last week
- Using Flink SQL to build ETL job☆203Updated last year
- RocketMQ integration for Apache Flink. This module includes the RocketMQ source and sink that allows a flink job to either write messages…☆152Updated 2 months ago
- 大数据平台前端项目☆41Updated last month
- 大数据全栈学习【生态组件,技术栈,数据流,数据仓库,数据库,指标体系,血缘关系,元数据管理,数据质量,DataWorks,Hadoop,Spark,Flink,面试,笔记文档,实战练习,公共脚本,常用Shell脚本,Java,Scala,离线,实时,采集,计算,存储,可视化…☆121Updated 4 years ago
- 数据血缘,Hive/Sqoop/HBase/Spark等,发送到kafka后,解析处理使用neo4j生成血缘☆82Updated 3 years ago
- Flink cdc 整库同步 & flink 代码 demo☆43Updated 7 months ago
- Doris表和字段血缘项目☆77Updated last year
- MyDataHarbor是一个致力于解决任意数据源到任意数据源的分布式、高扩展性、高性能、事务级的数据同步中间件。帮助用户可靠、快速、稳定的对海量数据进行准实时增量同步或者定时全量同步,主要定位是为实时交易系统服务,亦可用于大数据的数据同步(ETL领域)。☆78Updated 8 months ago
- HBaseManager,是一款强大的HBase表管理系统,目前系统集成的功能有,命名空间管理,表管理,列簇管理,标签机制,快照管理,以及一些常见的统计指标展示等,另外,系统还内置了HBaseSQL的功能,欢迎大家尝鲜。☆80Updated last year
- Asynchronous flink connector based on the Lettuce, supporting sql join and sink, query caching and debugging.☆239Updated last month
- DataX分布式集群化、自定义DataX插件、源码修改任务监控以及脏数据存表Hook☆25Updated 4 years ago