Alternatives and similar repositories for DataX

Users that are interested in DataX are comparing it to the libraries listed below

• xiaoyao1999hn / datax-service
  针对datax进行2次开发，实现data 以rpc的方式传递json配置调用推数服务，同时修复datax多处bug。项目中也引入nacos作为服务的配置中心和注册中心； 同时项目内扩展了kafkawriter，rabbitmqwriter，esreader，hiveread…
  ☆69Updated 2 years ago
• apache / streampark-quickstart
  Apache StreamPark quickstart
  ☆74Updated 8 months ago
• Kyofin / springboot-datax
  使用springboot启动datax，方便以web方式使用
  ☆227Updated 2 years ago
• Kestrong / datax-elasticsearch
  datax数据同步elasticsearch的reader和writer插件，支持一对多的扁平数据转换成es的嵌套对象，也支持嵌套对象的读取和ognl表达式过滤，理论上可以无限嵌套。
  ☆89Updated 3 months ago
• todd5167 / flink-spark-submiter
  从本地IDEA提交Flink/Spark任务到Yarn/k8s集群
  ☆165Updated 4 years ago
• zhangjun0x01 / bigdata-examples
  分享一些在工作中的大数据实战案例，包括flink、kafka、hadoop、presto等等。欢迎大家关注我的公众号【大数据技术与应用实战】，一起成长。
  ☆263Updated last year
• zhaoyachao / zdh_server
  数据采集平台zdh,etl 处理服务
  ☆73Updated 2 months ago
• binglind / alchemy
  给flink开发的web系统。支持页面上定义udf，进行sql和jar任务的提交；支持source、sink、job的管理；可以管理openshift上的flink集群
  ☆287Updated 2 years ago
• eyesmoons / data-lineage-doris
  Doris表和字段血缘项目
  ☆83Updated last year
• thestyleofme / data-lineage-parent
  数据血缘，Hive/Sqoop/HBase/Spark等，发送到kafka后，解析处理使用neo4j生成血缘
  ☆83Updated 4 years ago
• thestyleofme / flink-explore
  基于canal/kafka conenct的mysql/oracle数据实时同步、flink rest api、flink sql以及udf
  ☆50Updated 3 years ago
• DLuPan / DorisParser
  DorisDB SQL解析器Java实现；Clickhouse SQL解析器Java实现
  ☆97Updated 3 years ago
• thestyleofme / DataX
  DataX分布式集群化、自定义DataX插件、源码修改任务监控以及脏数据存表Hook
  ☆26Updated 4 years ago
• leonardBang / flink-sql-etl
  Using Flink SQL to build ETL job
  ☆205Updated 2 years ago
• springMoon / sqlSubmit
  基于 Flink 的 sqlSubmit 程序
  ☆148Updated last year
• jd-bigdata / rtf-lake
  京东RTF实时数据湖，是一个从底层重新构建的系统，解决了数据的接入、解析及清洗等ETL 过程，同时解决了传统离线模式达不到的实时性和流式实时数据做不到的数据清洗、还原，是一套大数据领域改革性的实时数据方案。RTF可以直接查询最新状态的数据，并且无需去重，可以让数据分析人员即…
  ☆127Updated 2 years ago
• jacksoup / hiveMetaMgr
  hive仓库元数据管理系统
  ☆167Updated 9 years ago
• molsionmo / flink-sql-client
  基于flink1.9.1,flink-sql-client模块SDK单独实现，支持Yarn集群的远程SQL任务发布，可以支撑flink sql任务的远程化执行
  ☆48Updated 3 years ago
• duhanmin / kafka-flink-hbase
  flink实时处理kafka传来的数据通过连接池技术写入hbase
  ☆96Updated 3 years ago
• L11168032 / sql-lineage-parser
  通过语法树解析获取字段级血缘数据
  ☆61Updated 2 years ago
• lei-zuquan / FlinkTutorial
  FlinkTutorial 专注大数据Flink流试处理技术。从基础入门、概念、原理、实战、性能调优、源码解析等内容，使用Java开发，同时含有Scala部分核心代码。欢迎关注我的博客及github。
  ☆70Updated 3 years ago
• xuwei517 / FlinkExample
  Flink代码实例
  ☆122Updated 5 years ago
• thestyleofme / common-datax
  基于DataX的通用数据同步微服务，一个Restful接口搞定所有通用数据同步
  ☆53Updated 3 years ago
• HamaWhiteGG / flink-sql-security
  FlinkSQL数据脱敏和行级权限解决方案及源码，支持面向用户级别的数据脱敏和行级数据访问控制，即特定用户只能访问到脱敏后的数据或授权过的行。此方案是实时领域Flink的解决方案，类似于离线数仓Hive Ranger中的Row-level Filter和Column Mas…
  ☆144Updated 2 years ago
• MeetYouDevs / big-whale
  Spark、Flink等离线任务的调度以及实时任务的监控
  ☆304Updated last year
• zipingdong / datax-web
  datax web。datax中的web配置界面没有集成在一起开源出来，此为web端配置项目。
  ☆100Updated 6 years ago
• jeff-zou / flink-connector-redis
  Asynchronous flink connector based on the Lettuce, supporting sql join and sink, query caching and debugging.
  ☆252Updated 6 months ago
• hairless / plink
  Platform for Flink
  ☆283Updated 2 years ago
• WeBankFinTech / DataSphereStudio-Doc
  DataSphereStudio documents.
  ☆123Updated 9 months ago
• code-dm / mriya
  Real-time ETL developed by Flink, data from MySQL to Greenplum. Use canal to parse the MySQL binlog, put it into kafka, use Flink to cons…
  ☆80Updated last year