DataX分布式集群与负载均衡、任务执行/统计,基于DataX的通用数据同步微服务,一个Restful接口搞定所有通用数据同步
☆42Jan 18, 2021Updated 5 years ago
Alternatives and similar repositories for datax-admin
Users that are interested in datax-admin are comparing it to the libraries listed below
Sorting:
- DataX分布式集群化、自定义DataX插件、源码修改任务监控以及脏数据存表Hook☆26Jan 18, 2021Updated 5 years ago
- 基于插件架构的数据源服务,统一接口,可操作不同类型数据源☆49Dec 6, 2022Updated 3 years ago
- 针对datax进行2次开发,实现data 以rpc的方式传递json配置调用推数服务,同时修复datax多 处bug。项目中也引入nacos作为服务的配置中心和注册中心; 同时项目内扩展了kafkawriter,rabbitmqwriter,esreader,hiveread…☆70Dec 14, 2022Updated 3 years ago
- 基于阿里Datax改版web datax ,支持管理平台与restful风格API☆29Dec 6, 2022Updated 3 years ago
- MySQL增量数据实时同步到HDFS/Hive☆11Jul 24, 2018Updated 7 years ago
- 为DataX(https://github.com/alibaba/DataX) 提供远程多语言调用(ThriftServer,HttpServer) 分布式运行(DataX on YARN) 功能☆144Jan 22, 2026Updated last month
- 基于spring boot + quartz + redis实现job任务调度,前端使用vue和element-ui实现页面控制台。☆13Jan 30, 2019Updated 7 years ago
- 实现yarn客户端,datax-on-yarn可以让datax在yarn master上运行☆17Nov 14, 2023Updated 2 years ago
- 基于DataX的通用数据同步微服务,一个Restful接口搞定所有通用数据同步☆53Jun 21, 2022Updated 3 years ago
- skycloud-base 运维管理平台前端页面☆16Dec 10, 2022Updated 3 years ago
- 🔥🔥🔥支持插件化、可视化的数据异构框架mykit-data开源啦!支持MySQL到MySQL、MySQL到Oracle、Oracle到MySQL、Oracle到Oracle的全量、增量数据同步。完全的插件化、可视化操作。通过日志最大限度的避免同步过程中的数据丢失。支持…☆190Apr 6, 2023Updated 2 years ago
- AMS实时推荐系统☆17Nov 4, 2022Updated 3 years ago
- Encapsulation based on spring-kafka not only supports native configuration, but also adds multi data source configuration.☆17Aug 30, 2023Updated 2 years ago
- 基于ElasticSearch + Spark的智能搜索和推荐系统☆19Jun 3, 2025Updated 9 months ago
- 数据库数据同步,支持oracle同步到oracle、oracle同步到mysql、mysql同步到oracle、mysql同步到mysql☆42Jun 21, 2022Updated 3 years ago
- HiveReader for alibaba DataX☆17Jul 23, 2023Updated 2 years ago
- Java Cloud Function for HL7 file parsing and data type extraction☆15Jun 27, 2018Updated 7 years ago
- 一款基于Java注解的elasticsearch mapping生成工具,支持ES 5.2.0所有可选参数☆21Jul 8, 2017Updated 8 years ago
- 基于ElasticSearch的海量文本检索系统☆20Jun 3, 2018Updated 7 years ago
- 已在内部实现,商业版权属于公司,本系统不在具备开源条件☆23Nov 3, 2020Updated 5 years ago
- DataX 是异构数据广泛使用的离线数据同步工具/平台,实现包括 MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、OTS、ODPS 等各种异构数据源之间高效的数据同步功能。☆22Jan 31, 2018Updated 8 years ago
- 以 spring-boot 为基础,集成feign,微信sdk,百度ai等第三方工具,以及自定义接口权限拦截,表情处理,ftp连接池,地图坐标解析,mybatis-plus 代码自动生成,token防止表单重复提交,语音处理,敏感词过滤,分词器,参数校验☆57Jul 17, 2023Updated 2 years ago
- A simple project showcasing HLS-based video streaming on JioCinema & Youtube and methods for stream conversion.☆26Jul 18, 2025Updated 7 months ago
- pre基于spring security的RBAC权限管理系统☆52Sep 4, 2020Updated 5 years ago
- 一个基于Rocket MQ的不同数据库之间数据实时同步的平台☆25Jun 14, 2018Updated 7 years ago
- aliyun出的otter同步平台,配置过于恶心,如果你要配置线上1000个任务,你是不是要傻了,所以搞个自动化批量配置☆28Dec 16, 2022Updated 3 years ago
- sql 血缘解析(hive sql、spark sql、starrocks sql、doris sql)☆26Feb 20, 2023Updated 3 years ago
- 将枚举映射为数据字典,可用于前后端共享数据字典☆28Apr 8, 2024Updated last year
- 通过图形界面为数据监控以及数据同步提高良好的服务,可支持数据同步的数据源或数据库有:SQL数据源、NoSQL数据源、数据引擎、数据仓库、消息队列;通过Canal可支持数据库监控以及数据备份。☆24Jan 19, 2021Updated 5 years ago
- 使用springboot启动datax,方便以web方式使用☆228Jan 11, 2023Updated 3 years ago
- DataX集成可视化页面,选择数据源即可一键生成数据同步任务,支持RDBMS、Hive、HBase、ClickHouse、MongoDB等数据源,批量创建RDBMS数据同步任务,集成开源调度系统,支持分布式、增量同步数据、实时查看运行日志、监控执行器资源、KILL运行进程、…☆5,984Jun 2, 2024Updated last year
- elasticsearch orm frame.☆10Jan 8, 2021Updated 5 years ago
- Java connector for elFinder☆47Jul 8, 2022Updated 3 years ago
- A UDF for Cloudera Impala ( hive get_json_object equivalent )☆31Aug 13, 2021Updated 4 years ago
- Data develop engine 数据研发引擎,用可视化的组件编排后台数据处理逻辑,配合消息触发、定时任务和restful接口等多种调度机制,从而能够代替传统的大部分后台接口研发。☆32Feb 13, 2026Updated 2 weeks ago
- 本工具集成了常用的第三方对象存储平台,简化项目中使用对象存储时繁琐的集成过程,让对象存储开箱即用。☆35Mar 7, 2024Updated last year
- 跨数据库表同步程序,支持 Docker 部署,自动同步表结构和数据,数仓建设工具☆34Sep 8, 2022Updated 3 years ago
- 智慧教学辅助系统☆10Feb 10, 2026Updated 3 weeks ago
- How to use a SQLite database in a Qt Quick / QML application.☆10Jun 15, 2020Updated 5 years ago