tbs005 / DataX
DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台，实现包括 MySQL、Oracle、HDFS、Hive、OceanBase、HBase、OTS、ODPS 等各种异构数据源之间高效的数据同步功能。
☆23Updated 3 years ago
Related projects ⓘ
Alternatives and complementary repositories for DataX
- poseidonX 是一个基于jstorm和flink的一体化实时计算服务平台☆55Updated 6 years ago
- 一个优秀的大数据查询平台，提供hive异步任务查询、LDAP用户、数据权限控制、历史查询任务与结果存储、邮件通知、excel下载等功能。☆24Updated 6 years ago
- 风控系统设计demo☆23Updated 7 years ago
- SpringBoot操作Elasticsearch的实战案例，elasticsearch 2.4.5/5.6.1☆35Updated 4 years ago
- 基于Drools的 规则引擎+CEP+事件流☆23Updated 7 years ago
- xxl-job-admin 任务调度平台 Spring Boot 版本[后台部分] ，统一改为rest接口☆37Updated 2 years ago
- hero☆0Updated 7 years ago
- 2016年阿里中间件性能挑战赛初赛题，RocketMQ+JStorm+Tair实时统计双11交易金额☆43Updated 6 years ago
- 分布式大数据SQL查询可视化界面！☆68Updated 9 years ago
- zookeeper admin dashboard☆20Updated 4 years ago
- 基于Flink+ClickHouse实时计算平台☆30Updated 2 years ago
- 规则引擎（drools示例，基于MVEL的规则引擎）☆28Updated 2 years ago
- 简约而不简单功能强大的配置中心。部署简单、支持多环境多版本配置管理。支持全局配置、多应用共享配置、配置加密、配置实时同步、spring/springboot无缝对接，细粒度权限控制、安全过滤等功能☆48Updated last year
- 大型分布式系统实时监控平台☆28Updated last year
- 实时风控系统，基于spark-streaming、drools、kafka、redis☆50Updated 6 years ago
- 数据的导出（支持DB2、MySQL、Oracle、Teradata数据库的数据导出）、合并（支持将多个小数据文件合并成一个大的数据文件）、传输（支持FTP、SFTP数据传输）程序，适用于向指定FTP服务器供数的情况，常见于多个源系统以数据文件的形式向数据仓库集中供数。该程序…☆25Updated 9 years ago
- 大数据平台相关代码（ES/Hive/Hadoop/hdfs/hbase）☆74Updated 2 years ago
- 简单实用的同步工具，实现mysql数据库中数据定期同步到elasticsearch，只需简单的配置，便能达到非凡的效果，支持elasticsearch 5.X版本☆48Updated 7 years ago
- 爬虫项目源码整理，使用redis进行url缓存，hbase进行详细信息的存储。使用zookeeper进行爬虫线程的状态监控。☆18Updated 9 years ago
- idcenter（分布式ID生成中心）：极高效的分布式id生成系统，每个客户端获取id的tps可达到400万+，服务端可支持海量的客户端。具备高容错性，即使网络不稳定也能运转（只要不连续长时间断网）。使用http协议进行通信，可支持多 语言。具备完整的管理员登录、权限校验。部…☆34Updated last year
- 基于annotation的http请求去重插件☆10Updated 7 years ago
- 基于Hadoop和HBase的大规模海量数据去重☆29Updated 6 years ago
- 分布式任务调度框架教程, 包括: Quartz、Elastic-Job和TBSchedule.☆31Updated 5 years ago
- 规则引擎的使用:excel决策表、drl决策文件 spring3.2+drools5.6 spring4.1+drools5.6 测试通过☆29Updated 9 years ago
- 易观KongPlus☆19Updated last year
- 用于数据迁移、缓存预热，springboot架构。支持数据区间分割、动态调整线程池配置、任务进度实时查看等特性☆45Updated 7 years ago