lijufeng2016 / data-manager
超实用的hive表数据、分区,hdfs文件的自动化清理工具
☆19Updated 2 years ago
Alternatives and similar repositories for data-manager
Users that are interested in data-manager are comparing it to the libraries listed below
Sorting:
- Flink Sql 教程☆34Updated 5 months ago
- HBase快照增量导出☆18Updated 7 years ago
- 大数据各类工具☆6Updated 7 months ago
- Learning Flink : Flink CEP,Flink Core,Flink SQL☆71Updated 3 years ago
- ☆38Updated last year
- Real-time ETL developed by Flink, data from MySQL to Greenplum. Use canal to parse the MySQL binlog, put it into kafka, use Flink to cons…☆79Updated last year
- 因现有的datax、sqoop满足不了需求,使用spark封装了一个数据同步工具。☆9Updated 6 years ago
- 易观开源大数据互联网百亿级记录互传Backquarter项目☆19Updated 2 years ago
- Data self exporting and monitoring platform based on Hive data warehouse. https://hc.smartloli.org☆36Updated 7 years ago
- Apache Ambari Web 中文汉化 2.7.x版本直接修改☆39Updated 2 years ago
- ambari2.6集成flink1.9.1,网上其它项目支持的是standalone模式,此项目支持flink on yarn模式☆13Updated 4 years ago
- kafka传数据到Flink存储到mysql之Flink使用SQL语句聚合数据流(设置时间窗口,EventTime)☆32Updated 7 years ago
- flink sql connector clickhouse zeppelin☆79Updated 3 years ago
- Kafka delivery semantics in the case of failure depend on how and when offsets are stored. Spark output operations are at-least-once. So …☆37Updated 8 years ago
- flinksql-platform☆19Updated 4 years ago
- 基于袋鼠云提供的开源flinkStreamSQL项目,对其实时sql进行可视化功能开发;通过tcpip通信,前端页面选择需要连接的数据库信息,并写sql语句,点击提交后,后端自动执行集群启动和JobGraph提交,并返回结果给前端页面。实现了使用者即使不了解Kafka、fl…☆11Updated 5 years ago
- 数据血缘,Hive/Sqoop/HBase/Spark等,发送到kafka后,解析处理使用neo4j生成血缘☆82Updated 3 years ago
- log、event 、time 、window 、table、sql、connect、join、async IO、维表、CEP☆68Updated 2 years ago
- 基于Java,封装了hbase的底层api,提供了基于注解的ORM支持,只需定义实体类对象,即可完成对hbase的各种操作。同时对List、Set、Map等复杂数据类型提供了支持☆43Updated 8 years ago
- 基于canal/kafka conenct的mysql/oracle数据实时同步、flink rest api、flink sql以及udf☆50Updated 2 years ago
- 基于 spark 混合查询平台,支持不同源数据库的联合查询,mysql hive presto ...☆14Updated 7 years ago
- 使用spark对hive、hbase、ES的读写, 实现一次配置可对不同数据库进行导入导出,并对ES、hbase进行封装☆32Updated 8 years ago
- kudu可视化工具☆38Updated 5 years ago
- sql实现Structured Streaming☆39Updated 6 years ago
- sql解析工具。主要解析hive sql、spark sql、presto sql。从sql中解析出输入表、输出表以及字段等信息☆95Updated last year
- 同步Hive数据仓库数据到Elasticsearch的小工具☆21Updated 7 years ago
- 基于CDH5.x parcles安装,一键卸载脚本☆38Updated 2 years ago
- Flink 案例代码☆43Updated 2 years ago
- 基于flink 1.8 源码二次开发,详见MD☆82Updated 4 years ago
- azkaban小助手,增加任务web配置、远程脚本调用、报警扩展、跨项目依赖等功能。☆117Updated 8 years ago