jacksoup / hiveMetaMgr
hive仓库元数据管理系统
☆163Updated 8 years ago
Related projects: ⓘ
- Spark Streaming监控平台,支持任务部署与告警、自启动☆128Updated 6 years ago
- 数据血缘,Hive/Sqoop/HBase/Spark等,发送到kafka后,解析处理使用neo4j生成血缘☆78Updated 3 years ago
- Hive hook, obtain task information from Hive, fetch input/output tables and lineage information from HSQL.☆39Updated last year
- ☆200Updated this week
- Flink代码实例☆121Updated 4 years ago
- flink-sql 在 flink 上运行 sql 和 构建数据流的平台 基于 apache flink 1.10.0☆112Updated 2 years ago
- 一个实时数仓项目,从0到1搭建实时数仓☆47Updated 3 years ago
- 从本地IDEA提交Flink/Spark任务到Yarn/k8s集群☆162Updated 2 years ago
- ☆76Updated this week
- flink实时处理kafka传来的数据通过连接池技术写入hbase☆94Updated 2 years ago
- Atlas官方文档中文版☆69Updated 5 years ago
- 京东RTF实时数据湖,是一个从底层重新构建的系统,解决了数据的接入、解析及清洗等ETL 过程,同时解决了传统离线模式达不到的实时性和流式实时数据做不到的数据清洗、还原,是一套大数据领域改革性的实时数据方案。RTF可以直接查询最新状态的数据,并且无需去重,可以让数据分析人员即…☆123Updated 11 months ago
- mysql数据实时增量导入hive☆86Updated 7 years ago
- 数据治理、数据质量检核/监控平台(Django+jQuery+MySQL)☆178Updated last year
- ☆66Updated this week
- 一个手动管理spark streaming集成kafka时的偏移量到zookeeper中的小项目☆135Updated last month
- 给flink开发的web系统。支持页面上定义udf,进行sql和jar任务的提交;支持source、sink、job的管理;可以管理openshift上的flink集群☆286Updated last year
- 信托数据仓库及商业智能☆32Updated 6 years ago
- 基于 Flink 的 sqlSubmit 程序☆145Updated 6 months ago
- 基于CDH5.x parcles安装,一键卸载脚本☆38Updated last year
- hive sql 字段血缘☆23Updated 2 years ago
- Flink 菜鸟公众号代码地址☆63Updated 5 months ago
- 分享一些在工作中的大数据实战案例,包括flink、kafka、hadoop、presto等等。欢迎大家关注我的公众号【大数据技术与应用实战】,一起成长。☆261Updated 6 months ago
- azkaban小助手,增加任务web配置、远程脚本调用、报警扩展、跨项目依赖等功能。☆119Updated 7 years ago
- 大数据平台相关代码(ES/Hive/Hadoop/hdfs/hbase)☆73Updated last year
- An ad hoc query service based on the spark sql engine.(基于spark sql引擎的即席查询服务)☆385Updated 9 months ago
- 学习 Spark 的一个小项目,以及其中各种调优的笔记☆172Updated 7 years ago
- 封装sparkstreaming动态调节batch time( 有数据就执行计算); 支持运行过程中增删topic; 封装sparkstreaming 1.6 - kafka 010 用以支持 SSL。☆182Updated 3 years ago
- 利用Druid SQL Parser解析HiveSQL日志,自动构建字段级别的血缘关系及主外键的自动抽取☆41Updated 7 months ago
- 元数据管理系统(leap metadata)是用于企业内进行元数据管理的Web应用程序。该系统提供直观的用户页面。用户可以使用该系统管理企业所拥有的元数据,如查看元数据基本信息、数据所在位置、数据的血缘关系等。本系统支持管理员和普通用户的分级操作。☆276Updated 2 years ago