lulumengyi / Hive_SQL_ASTLinks
利用Druid SQL Parser解析HiveSQL日志,自动构建字段级别的血缘关系及主外键的自动抽取
☆44Updated last year
Alternatives and similar repositories for Hive_SQL_AST
Users that are interested in Hive_SQL_AST are comparing it to the libraries listed below
Sorting:
- 数据血缘,Hive/Sqoop/HBase/Spark等,发送到kafka后,解析处理使用neo4j生成血缘☆82Updated 4 years ago
- 通过语法树解析获取字段级血缘数据☆61Updated 2 years ago
- sql解析工具。主要解析hive sql、spark sql、presto sql。从sql中解析出输入表、输出表以及字段等信息☆97Updated 2 years ago
- hive sql 字段血缘☆24Updated 3 years ago
- 基于antlr4的sql解析,实现格式化,元数据,血源等自定义解析,包括hive☆111Updated 2 years ago
- Using Flink SQL to build ETL job☆205Updated last year
- 从本地IDEA提交Flink/Spark任务到Yarn/k8s集群☆165Updated 3 years ago
- Atlas官方文档中文版☆70Updated 6 years ago
- Doris表和字段血缘项目☆82Updated last year
- 解析 SQL 字段数据血缘☆82Updated 4 months ago
- 基于 Flink 的 sqlSubmit 程序☆147Updated last year
- 给flink开发的web系统。支持页面上定义udf,进行sql和jar任务的提交;支持source、sink、job的管理;可以管理openshift上的flink集群☆286Updated 2 years ago
- Platform for Flink☆283Updated 2 years ago
- 分享一些在工作中的大数据实战案例,包括flink、kafka、hadoop、presto等等。欢迎大家关注我的公众号【大数据技术与应用实战】,一起成长。☆263Updated last year
- DorisDB SQL解析器Java实现;Clickhouse SQL解析器Java实现☆97Updated 3 years ago
- flink-sql 在 flink 上运行 sql 和 构建数据流的平台 基于 apache flink 1.10.0☆112Updated 3 years ago
- 为DataX(https://github.com/alibaba/DataX) 提供远程多语言调用(ThriftServer,HttpServer) 分布式运行(DataX on YARN) 功能☆144Updated last month
- Hive hook, obtain task information from Hive, fetch input/output tables and lineage information from HSQL.☆40Updated 2 years ago
- FlinkSQL数据脱敏和行级权限解决方案及源码,支持面向用户级别的数据脱敏和行级数据访问控制,即特定用户只能访问到脱敏后的数据或授权过的行。此方案是实时领域Flink的解决方案,类似于离线数仓Hive Ranger中的Row-level Filter和Column Mas…☆142Updated last year
- Real-time ETL developed by Flink, data from MySQL to Greenplum. Use canal to parse the MySQL binlog, put it into kafka, use Flink to cons…☆80Updated last year
- Real time data processing system based on flink and CEP☆250Updated 7 months ago
- Spark、Flink等离线任务的调度以及实时任务的监控☆304Updated last year
- 基于 antlr4 的多种数据库SQL解析器,获取SQL中元数据,可用于数据平台产品中的多个场景:ddl语句提取元数据、sql 权限校验、表级血缘、sql语法校验等场景。支持spark、flink、gauss、starrocks、Oracle、MYSQL、Postgresq…☆366Updated last month
- 基于flink1.9.1,flink-sql-client模块SDK单独实现,支持Yarn集群的远程SQL任务发布,可以支撑flink sql任务的远程化执行☆48Updated 2 years ago
- mysql数据实时增量导入hive☆87Updated 8 years ago
- ☆118Updated 2 years ago
- An ad hoc query service based on the spark sql engine.(基于spark sql引擎的即席查询服务)☆382Updated last year
- Asynchronous flink connector based on the Lettuce, supporting sql join and sink, query caching and debugging.☆249Updated 4 months ago
- Flink 菜鸟公众号代码地址☆64Updated 8 months ago
- Flink代码实例☆122Updated 4 years ago