18113996630 / springboot-sparkLinks
通过SparkLauncher使用springboot构建rest api远程提交spark任务,博客地址:https://blog.csdn.net/hlp4207/article/details/100831384
☆45Updated last year
Alternatives and similar repositories for springboot-spark
Users that are interested in springboot-spark are comparing it to the libraries listed below
Sorting:
- 数据血缘,Hive/Sqoop/HBase/Spark等,发送到kafka后,解析处理使用neo4j生成血缘☆85Updated 4 years ago
- ☆12Updated 6 years ago
- 分享一些在工作中的大数据实战案例,包括flink、kafka、hadoop、presto等等。欢迎大家关注我的公众号【大数据技术与应用实战】,一起成长。☆261Updated last year
- 从本地IDEA提交Flink/Spark任务到Yarn/k8s集群☆167Updated 4 years ago
- 本 GitHub 项目是 Flink Forward Asia Hackathon (2021) 的投票专用项目。☆120Updated 4 years ago
- Spark、Flink等离线任务的调度以及实时任务的监控☆306Updated 3 months ago
- 基于antlr4的sql解析,实现格式化,元数据,血源等自定义解析,包括hive☆111Updated 3 years ago
- 用户画像平台,涵盖标签管理,用户画像报告,用户分群,用户360视角,oneId服务☆107Updated 2 years ago
- FlinkSQL数据脱敏和行级权限解决方案及源码,支持面向用户级别的数据脱敏和行级数据访问控制,即特定用户只能访问到脱敏后的数据或授权过的行。此方案是实时领域Flink的解决方案,类似于离线数仓Hive Ranger中的Row-level Filter和Column Mas…☆146Updated 2 years ago
- A prototype project of big data platform, the source codes of the book Big Data Platform Architecture and Prototype☆198Updated 5 years ago
- 利用Druid SQL Parser解析HiveSQL日志,自动构建字段级别的血缘关系及主外键的自动抽取☆44Updated 2 years ago
- spark全示例代码(java、scala) Spark most full instance code DEMO (java、scala)☆85Updated 5 years ago
- 一个实时数仓项目,从0到1搭建实时数仓☆64Updated 4 years ago
- Using Flink SQL to build ETL job☆205Updated 2 years ago
- flink实时处理kafka传来的数据通过连接池技术写入hbase☆97Updated 3 years ago
- 基于Flink流处理的动态实时亿级全端用户画像系统☆487Updated 3 years ago
- flink简易使用教程,结合官方仓库的example样例,结合常见场景,使用flink的基本功能☆118Updated 3 years ago
- This project is used for tracking lineage when using spark. Our team is aimed at enhancing the ability of column relation during logical …☆20Updated 4 years ago
- Learning Flink : Flink CEP,Flink Core,Flink SQL☆73Updated 3 years ago
- 基于 Flink 的 sqlSubmit 程序☆149Updated last year
- hive sql 字段血缘☆24Updated 3 years ago
- Spark structured-streaming 消费kafka数据写入hbase☆33Updated 7 years ago
- Flink代码实例☆123Updated 5 years ago
- sql解析工具。主要解析hive sql、spark sql、presto sql。从sql中解析出输入表、输出表以及字段等信息☆97Updated 2 years ago
- Asynchronous flink connector based on the Lettuce, supporting sql join and sink, query caching and debugging.☆257Updated 9 months ago
- Hive hook, obtain task information from Hive, fetch input/output tables and lineage information from HSQL.☆40Updated 2 years ago
- 京东RTF实时数据湖,是一个从底层重新构建的系统,解决了数据的接入、解析及清洗等ETL 过程,同时解决了传统离线模式达不到的实时性和流式实时数据做不到的数据清洗、还原,是一套大数据领域改革性的实时数据方案。RTF可以直接查询最新状态的数据,并且无需去重,可以让数据分析人员即…☆128Updated 2 years ago
- An ad hoc query service based on the spark sql engine.(基于spark sql引擎的即席查询服务)☆382Updated 2 years ago
- 通过语法树解析获取字段级血缘数据☆61Updated 2 years ago
- 基于flink的用户行为分析☆51Updated 2 years ago