Kestrong / datax-elasticsearch
datax数据同步elasticsearch的reader和writer插件,支持一对多的扁平数据转换成es的嵌套对象,也支持嵌套对象的读取和ognl表达式过滤,理论上可以无限嵌套。
☆88Updated 11 months ago
Related projects ⓘ
Alternatives and complementary repositories for datax-elasticsearch
- flink 集成CDH5的自定义paracels☆70Updated 2 years ago
- 从本地IDEA提交Flink/Spark任务到Yarn/k8s集群☆162Updated 3 years ago
- Doris表和字段血缘项目☆73Updated 6 months ago
- HBaseManager,是一款强大的HBase表管理系统,目前系统集成的功能有,命名空间管理,表管理,列簇管理,标签机制,快照管理,以及一些常见的统计指标展示等,另外,系统还内置了HBaseSQL的功能,欢迎大家尝鲜。☆74Updated 7 months ago
- DorisDB SQL解析器Java实现;Clickhouse SQL解析器Java实现☆89Updated 2 years ago
- ☆67Updated 2 years ago
- 针对datax进行2次开发,实现data 以rpc的方式传递json配置调用推数服务,同时修复datax多处bug。项目中也引入nacos作为服务的配置中心和注册中心; 同时项目内扩展了kafkawriter,rabbitmqwriter,esreader,hiveread…☆68Updated last year
- DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括 MySQL、Oracle、HDFS、Hive、OceanBase、HBase、OTS、ODPS 等各种异构数据源之间高效的数据同步功能。☆138Updated 2 years ago
- Real-time ETL developed by Flink, data from MySQL to Greenplum. Use canal to parse the MySQL binlog, put it into kafka, use Flink to cons…☆78Updated 7 months ago
- 使用springboot启动datax,方便以web方式使用☆221Updated last year
- 给flink开发的web系统。支持页面上定义udf,进行sql和jar任务的提交;支持source、sink、job的管理;可以管理openshift上的flink集群☆286Updated last year
- Using Flink SQL to build ETL job☆200Updated last year
- 为DataX(https://github.com/alibaba/DataX) 提供远程多语言调用(ThriftServer,HttpServer) 分布式运行(DataX on YARN) 功能☆144Updated last year
- 数据血缘,Hive/Sqoop/HBase/Spark等,发送到kafka后,解析处理使用neo4j生成血缘☆80Updated 3 years ago
- Hive hook, obtain task information from Hive, fetch input/output tables and lineage information from HSQL.☆39Updated last year
- Real time data processing system based on flink and CEP☆245Updated 7 months ago
- Atlas官方文档中文版☆68Updated 5 years ago
- FlinkSQL数据脱敏和行级权限解决方案及源码,支持面向用户级别的数据脱敏和行级数据访问控制,即特定用户只能访问到脱敏后的数据或授权过的行。此方案是实时领域Flink的解决方案,类似于离线数仓Hive Ranger中的Row-level Filter和Column Mas…☆124Updated last year
- DataSphereStudio documents.☆111Updated 9 months ago
- 数据采集平台zdh,etl 处理服务☆68Updated this week
- 基于 Flink 的 sqlSubmit 程序☆144Updated 8 months ago
- flink sql connector clickhouse zeppelin☆78Updated 2 years ago
- datax web。datax中的web配置界面没有集成在一起开源出来,此为web端配置项目。☆99Updated 5 years ago
- 分享一些在工作中的大数据实战案例,包括flink、kafka、hadoop、presto等等。欢迎大家关注我的公众号【大数据技术与应用实战】,一起成长。☆262Updated 9 months ago
- 对HBase的API做了一层抽象,统一了HBase1.x和HBase2.x的实现,并提供了读写HBase的ORM的支持,同时,sdk还对HBase thrift 的客户端API进行了池化封装,(类似JedisPool),消除了直接使用原生API的各种问题,使之可以在生产环境…☆20Updated last year
- Streaming application development and management system, based on Linkis and DSS, planning to provide the workflow-like graphical drag-an…☆105Updated 4 months ago
- ☆49Updated 5 years ago
- Apache StreamPark quickstart☆67Updated 4 months ago
- flink-connector-clickhouse-1.13☆35Updated 2 years ago