dengbp / big-well
高性能大数据实时同步:kafka连接器(kafka-connect-kudu-sink插件)、海量日志流处理
☆19Updated 2 years ago
Alternatives and similar repositories for big-well:
Users that are interested in big-well are comparing it to the libraries listed below
- MySQL增量数据实时同步到HDFS/Hive☆11Updated 6 years ago
- 电商用户行为分析大数据平台☆33Updated 5 years ago
- DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台，实现包括 MySQL、Oracle、HDFS、Hive、OceanBase、HBase、OTS、ODPS 等各种异构数据源之间高效的数据同步功能。☆23Updated 3 years ago
- Learning Flink : Flink CEP,Flink Core,Flink SQL☆71Updated 3 years ago
- 基于袋鼠云提供的开源flinkStreamSQL项目，对其实时sql进行可视化功能开发；通过tcpip通信，前端页面选择需要连接的数据库信息，并写sql语句，点击提交后，后端自动执行集群启动和JobGraph提交，并返回结果给前端页面。实现了使用者即使不了解Kafka、fl…☆11Updated 5 years ago
- poseidonX 是一个基于jstorm和flink的一体化实时计算服务平台☆55Updated 6 years ago
- kafka connector 插件，支持输入 mysql binlog 和 json 格式写入ClickHouse。持续更新☆45Updated 4 years ago
- Flink电商项目，实时统计分析 + 风控☆25Updated 4 years ago
- 基于Flink+ClickHouse实时计算平台☆31Updated 2 years ago
- 一个优秀的大数据查询平台，提供hive异步任务查询、LDAP用户、数据权限控制、历史查询任务与结果存储、邮件通知、excel下载等功能。☆24Updated 7 years ago
- 此项目主要应用于数据中台或数据平台的数据总线，支持直接实时监听MySQL、MongoDB、PostgreSQL、Oracle、SQL Server、Db2和Cassandra等数据库的数据变更。☆62Updated last year
- hadoop-docker集群☆21Updated 7 years ago
- 常用大数据工具学习实战，包含Hadoop、HBase、Kafka、ClickHouse、Hive、Redis、Zookeeper...☆23Updated 2 years ago
- 使用spark对hive、hbase、ES的读写， 实现一次配置可对不同数据库进行导入导出，并对ES、hbase进行封装☆32Updated 7 years ago
- 大数据自动化部署，包括自动化部署hadoop、hive、hbase、spark、storm等等一系列组件☆67Updated 6 years ago
- Ralasafe访问控制中间件(数据级权限管理)，是MIT协议开源免费软件产品。它使用图形化方式处理各种数据级权限管理问题，包括数据库行列级、字段内容级权限问题；它还能处理登录控制、 功能级权限控制和URL权限认证。☆31Updated 8 months ago
- ☆11Updated 7 years ago
- 分布式大数据SQL查询可视化界面！☆68Updated 9 years ago
- 数据处理平台☆16Updated 8 years ago
- 大型分布式系统实时监控平台☆28Updated 2 years ago
- 大数据组件学习；包括dataflow，spring cloud stream；elasticsearch；flink；spark；kafka；phoenix；Hive；Hbase；☆23Updated 2 years ago
- 大数据平台相关代码（ES/Hive/Hadoop/hdfs/hbase）☆74Updated 2 years ago
- storm kafka hdfs examples☆21Updated 8 years ago
- 规则引擎的使用:excel决策表、drl决策文件 spring3.2+drools5.6 spring4.1+drools5.6 测试通过☆29Updated 9 years ago
- Flink Sql 教程☆34Updated 4 months ago
- 蓝泰源大数据基础平台☆17Updated 7 years ago
- 大数据工具封装☆19Updated 2 years ago
- 易观开源大数据互联网百亿级记录互传Backquarter项目☆19Updated 2 years ago
- Zdal是支付宝自主研发的数据中间件产品，采用标准的JDBC规范，可以在分布式环境下看上去像传统数据库一样提供海量数据服务，是一种通用的分库分表数据库访问框架，解决单库单表数据库访问压力，Zdal主要提供分库分表，结果集合并，sql解析，数据库failover动态切换等功能…☆18Updated 6 years ago
- 在公司接了一个任务，完成一个项目数据同步的模块。要求是不能操作项目的数据库。怕操作不当，数据丢失。所以想到的方案是使用log4jdbc记录数据源的SQL语句到日志文件。然后按行读取日志文件中的数据，记录读取的Point，以便下次继续读取。读取的数据进入bigqueue队列，…☆12Updated 7 years ago