wujun728 / jun_bigdata
jun_bigdata大数据平台常用服务。内含大数据组件常用的功能及demo,包括hadoop、hbase、hive、kafka等等,实现了Spark SQL对Redis、MongoDB等非关系型数据库的数据的读写等等
☆27Updated last week
Alternatives and similar repositories for jun_bigdata:
Users that are interested in jun_bigdata are comparing it to the libraries listed below
- 通过图形界面为数据监控以及数据同步提高良好的服务,可支持数据同步的数据源或数据库有:SQL数据源、NoSQL数据源、数据引擎、数据仓库、消息队列;通过Canal可支持数据库监控以及数据备份。☆24Updated 4 years ago
- 电商用户行为分析大数据平台☆33Updated 5 years ago
- davinci 的一键启动版本,不会出现启动报错, Maven导包出错,去掉注册之后的邮箱验证,注册之后直接登录, 适合想自己快速部署起来查看效果的, 所有许可权限归原作者所有:☆56Updated last year
- ☆61Updated last month
- 将kettle集成值web应用中,不再需打开kettle窗口运行,采用springmvc+beetlsql框架实现,并通过quartz自动任务进行数据抽取。配置简单方便。(之前需要kettle打开其运行环境,并配置数据库连接的相关信息)☆62Updated 6 years ago
- Flink 案例开发数据清洗、数据报表☆52Updated 2 years ago
- 此项目主要应用于数据中台或数据平台的数据总线,支持直接实时监听MySQL、MongoDB、PostgreSQL、Oracle、SQL Server、Db2和Cassandra等数据库的数据变更。☆62Updated last year
- 集数据中台,开放平台,API网关,user-auth,devops,SaaS租户账号下发于一体的企业级云管控平台☆39Updated 5 years ago
- 实时风控系统,基于spark-streaming、drools、kafka、redis☆51Updated 6 years ago
- 使用Storm实时处理交通大数据(数据源:kafka,集群管理:zookeeper)☆51Updated 2 years ago
- 基于Kettle的MySQL数据库同步☆26Updated 6 years ago
- zhili数据平台主要包含统一认证(zhili-auth)、元数据管理(zhili-metadata)、即席查询(zhili-adhoc)、数据服务(zhili-dataservice)、数据采集(zhili-collect)等子项目。☆56Updated 2 years ago
- 数据可视化, 数据挖掘, 数据处理 ETL分析☆167Updated 3 years ago
- 传统大数据分析工具以Hadoop、Spark为代表,集成了大量的技术框架, 对用户来说又重又笨又不灵活,难以维护和驾驭,国际和国内的敏捷型BI工具在对接时又面临性能、友好性、定制化能力弱的缺点。本项目独辟蹊径,以阿里开源的DataX为ETL工具,以列式数据库ClickHou…☆64Updated 4 years ago
- ETL Tools 数据抽取-转换-加载工具☆77Updated 8 years ago
- 元数据管理系统☆18Updated 7 years ago
- 蓝泰源大数据基础平台☆17Updated 7 years ago
- 数据分析快速开发平台:包含统一数据访问接口,数据建模,数据治理,数据展现☆23Updated 6 years ago
- 大数据建模分析平台☆63Updated 6 years ago
- 一个优秀的大数据查询平台,提供hive异步任务查询、LDAP用户、数据权限控制、历史查询任务与结果存储、邮件通知、excel下载等功能。☆24Updated 7 years ago
- 内嵌AI的数据质量控制系统☆45Updated 3 years ago
- 数据的导出(支持DB2、MySQL、Oracle、Teradata数据库的数据导出)、合并(支持将多个小数据文件合并成一个大的数据文件)、传输(支持FTP、SFTP数据传输)程序,适用于向指定FTP服务器供数的情况,常见于多个源系统以数据文件的形式向数据仓库集中供数。该程序…☆25Updated 9 years ago
- Data develop engine 数据研发引擎,用可视化的组件编排后台数据处理逻辑,配合消息触发、定时任务和restful接口等多种调度机制,从而能够代替传统的大部分后台接口研发。☆32Updated this week
- 大数据自动化部署,包括自动化部署hadoop、hive、hbase、spark、storm等等一系列组件☆66Updated 6 years ago
- 基于kettle8.0的作业/转换管理框架☆33Updated 6 years ago
- spring cloud集成全渠道在线客服以及后台管理系统,所有微服务之间的消息传递采用区块链技术,持续更新中~~目标是:第一阶段:采用spring cloud微服务搭建后台管理系统第二阶段:集成在线客服,采用netty实现websocket长连接第三阶段:集成h5、微信、…☆16Updated 2 years ago
- 基于DataX的通用数据同步微服务,一个Restful接口搞定所有通用数据同步☆53Updated 2 years ago
- skycloud-base 运维管理平台前端页面☆15Updated 2 years ago
- A distributed data factory, providing data access, etl, scheduling. Easily manage tasks such as hive, spark, clickhouse, flink, shell, py…☆32Updated 2 years ago
- 基于Flink+Kafka的全链路数仓, 包括实时和离线☆37Updated 2 years ago