a244591052 / docker-spark-hadoop
使用容器搭建大数据架构微服务
☆12Updated 6 years ago
Related projects ⓘ
Alternatives and complementary repositories for docker-spark-hadoop
- flink-docker-compose-demo☆10Updated 6 years ago
- docker-hadoop-spark-hive 快速构建你的大数据环境☆21Updated 4 years ago
- springboot项目使用脚手架，集成redis、mysql、pg，hbase、elasticsearch、kafka等常用组件功能☆19Updated 2 years ago
- POC for all the stack of big data (kafka, spark, cassandra, hdfs, docker, springboot)☆12Updated last year
- 【易车】- Spark、flink、HBase、Hive、flume集成了一些Hadoop的原生api的一些demo（如HDFS、MapReduce：目前就这两个）；同时测试一些异常功能☆16Updated 5 years ago
- spring+spark streaming+kafka 10版本集成和异常问题处理☆17Updated 7 years ago
- phoenix 操作hbase和springboot的整合☆11Updated 6 years ago
- 基于Hadoop和HBase的大规模海量数据去重☆29Updated 6 years ago
- 常用大数据工具学习实战，包含Hadoop、HBase、Kafka、ClickHouse、Hive、Redis、Zookeeper...☆21Updated 2 years ago
- 基于Spring cloud、dubbo、oauth2的微服务应用☆16Updated 6 years ago
- 一键搭建zookeeper/hadoop/hive/hbase/sqoop/kafka/spark/kylin☆34Updated 4 years ago
- 电商+大数据+spark机器学习☆16Updated 6 years ago
- SpringBoot操作Elasticsearch的实战案例，elasticsearch 2.4.5/5.6.1☆35Updated 4 years ago
- 大数据组件学习；包括dataflow，spring cloud stream；elasticsearch；flink；spark；kafka；phoenix；Hive；Hbase；☆22Updated 2 years ago
- 大数据生态圈学习☆18Updated 2 years ago
- SpringBoot + Apache Mahout 推荐引擎 基于用户评分数据推荐相关电影☆11Updated 6 years ago
- 大型分布式系统实时监控平台☆28Updated last year
- 论坛日志分析系统清洗程序(包含IP规则库，UDF开发，MapReduce程序，日志数据)☆33Updated 6 years ago
- 自助搭建的 hadoop + spark + kafka + zookeeper + storm + hbase + hive + flume 集群，一主两从。☆30Updated 5 years ago
- 基于springcloud + token + redis + mongodb 的微服务平台☆41Updated 5 years ago
- 拉比克是一个开源大数据平台构建方案，已稳定应用于生产集群。融合Hadoop、Hive、Hbase、zookeeper等如CDH☆14Updated 5 years ago
- hadoop flume hbase kafka storm；读取kafka数据=》storm实时处理（分割字符，统计字符）=》写入hdfs☆21Updated 6 years ago
- 在公司接了一个任务，完成一个项目数据同步的模块。要求是不能操作项目的数据库。怕操作不当，数据丢失。所以想到的方案是使用log4jdbc记录数据源的SQL语句到日志文件。然后按行读取日志文件中的数据，记录读取的Point，以便下次继续读取。读取的数据进入bigqueue队列，…☆12Updated 7 years ago
- 解析Mysql binlog日志并发至Kafka☆23Updated 7 years ago
- 使用spark对hive、hbase、ES的读写， 实现一次配置可对不同数据库进行导入导出，并对ES、hbase进行封装☆32Updated 7 years ago
- 可以说近几年Spark的流行带动了Scala的发展，它集成了面向对象编程和函数式编程的各种特性，Scala具有更纯Lambda表粹的函数式业务逻辑解决方案，其语法比Java8后Lambda更加简洁方便，SpringBoot为Spring提供了一种更加方便快捷的方式，不再要求…☆61Updated 7 years ago