JunjianS / spark-streaming-kafka-demoLinks
spark streaming从kafka读取消息，offset写入Redis，spark计算单词出现频率，最后写入hive表
☆17Updated 6 years ago
Alternatives and similar repositories for spark-streaming-kafka-demo
Users that are interested in spark-streaming-kafka-demo are comparing it to the libraries listed below
Sorting:
- SpringBoot + Apache Mahout 推荐引擎 基于用户评分数据推荐相关电影☆11Updated 7 years ago
- 使用spark对hive、hbase、ES的读写， 实现一次配置可对不同数据库进行导入导出，并对ES、hbase进行封装☆33Updated 8 years ago
- 基于flink的推荐系统，实时获取kafka数据进行数据清洗，离线计算进行文件读取（文件,mongodb,hbase）运用协同过滤算法进行计算得出推荐数据☆20Updated 3 years ago
- 源码主要用于学习：1. Spring Boot+Hadoop+Hive+Hbase实现数据基本操作,Hive数据源使用Alibaba DruidDataSource，以及JDBCTemplate操作数据, Hbase使用hbase-client实现数据操作, API可视化界…☆22Updated 4 years ago
- springboot项目使用脚手架，集成redis、mysql、pg，hbase、elasticsearch、kafka等常用组件功能☆21Updated 3 years ago
- 本项目主要用于搭建一个基于docker的实时监控系统，涉及的大数据相关组件有Filebeat，Kafka，Zookeeper，Flink，后端主要使用了SpringBoot进行开发，数据库使用了Redis做缓存，前端用了Vue框架，通过Ant Design组件库和Echar…☆42Updated 2 years ago
- 自助搭建的 hadoop + spark + kafka + zookeeper + storm + hbase + hive + flume 集群，一主两从。☆30Updated 6 years ago
- 常用大数据工具学习实战，包含Hadoop、HBase、Kafka、ClickHouse、Hive、Redis、Zookeeper...☆23Updated 2 years ago
- 项目实战：Hadoop生态圈☆30Updated 7 years ago
- Spark Streaming + kafka + hbase☆15Updated 6 years ago
- spark全示例代码(java、scala) Spark most full instance code DEMO (java、scala)☆84Updated 5 years ago
- 【易车】- Spark、flink、HBase、Hive 、flume集成了一些Hadoop的原生api的一些demo（如HDFS、MapReduce：目前就这两个）；同时测试一些异常功能☆16Updated 6 years ago
- Streaming 相关项目☆15Updated 8 years ago
- SparkStreaming项目，显示flume->Kafka->Spark->hbase(实时数据处理方案)，Scala实现☆36Updated 7 years ago
- kafka传数据到Flink存储到mysql之Flink使用SQL语句聚合数据流（设置时间窗口，EventTime）☆32Updated 7 years ago
- 基于SparkSQL的电影分析项目实战☆40Updated 4 years ago
- 使用Storm实时处理交通大数据（数据源：kafka，集群管理：zookeeper）☆51Updated 2 years ago
- 电商+大数据+spark机器学习☆17Updated 7 years ago
- 内嵌AI的数据质量控制系统☆48Updated 3 years ago
- AMS实时推荐系统☆17Updated 2 years ago
- 基于Spark和Kubernetes的机器学习平台☆31Updated 7 years ago
- java 人脸识别; Face recognition☆13Updated 6 years ago
- 基于spark-ml,spark-mllib,spark-streaming的推荐算法实现☆96Updated 6 years ago
- 大数据组件学习；包括dataflow，spring cloud stream；elasticsearch；flink；spark；kafka；phoenix；Hive；Hbase；☆23Updated 3 years ago
- 大型分布式系统实时监控平台☆28Updated 2 years ago
- 基于spark streaming+flume+kafka+hbase的实时日志处理分析系统(分为控制台版本和基于springboot、Echarts等的Web UI可视化版本)☆38Updated 2 years ago
- 大数据框架 Spark MLlib 机器学习库基础算法全面讲解,附带齐全的测试文件☆40Updated last year
- 大数据建模分析平台☆66Updated 6 years ago
- 此工程采用SpringBoot + Mybatis + SparkSQL + Hive框架进行集成，支持Kerberos认证。☆22Updated 7 years ago
- spring+spark streaming+kafka 10版本集成和异常问题处理☆17Updated 8 years ago