MinPurple / syslogStreaming
基于Spark的实时日志分析及异常检测系统 Flume + Kafka + Hbase + Spark-Streaming + Scala
☆12Updated 5 years ago
Related projects ⓘ
Alternatives and complementary repositories for syslogStreaming
- 四川大学拓思爱诺用户session行为数据离线分析项目☆67Updated 2 years ago
- SparkStreaming项目，显示flume->Kafka->Spark->hbase(实时数据处理方案)，Scala实现☆35Updated 6 years ago
- 学习 Spark 的一个小项目，以及其中各种调优的笔记☆174Updated 7 years ago
- 模拟电商系统上线运行一段时间后，根据收集到大量的用户行为数据，利用大数据技术（Flink）进行深入挖掘和分析，进而得到感兴趣的商业指标并增强对风险的控制。 整体可以分为用户行为习惯数据和业务行为数据两大类。用户的行为 习惯数据包括了用户的登录方式、上线的时间点及时长、点击和浏…☆110Updated 4 years ago
- 基于spark-ml,spark-mllib,spark-streaming的推荐算法实现☆95Updated 5 years ago
- 基于Spark2.2新闻网大数据实时系统项目☆61Updated 5 years ago
- Spark Streaming监控平台，支持任务部署与告警、自启动☆127Updated 6 years ago
- Spark 学习之路，包含 Spark Core，Spark SQL，Spark Streaming，Spark mllib 学习笔记☆144Updated 6 years ago
- 基于flume+kafka+HBase+spark+ElasticSearch的用户轨迹查询大数据开发项目☆109Updated 2 years ago
- Spark中实现用户画像系统价值度、忠诚度、流失预警、活跃度等模型☆65Updated 7 years ago
- 大数据平台相关代码（ES/Hive/Hadoop/hdfs/hbase）☆74Updated 2 years ago
- 《Spark 大型电商项目实战》源码，博客地址：http://blog.csdn.net/u012318074/article/category/6744423☆213Updated 11 months ago
- SparkSQL数据分析案例☆23Updated 7 years ago
- 基于SparkSQL的电影分析项目实战☆39Updated 3 years ago
- 基于spark streaming和kafka，hbase的日志统计分析系统☆265Updated 7 years ago
- flink实时处理kafka传来的数据通过连接池技术写入hbase☆94Updated 2 years ago
- 本项目记录我学习hadoop和spark等开源框架的代码，因为也是最近才用github，之前都是荒废状态，故部分都是是之前写好的，现在上传至github☆84Updated 6 years ago
- 基于wifi抓取信息的大数据查询分析系统☆108Updated 7 years ago
- flink简易使用教程,结合官方仓库的example样例,结合常见场景,使用flink的基本功能☆111Updated 2 years ago
- 大数据招聘信息分析平台☆40Updated 8 years ago
- 电商大数据项目-推荐系统(java和scala语言)☆198Updated last year
- Streaming 相关项目☆15Updated 7 years ago
- 电商平台数据仓库搭建☆122Updated 2 years ago
- hbase + spark 实现常用推荐算法（主要用于精准广告投放和推荐系统）☆65Updated 8 years ago
- 一个手动管理spark streaming集成kafka时的偏移量到zookeeper中的小项目☆136Updated 3 months ago
- 基于spark streaming+flume+kafka+hbase的实时日志处理分析系统(分为控制台版本和基于springboot、Echarts等的Web UI可视化版本)☆36Updated last year
- Real-Time Analysis Integration with Kafka in Apache Spark’s Structured Streaming☆60Updated 6 years ago
- ☆42Updated 6 years ago
- 1.Spark离线批处理，用户实时点击统计；2.SparkSQL日志内容分析；3.受众电影分析 =>（Kafka + SparkStreaming + Redis）和（Kafka + SparkStreaming + Mysql）☆29Updated 2 years ago
- Spark Sql进行离线日志分析，Java Web+Echarts+Ajax进行数据可视化展示☆27Updated 6 years ago