godelgnisEJW / real-time-monitoring-system
本项目主要用于搭建一个基于docker的实时监控系统，涉及的大数据相关组件有Filebeat，Kafka，Zookeeper，Flink，后端主要使用了SpringBoot进行开发，数据库使用了Redis做缓存，前端用了Vue框架，通过Ant Design组件库和Echarts进行开发
☆39Updated 2 years ago
Alternatives and similar repositories for real-time-monitoring-system:
Users that are interested in real-time-monitoring-system are comparing it to the libraries listed below
- 使用Storm实时处理交通大数据（数据源：kafka，集群管理：zookeeper）☆51Updated 2 years ago
- ❄️本仓库包含Java学习笔记和大数据学习笔记，主要包含Java基础、JavaWEB、Java框架、大数据主要框架。主要内容为：Java、Mysql、SSM、SpringBoot、MyBatisPlus、MyBatis、Hadoop、Hive、Flume、Kakfa、HBa…☆22Updated last year
- 基于spark streaming+flume+kafka+hbase的实时日志处理分析系统(分为控制台版本和基于springboot、Echarts等的Web UI可视化版本)☆36Updated last year
- 基于标签的用户行为日志大数据分析系统☆20Updated 3 years ago
- 大数据招聘信息分析平台☆41Updated 8 years ago
- 传统大数据分析工具以Hadoop、Spark为代表，集成了大量的技术框架， 对用户来说又重又笨又不灵活，难以维护和驾驭，国际和国内的敏捷型BI工具在对接时又面临性能、友好性、定制化能力弱的缺点。本项目独辟蹊径，以阿里开源的DataX为ETL工具，以列式数据库ClickHou…☆64Updated 4 years ago
- 亿矿云大数据处理框架：借助Hadoop、Spark、Storm等分布式处理架构，满足海量数据的批处理和流处理计算需求。 亿矿云大数据预处理：运用数据冗余剔除、异常检测、归一化等方法对原始数据进行清洗，为后续存储、管理与分析提高质量数据来源。 亿矿云大数据存储与管理：通过分布…☆16Updated last year
- spark streaming从kafka读取消息，offset写入Redis，spark计算单词出现频率，最后写入hive表☆16Updated 5 years ago
- 基于flink的推荐系统，实时获取kafka数据进行数据清洗，离线计算进行文件读取（文件,mongodb,hbase）运用协同过滤算法进行计算得出推荐数据☆18Updated 2 years ago
- 最好的大数据项目。《Titan数据运营系统》，本项目是一个全栈闭环系统，我们有用作数据可视化的web系统，然后用flume-kafaka-flume进行日志的读取，在hive设计数仓，编写spark代码进行数仓表之间的转化以及ads层表到mysql的迁移，使用azkaban…☆121Updated 3 years ago
- 基于Flink流处理的动态实时亿级全端用户画像系统可视化界面☆34Updated 2 years ago
- 源码主要用于学习：1. Spring Boot+Hadoop+Hive+Hbase实现数据基本操作,Hive数据源使用Alibaba DruidDataSource，以及JDBCTemplate操作数据, Hbase使用hbase-client实现数据操作, API可视化界…☆20Updated 3 years ago
- 基于hadoop生态搭建的电商数据仓库，整体功能架构包含数据采集、数仓搭建、数据导出、数据可视化等☆54Updated 2 years ago
- 基于Spark的行为日志分析系统☆16Updated 2 years ago
- 基于开源Litemall电商项目的大数据项目，包含前端埋点(openresty+lua)、后端埋点；数据仓库(五层)、实时计算和用户画像。大数据平台采用CDH6.3.2(已使用vagrant+ansible脚本化)，同时也包含了Azkaban的workflow。☆107Updated 2 years ago
- 基于spark的外卖大数据平台分析系统☆42Updated 6 years ago
- 数据分析快速开发平台：包含统一数据访问接口，数据建模，数据治理，数据展现☆22Updated 6 years ago
- 实现了一整套电商数仓的搭建，包括数据采集平台的搭建，将用户的行为数据分为四层分别分层搭建，并实现业务数据库的分层搭建，针对数据仓库中的数据进行，留存、转化率、复购率、GMV、活跃等报表分析，使用当下主流程数的框架，这个项目采用Apache版本的框架实现，后续会上传CDH版本…☆49Updated 2 years ago
- 基于Flink+Kafka的全链路数仓, 包括实时和离线☆36Updated last year
- 基于Spark2.2新闻网大数据实时系统项目☆60Updated 5 years ago
- jun_bigdata大数据平台服务框架。实现了Kafka实时数据过滤、清洗、转换、消费，实现了Spark SQL对Redis、MongoDB等非关系型数据库的数据的读写；集成了规则引擎，可基于规则引擎实现客户标签、画像等相关功能。输出各类大屏展示看板DashBoard等☆27Updated last year
- AMS实时推荐系统☆16Updated 2 years ago
- Flink 案例开发数据清洗、数据报表☆52Updated 2 years ago
- 基于ElasticSearch + Spark的智能搜索和推荐系统☆18Updated 11 months ago
- Flink 电商指标分析系统☆33Updated last year
- zhili数据平台主要包含统一认证(zhili-auth)、元数据管理（zhili-metadata）、即席查询(zhili-adhoc)、数据服务(zhili-dataservice)、数据采集(zhili-collect)等子项目。☆56Updated 2 years ago
- 基于SparkSQL的电影分析项目实战☆39Updated 4 years ago
- 大数据实习hdfs+flume+kafka+spark+hbase+hive项目☆32Updated 7 years ago
- 基于Hadoop的Web日志分析，包括日志的清洗、日志的统计分析、统计结果的导出、指标数据的Web展示☆41Updated 2 years ago
- 谷粒学院后台管理UI，谷粒学院是一个B2C模式的职业技能在线教育系统，分为前台用户系统和后台运营平台。☆28Updated last year