一个大数据实时流处理日志分析系统 Demo
☆30Nov 16, 2022Updated 3 years ago
Alternatives and similar repositories for RealTimeLogAnalyze
Users that are interested in RealTimeLogAnalyze are comparing it to the libraries listed below
Sorting:
- 在公司接了一个任务，完成一个项目数据同步的模块。要求是不能操作项目的数据库。怕操作不当，数据丢失。所以想到的方案是使用log4jdbc记录数据源的SQL语句到日志文件。然后按行读取日志文件中的数据，记录读取的Point，以便下次继续读取。读取的数据进入bigqueue队列，…☆12Aug 10, 2017Updated 8 years ago
- java爬虫，反爬虫策略、ETL清洗数据，以及spark离线和实时分析新闻并存入ES☆19Nov 26, 2018Updated 7 years ago
- 一个对用户行为日志进行分析的大数据项目☆71Jul 1, 2022Updated 3 years ago
- 基于Raft 实现的分布式缓存☆31Oct 4, 2022Updated 3 years ago
- 一个基于ElasticSearch的业务日志记录工具☆10Nov 5, 2018Updated 7 years ago
- 大规模图数据交互式可视化分析平台☆14Apr 23, 2018Updated 7 years ago
- Spark混合推荐系统大数据监控平台☆11May 1, 2018Updated 7 years ago
- DRDCDeviceMonitor Flink+Kafka+redis+rabbitmq实现的实时智能运维系统。☆27Aug 30, 2018Updated 7 years ago
- kafka传数据到Flink存储到mysql之Flink使用SQL语句聚合数据流（设置时间窗口，EventTime）☆31May 8, 2018Updated 7 years ago
- This repository contains implementation of DHNE : Network Representation Learning Method for Dynamic Heterogeneous Network.☆10May 11, 2019Updated 6 years ago
- 基于springbook+spark的机器学习应用开发☆12Nov 21, 2022Updated 3 years ago
- 使用Storm实时处理交通大数据（数据源：kafka，集群管理：zookeeper）☆50Dec 14, 2022Updated 3 years ago
- 在规格文件上直接执行SQL，无数据库依赖，基于Java8的流计算和Lamdba表达式。☆10Jun 15, 2017Updated 8 years ago
- 在线选座的的Demo，可以直接放在包里直接用，实时画座位，根据不同的状态和座位信息对座位进行操作，更具数据具体的画座位。可以放大缩小，横向纵向滑动。当座位数发大到超出屏幕的时候，滑动的时候在左上角出现整个座位的信息以及滑动的大概情况。实施刷新。☆12Jun 22, 2016Updated 9 years ago
- mglory是一个java分布式框架。具备以下功能：分布式计算、分布式内存存储(支持持久化)、分布式消息队列☆12Mar 16, 2015Updated 11 years ago
- 检测类路径下是否存在jar包中的class冲突，通常用于web应用的lib目录下class冲突检查☆10Aug 20, 2015Updated 10 years ago
- Pinot 是一个实时分布式的 OLAP 数据存储和分析系统。LinkedIn 使用它实现低延迟可伸缩的实时分析。Pinot 从离线数据源（包括 Hadoop 和各类文件）和在线数据源（如 Kafka）中攫取数据进行分析。Pinot 被设计是可以进行水平扩展的☆16Nov 8, 2015Updated 10 years ago
- sql 解析引擎 探索☆16Dec 29, 2017Updated 8 years ago
- Scalable CDC Pattern Implemented using PySpark☆18Oct 8, 2025Updated 5 months ago
- 监控维度：1.监控内容信息采集；2.监控对象Url，Spring，数据源，异常，jvm，服务信息；3.监控策略处理☆12Nov 2, 2018Updated 7 years ago
- 一个使用VUE搭建的关于医疗资源可视化系统☆11Jan 6, 2023Updated 3 years ago
- 基于机器学习的PM2.5预测与分析系统☆11Apr 18, 2017Updated 8 years ago
- 通过全国实时天气数据，高德地图数据，景点数据，采用大数据技术实时智能推荐旅游景点、规划旅游路线。包括湿度、风力、气温、天气状况等等☆10Jun 8, 2021Updated 4 years ago
- 使用flink快速构建实时监控系统报警☆19Sep 7, 2019Updated 6 years ago
- 基于Flume、Kafka、SparkSql模拟的实时日志分析系统☆12Feb 1, 2016Updated 10 years ago
- 企业级通用报表系统☆15Feb 2, 2024Updated 2 years ago
- Flink Hadoop Compatibility + Elasticsearch for Apache Hadoop = Flink Connector Elasticsearch Source Table。结合flink+hadoop+es 实现的es table s…☆19Jun 28, 2021Updated 4 years ago
- Zdal是支付宝自主研发的数据中间件产品，采用标准的JDBC规范，可以在分布式环境下看上去像传统数据库一样提供海量数据服务，是一种通用的分库分表数据库访问框架，解决单库单表数据库访问压力，Zdal主要提供分库分表，结果集合并，sql解析，数据库failover动态切换等功能…☆18Dec 17, 2018Updated 7 years ago
- 高性能大数据实时同步:kafka连接器(kafka-connect-kudu-sink插件)、海量日志流处理☆19Jun 17, 2022Updated 3 years ago
- 云笔记项目，大数据项目，Hbase+Redis+Hadoop+Zookeeper☆13May 2, 2018Updated 7 years ago
- 使用Spark批量处理离线交通大数据☆16Jan 5, 2018Updated 8 years ago
- 面包多支付Java版SDK☆11Feb 4, 2026Updated last month
- sparkStreaming项目，1.日志分析系统 2. 舆情管控系统之实时词频统计处理子系统（包括中文分词服务器）3. 网站用户行为统计系统（ 只统计用户行为，建模预测后期实现） 4. 网站安全实时监控报警系统。☆14Jul 1, 2022Updated 3 years ago
- SparkStreaming中利用MySQL保存Kafka偏移量保证0数据丢失☆44Aug 2, 2017Updated 8 years ago
- Programming in Hadoop and Spark☆13Jul 27, 2018Updated 7 years ago
- 近年来，草莓采摘旅游进入到了人们的视野。通过设计一款基于人工智能的平台来实现草莓成熟度检测、农业信息大数据分析管理与农作物知识普及，使用一套智能化系统来替换农场的部分销售与莓农的工作，提高农场经济利润与工作效率，普及中小学生农村经验教育。☆43Apr 6, 2022Updated 3 years ago
- Strom 实时风控统计☆21Nov 30, 2017Updated 8 years ago
- poseidonX 是一个基于jstorm和flink的一体化实时计算服务平台☆56Jul 23, 2018Updated 7 years ago
- 股票交易数据处理的整个业务流程 数据源--->数据采集--->数据归类--->数据储存--->数据分析--->数据可视化☆31Nov 23, 2016Updated 9 years ago