dingke512 / DingLogAnalysis
☆17Updated last year
Related projects ⓘ
Alternatives and complementary repositories for DingLogAnalysis
- 基于hadoop生态搭建的电商数据仓库，整体功能架构包含数据采集、数仓搭建、数据导出、数据可视化等☆50Updated 2 years ago
- spark大数据大型电商项目☆12Updated 4 years ago
- Spark大型项目实战：电商用户行 为分析大数据平台\Spark大型项目实战：电商用户行为分析大数据平台（史上第一套高端大数据项目实战课程）☆27Updated last year
- 本项目分别电商数据统计模块及业务采集及数仓搭建模块，利用hive统计每个区域热门商品进行统计；依据业务数据实现离线业务数仓搭建。☆15Updated 2 years ago
- 最好的大数据项目。《Titan数据运营系统》，本项目是一个全栈闭环系统，我们有用作数据可视化的web系统，然后用flume-kafaka-flume进行日志的读取，在hive设计数仓，编写spark代码进行数仓表之间的转化以及ads层表到mysql的迁移，使用azkaban…☆117Updated 3 years ago
- 基于Hadoop、Spark、FLUME、HIVE等大数据组件搭建的一个分布式集群环境下的电影推荐及日志分析平台☆17Updated last year
- 大数据项目之用户上网行为分析☆59Updated last year
- 大数据项目实战之基于Spark2.X的新闻话题的实时统计分析☆25Updated 2 years ago
- 亿矿云大数据处理框架：借助Hadoop、Spark、Storm等分布式处理架构，满足海量数据的批处理和流处理计算需求。 亿矿云大数据预处理：运用数据冗余剔除、异常检测、归一化等方法对原始数据进行清洗，为后续存储、管理与分析提高质量数据来源。 亿矿云大数据存储与管理：通过分布…☆16Updated last year
- 使用Hadoop、Spark等实现的大数据平台项目☆22Updated 2 years ago
- 本项目来源于企业级电商网站的大数据统计分析平台，该平台以 Spark 框架为核心，对电商网站的日志进行离线和实时分析☆16Updated 3 years ago
- 本项目主要用于搭建一个基于docker的实时监控系统，涉及的大数据相关组件有Filebeat，Kafka，Zookeeper，Flink，后端主要 使用了SpringBoot进行开发，数据库使用了Redis做缓存，前端用了Vue框架，通过Ant Design组件库和Echar…☆39Updated last year
- 数据大屏可视化,大数据分析（SpringBoot+hiveJDBC+echarts)☆37Updated 2 years ago
- 分析各区域热门商品 —— 使用 Flume 采集数据，MapReduce 或 Spark Core 进行数据清洗，最后使用 Hive 或 Spark SQL 进行数据的分析和处理。☆14Updated 5 years ago
- 基于spark的大数据分析心脏病信息 更多详细说明在我的博客//zhuozhuo233.github.io/☆12Updated 2 years ago
- sparkStreaming项目，1.日志分析系统 2. 舆情管控系统之实时词频统计处理子系统（包括中文分词服务器）3. 网站用户行为统计系统（ 只统计用户行为，建模预测后期实现） 4. 网站安全实时监控报警系统。☆13Updated 2 years ago
- 基于Spark企业级用户画像项目☆109Updated last year
- 1.本项目利用Hadoop处理高校无线定位大数据,有效地将位置信息应用于学生时空行为模式挖掘，建立基于精准位置信息的行为数据挖掘计算模型。 2.基于Hadoop计算平台，并实现对大数据进行可视化分析的Web系统。 3.利用一些合适的算法实现校园热点区域提取、学生异常轨迹探测…☆47Updated last year
- 基于Hadoop的视频收视率分析，毕设项目☆46Updated last month
- 此项目是对大学生的一卡通消费数据、图书借阅记录和图书馆门禁数据在spark集群的大数据框架环境之下进行聚类、关联分析，分析出学生的消费水平、生活规律、学习强度等聚类结果，以及将聚类结果进行FPGrowth关联分析得出学生聚类之间存在的关联性，此项目是使用scala语言，利用…☆60Updated last month
- Spark电影数据分析实战，利用spark开发针对用户观影等历史行为数据进行采集、分析和展示☆19Updated 3 years ago
- 027 基于Spark协同过滤的农产品个性推荐系统-设计展示 python pyspark hadoop django scrapy vue element-plus 协同过滤算法 通过scrapy爬虫框架抓取“惠农网”网站上的农产品数据 前台用户通过登陆注册后进入系统 用…☆7Updated last year
- 基于spark的电商用户行为分析系统☆11Updated last year
- 2022 毕业设计，基于 Hadoop 的游戏数据分 析系统☆29Updated last year
- 大数据课程的期末项目，基于spark、hadoop hdfs、mongodb，使用scala，进行电影推荐☆16Updated 3 years ago
- ❄️本仓库包含Java学习笔记和大数据学习笔记，主要包含Java基础、JavaWEB、Java框架、大数据主要框架。主要内容为：Java、Mysql、SSM、SpringBoot、MyBatisPlus、MyBatis、Hadoop、Hive、Flume、Kakfa、HBa…☆21Updated last year
- 旅游网站(携程网部分数据)大数据分析-hadoop课程设计(本科课设级别)☆29Updated 8 months ago
- 2018全国云计算应用创新大赛一等奖作品。从零开始设计并构建“金科云盾”网站防护系统。该系统实现了大规模日志数据收集、高可用存储、分类归档、快速检索；基 于神经网络实时、精准地识别DDOS、慢连接等恶意攻击并直观展示；采用黑名单+防火墙封杀恶意IP，邮件实时告警。整个系 统…☆31Updated 3 years ago
- 基于标签的用户行为日志大数据分析系统☆20Updated 3 years ago
- 恶意代码检测系统。对接前端可视化与算法检测部分☆17Updated 9 months ago