yikuangcloud / 1kuang_datas
亿矿云大数据处理框架:借助Hadoop、Spark、Storm等分布式处理架构,满足海量数据的批处理和流处理计算需求。 亿矿云大数据预处理:运用数据冗余剔除、异常检测、归一化等方法对原始数据进行清洗,为后续存储、管理与分析提高质量数据来源。 亿矿云大数据存储与管理:通过分布式文件系统、NoSQL数据库、关系数据库、时序数据库等不同的数据管理引擎实现海量工业数据的分区选择、存储、编目与索引等。
☆16Updated last year
Alternatives and similar repositories for 1kuang_datas:
Users that are interested in 1kuang_datas are comparing it to the libraries listed below
- 本项目主要用于搭建一个基于docker的实时监控系统,涉及的大数据相关组件有Filebeat,Kafka,Zookeeper,Flink,后端主要使用了SpringBoot进行开发,数据库使用了Redis做缓存,前端用了Vue框架,通过Ant Design组件库和Echar…☆41Updated 2 years ago
- 数据大屏可视化,大数据分析(SpringBoot+hiveJDBC+echarts)☆37Updated 3 years ago
- ❄️本仓库包含Java学习笔记和大数据学习笔记,主要包含Java基础、JavaWEB、Java框架、大数据主要框架。主要内容为:Java、Mysql、SSM、SpringBoot、MyBatisPlus、MyBatis、Hadoop、Hive、Flume、Kakfa、HBa…☆23Updated last year
- zxl-hadoop是一个大数据服务管理工具,基于Web界面,提供服务器集群的各种指标监控,并提供HDFS、MapReduce、Hive、Flink、Habase、Zookeeper、Kafka、Sqoop等大数据组件的一键式安装。☆19Updated 3 years ago
- 汽车TBOX数据采集及分析系统设计与实现☆30Updated 3 years ago
- 007 基于网络爬虫技术的新闻分析系统-毕业设计展示 python django vue scrapy jieba nlp 爬虫抓取 新闻列表 新闻详情 新闻分类 新闻摘要抽取 关键词分析 情感分析 朴素贝叶斯算法 词性分析 后台管理新闻数据☆12Updated last year
- 在传统的数据分析平台中,如果我们想要分析近一年网站的用户增长趋势,通常需要手动导入数据、选择要分析的字段和图表,并由专业的数据分析师完成分析,最后得出结论。然而,本次设计的项目与传统平台有所不同。在这个项目中,用户只需输入想要分析的目标,并上传原始数据,系统将利用 AI 自…☆11Updated last month
- 金融反欺诈预测系统,技术涉及Vue3、Flask、XGBoost等。本项目提供了完整的Web系统,系统功能包括信贷数据分析、信贷欺诈数据检测、用户历史预测记录、用户数据管理等。项目整体并不复杂,适合新手练手学习机器学习与Web系统的结合。☆46Updated 2 years ago
- 基于hadoop生态搭建的电商数据仓库,整体功能架构包含数据采集、数仓搭建、数据导出、数据可视化等☆56Updated 2 years ago
- 基于标签的用户行为日志大数据分析系统☆20Updated 4 years ago
- spark streaming从kafka读取消息,offset写入Redis,spark计算单词出现频率,最后写入hive表☆16Updated 5 years ago
- QSHOP-BBC3.0商城是基于当前流行技术组合的前后端分离商城系统: SpringBoot2+Jpa+MybatisPlus+SpringSecurity+jwt+redis+Vue的前后端分离的商城系统, 包含商城、拼团、砍价、商户管理、 秒杀、优惠券、积分、分销、会…☆14Updated 4 years ago
- SmartCommunity是一套适合互联网企业使用的开源应急管理综合应用平台统,是充分利用移动互联网信息技术的集成应用,以家庭为中心、结合社区、商家等服务主体,将物业服务、社区服务等整合在一个高效的系统之中。让市民轻松享受安全、便捷、精彩、健康、幸福的智慧生活,本项目为前…☆42Updated 5 months ago
- 本人毕业设计课题为《互联网大数据时代的酒店预订平台设计与实现》,由Leme34/fun+Leme34/fun-app+Leme34/fun-backend三个项目构成,项目以及全部组件使用Docker搭建,全套Hadoop+Hive+Kafka+Spark+ElasticS…☆22Updated last year
- 智能BI,接入chatGPT的数据可视化分析工具,通过智能的数据分析和可视化能力帮助构建数据分析系统☆9Updated last year
- 传统大数据分析工具以Hadoop、Spark为代表,集成了大量的技术框架, 对用户来说又重又笨又不灵活,难以维护和驾驭,国际和国内的敏捷型BI工具在对接时又面临性能、友好性、定制化能力弱的缺点。本项目独辟蹊径,以阿里开源的DataX为ETL工具,以列式数据库ClickHou…☆64Updated 4 years ago
- 使用Hadoop、Spark等实现的大数据平台项目☆25Updated 2 years ago
- 实现了一整套电商数仓的搭建,包括数据采集平台的搭建,将用户的行为数据分为四层分别分层搭建,并实现业务数据库的分层搭建,针对数据仓库中的数据进行,留存、转化率、复购率、GMV、活跃等报表分析,使用当下主流程数的框架,这个项目采用Apache版本的框架实现,后续会上传CDH版本…☆51Updated 2 years ago
- BlackChat是一个黑色主题的IM即时聊天Web应用,结合了即时聊天和社交网络功能。 用户可以使用微信登录,实现即时聊天、发送图片、语音和表情等多种消息类型。 应用还提供社交网络功能,包括好友关系、私信、动态发布和浏览。黑色主题界面给用户带来独特的视觉体验。 消息推送功…☆9Updated last year
- 大数据离线项目之:BI上报(Hadoop、Hbase、Hive、flume、sqoop)☆13Updated 2 years ago
- 基于大数据、人工智能的招聘大数据分析展示系统——前端可视化☆22Updated 2 years ago
- 毕设项目--面向短视频的流量数据爬取和分析系统☆30Updated 4 years ago
- ☆11Updated last year
- 共享单车综合管控大数据分析平台☆17Updated 2 years ago
- 基于粒子群算法的中职自动排课系统☆8Updated 2 years ago
- 基于SpringBoot+shiro构建的简单的医院系统 登录名:admin 密码:123456☆19Updated 2 years ago
- 一个基于Vue3&Springboot&Tensorflow的音视频会议系统(毕业设计),音视频框架采用webRTC.通过人脸识别实现拍照登录和入会身份检验。☆28Updated last year
- 此项目是对大学生的一卡通消费数据、图书借阅记录和图书馆门禁数据在spark集群的大数据框架环境之下进行聚类、关联分析,分析出学生的消费水平、生活规律、学习强度等聚类结果,以及将聚类结果进行FPGrowth关联分析得出学生聚类之间存在的关联性,此项目是使用scala语言,利用…☆62Updated 6 months ago
- 亿可控是一个物联网设备监控系统,能够对各种硬件设备进行远程监控,上报监控数据,对设备的运行情况进行实时预警。☆22Updated 2 years ago
- 分片上传投稿+私人影片仓库管理+协同视频流播放/实时消息互动+好友管理+放映室管理☆27Updated 2 years ago