最好的大数据项目。《Titan数据运营系统》,本项目是一个全栈闭环系统,我们有用作数据可视化的web系统,然后用flume-kafaka-flume进行日志的读取,在hive设计数仓,编写spark代码进行数仓表之间的转化以及ads层表到mysql的迁移,使用azkaban进行定时任务的调度,使用技术:Java/Scala语言,Hadoop、Spark、Hive、Kafka、Flume、Azkaban、SpringBoot,Bootstrap, Echart等;
☆146Nov 8, 2021Updated 4 years ago
Alternatives and similar repositories for TitanDataOperationSystem
Users that are interested in TitanDataOperationSystem are comparing it to the libraries listed below. We may earn a commission when you buy through links labeled 'Ad' on this page.
Sorting:
- 大数据处理相关技术学习之路(持续更新中...)。 Bigdata整理 --> 慢慢滴~ 大数据相关技术包括离线处理,实时处理,OLAP等,如hadoop、spark、flink、hive、hbase、oozie...以及大数据项目,如用户画像、数据仓库等,…☆345Jan 15, 2024Updated 2 years ago
- 基于开源Litemall电商项目的大数据项目,包含前端埋点(openresty+lua)、后端埋点;数据仓库(五层)、实时计算和用户画像。大数据平台采用CDH6.3.2(已使用vagrant+ansible脚本化),同时也包含了Azkaban的workflow。☆120May 16, 2022Updated 4 years ago
- SparkStreaming项目,显示flume->Kafka->Spark->hbase(实时数据处理方案),Scala实现☆37Feb 19, 2018Updated 8 years ago
- flink实时处理kafka传来的数据通过连接池技术写入hbase☆95Jul 18, 2022Updated 4 years ago
- spark大数据大型电商项目☆15May 26, 2020Updated 6 years ago
- Bare Metal GPUs on DigitalOcean Gradient AI • AdPurpose-built for serious AI teams training foundational models, running large-scale inference, and pushing the boundaries of what's possible.
- 实时数仓的一些数据处理(mysql、canal、kafka、flink、hbase、kudu等等),以及一堆Flink的练习☆11Jul 1, 2022Updated 4 years ago
- datax-kuduwriter☆11Aug 16, 2023Updated 2 years ago
- 【雪球-Infra】功能:实现kafka消息实时落地hbase,支持csv/json字符串两种格式的消息,支持自定义组合rowkey,列簇和列名,支持按照kafka消息流中不同字段join不同的hbase表,并自定义写入列簇和列(join时需评估一下性能), …☆22Dec 5, 2023Updated 2 years ago
- spark streaming从kafka读取消息,offset写入Redis,spark计算单词出现频率,最后写入hive表☆17Jul 30, 2019Updated 6 years ago
- 大数据收集,实时分析,离线分析经典案例☆21Apr 21, 2023Updated 3 years ago
- 基于Hadoop的视频收视率分析,毕设项目☆63Apr 24, 2026Updated 2 months ago
- 项目实战:Hadoop生态圈☆31Feb 27, 2018Updated 8 years ago
- phoenix 操作hbase和springboot的整合☆11Dec 7, 2017Updated 8 years ago
- 基于flink的电商实时数据分析、推荐、风控项目☆70Jul 24, 2022Updated 3 years ago
- Wordpress hosting with auto-scaling - Free Trial Offer • AdFully Managed hosting for WordPress and WooCommerce businesses that need reliable, auto-scalable performance. Cloudways SafeUpdates now available.
- 实现了一整套电 商数仓的搭建,包括数据采集平台的搭建,将用户的行为数据分为四层分别分层搭建,并实现业务数据库的分层搭建,针对数据仓库中的数据进行,留存、转化率、复购率、GMV、活跃等报表分析,使用当下主流程数的框架,这个项目采用Apache版本的框架实现,后续会上传CDH版本…☆61Jun 17, 2022Updated 4 years ago
- 用户埋点行为日志分析平台,项目主要用于搭建基于Flink、Apache Doris、Redis和MySQL等中间件的用户行为日志收集、存储、分析平台,支持用户自定义查询条件☆11Dec 28, 2023Updated 2 years ago
- 为知笔记批量导出☆11Sep 1, 2022Updated 3 years ago
- 基于SparkSQL的电影分析项目实战☆39Nov 21, 2020Updated 5 years ago
- 本项目主要用于搭建一个基于docker的实时监控系统,涉及的大数据相关组件有Filebeat,Kafka,Zookeeper,Flink,后端主要使用了SpringBoot进行开发,数据库使用了Redis做缓存,前端用了Vue框架,通过Ant Design组件库和Echar…☆41Jan 5, 2023Updated 3 years ago
- 从数据仓库到用户画像,从数据建设到数据应用☆642Jan 26, 2022Updated 4 years ago
- 深圳地铁大数据客流分析系统🚇🚄🌟☆2,470May 12, 2026Updated 2 months ago
- A naive hotel management system based on SpringBoot & Hadoop / 东南大学生产实训项目☆27Sep 13, 2021Updated 4 years ago
- 大数据项目:车流量监控☆67Jul 21, 2023Updated 3 years ago
- GPUs on demand by Runpod - Special Offer Available • AdRun AI, ML, and HPC workloads on powerful cloud GPUs—without limits or wasted spend. Deploy GPUs in under a minute and pay by the second.
- 大数据知识仓库涉及到数据仓库建模、实时计算、大数据、数据中台、系统设计、Java、算法等。☆1,788Apr 18, 2026Updated 3 months ago
- 基于Hadoop/Spark奥运会奖牌变化大数据分析实现毕业源码案例设计☆18Apr 30, 2023Updated 3 years ago
- 酒店后台管理系统(采用SSH框架开发),这个项目这要有四个功能模块。模拟酒店的正常员工的工作性质:前台、保洁、后厨、经理。前台主要是负责完成客户入住酒店的时候完成客户信息的注册、预定酒店房间的信息注册和客户预定餐饮的 订单信息注册。保洁主要是在客户到前台退房后,收到前台通知“…☆14May 30, 2019Updated 7 years ago
- 本项目以数据采集、处理、分析及数据可视化为项目流程,实现百万级电影数据离线处理与计算。功能包括python爬虫,Matplotlib、Echarts数据可视化、Mapreduce、hive数据统计、情感分析、词图云、电影票房与评分预测☆248Nov 14, 2021Updated 4 years ago
- 大数据相关框架实战项目(Hadoop, Spark, Storm, Flink)☆355Oct 4, 2022Updated 3 years ago
- 基于Hadoop、Spark、FLUME、HIVE等大数据组件搭建的一个分布式集群环境下的电影推荐及日志分析平台☆18Jan 6, 2023Updated 3 years ago
- ☆10Apr 13, 2020Updated 6 years ago
- 数据分析大作业项目:对2013年3月至2017年2月北京市12个地点的空气监测数据进行分析处理。☆10Nov 29, 2019Updated 6 years ago
- 一个模拟传感器接入控制, 数据监控平台(springboot 后端)☆11Feb 20, 2019Updated 7 years ago
- GPUs on demand by Runpod - Special Offer Available • AdRun AI, ML, and HPC workloads on powerful cloud GPUs—without limits or wasted spend. Deploy GPUs in under a minute and pay by the second.
- 在线编辑pdf文档☆11Jun 21, 2022Updated 4 years ago
- 基于SSM的心理咨询管理管理系统拥有三个角色:学生用户、咨询师、管理员 管理员:学生管理、咨询师管理、文档信息管理、预约信息管理、测试题目管理、测试信息管理、测试结果管理、留言板管理、轮播图管理等 学生用户:收藏、预约、答题、留言、登录、注册等 咨询师:登录注册、发布…☆12Jan 13, 2024Updated 2 years ago
- 这是一个Java版扫雷,GUI,界面优美、功能齐全。☆12Aug 28, 2020Updated 5 years ago
- 基于Spark2.x新闻网大数据实时分析可视化系统项目☆529Mar 28, 2019Updated 7 years ago
- 这是一个基于vue的简单新闻网站和该网站对应的用户行为分析系统新闻网部分包括首页、登录注册页、新闻详情页;用户行为分析系统部分主要通过分析该网站的特定时间段的登录数、注册数、访问数、广告访问数等行为等。☆10Jun 26, 2018Updated 8 years ago
- 大数据分析项目☆5,275Apr 27, 2023Updated 3 years ago
- 基于spark的大数据分析心脏病信息 更多详细说明在我的博客//zhuozhuo233.github.io/☆21Dec 26, 2021Updated 4 years ago