TurboWay / pybigdataLinks
使用 python 操作大数据的各种组件
☆68Updated 2 years ago
Alternatives and similar repositories for pybigdata
Users that are interested in pybigdata are comparing it to the libraries listed below
Sorting:
- SpiderAdmin 一个集爬虫Scrapy+Scrapyd爬虫项目查看 和 爬虫任务定时调度的可视化管理工具☆96Updated 4 years ago
- 实现了一整套电商数仓的搭建，包括数据采集平台的搭建，将用户的行为数据分为四层分别分层搭建，并实现业务数据库的分层搭建，针对数据仓库中的数据进行，留存、转化率、复购率、GMV、活跃等报表分析，使用当下主流程数的框架，这个项目采用Apache版本的框架实现，后续会上传CDH版本…☆57Updated 3 years ago
- 参与针对于2019-nCoV数据可视化预测项目，后端完全使用ElasticSearch集群/Redis缓存，利用Flask提供API Server，利用前端/中后/前台的接口配合完成新型冠状病毒的疫情发展的相关信息可视化以及预测，方便观察疫情发展情况，并结合机器学习模型对疫…☆23Updated 5 years ago
- 模拟电商系统上线运行一段时间后，根据收集到大量的用户行为数据，利用大数据技术（Flink）进行深入挖掘和分析，进而得到感兴趣的商业指标并增强对风险的控制。 整体可以分为用户行为习惯数据和业务行为数据两大类。用户的行为习惯数据包 括了用户的登录方式、上线的时间点及时长、点击和浏…☆136Updated 5 years ago
- 数据治理、数据标准相关的 web 工具☆39Updated 3 years ago
- django+es搭建的前后端分离，唐诗宋词搜索引擎。☆36Updated 3 years ago
- 基于Spark2.2新闻网大数据实时系统项目☆61Updated 6 years ago
- 强大的 SQL 语法拓展，目标是打造 "易读易写 方便维护" 的 sql 脚本 | SQL Extension☆29Updated 5 years ago
- 基于Django和Hadoop集群进行的大数据分析平台☆70Updated 8 years ago
- 💡数据化运营💡：会员数据化运营(RFM模型、营销响应预测)、商品数据化运营、流量数据化运营、内容数据化运营☆47Updated 6 years ago
- ⌚️让添加执行计划任务变得更加优雅~ Flask-Apscheduler Job Center🌹☆234Updated last year
- 用于职位发布，简历投递，招聘管理的开源项目，一个即刻能用的项目，Powered by Python & Django☆131Updated last year
- 大数据分析可视化实践☆277Updated 5 years ago
- 《左手MongoDB，右手Redis——从入门到商业实战》书籍配套源代码。☆214Updated last year
- 电商平台数据仓库搭建☆137Updated 10 months ago
- 猎头招聘数据仓库☆40Updated 7 years ago
- docker-hadoop-spark-hive 快速构建你的大数据环境☆21Updated 5 years ago
- 基于mongodb存储，redis缓存，celery 实现的分布式爬虫。☆13Updated 3 years ago
- 数据治理、数据质量检核/监控平台（Django+jQuery+MySQL）☆190Updated 3 years ago
- python/fastapi + golang/gin + Vue + docker 基于异步技术栈的个人博客系统☆155Updated 2 years ago
- scrapy框架爬取51job(scrapy.Spider)，智联招聘(扒接口)，拉勾网(CrawlSpider)☆200Updated 2 years ago
- 可视编程机器学习平台 - 『人人可做的机器学习』-《智能数据挖掘》实战系列视频演示实验数据集与数据分析流☆20Updated 4 years ago
- 一键搭建zookeeper/hadoop/hive/hbase/sqoop/kafka/spark/kylin☆33Updated 5 years ago
- 基于Python+scrapy+redis的分布式爬虫实现框架☆59Updated 5 years ago
- 这是一个数据查询和可视化的简单示例。 This is a simple project for data query and data visualization.☆46Updated 7 years ago
- 基于APScheduler二次开发，支持集群，可视化，API动态调用等等。BUG及时通知到微信，网页等等。☆61Updated 2 years ago
- 拉勾网+BOSS直聘网招聘信息大数据分析项目_数据获取+数据清洗+数据分析+数据可视化☆171Updated 3 years ago
- 基于Flask开发企业级API应用系列文章项目源码☆76Updated 4 years ago
- 今日热榜项目TopList的Python实现，异步爬取微博热榜，知乎，V2EX，GIthub，通过Flask展示。☆69Updated 6 years ago
- Python3实战Spark大数据分析及调度☆22Updated 6 years ago