TurboWay / pybigdataLinks
使用 python 操作大数据的各种组件
☆68Updated 2 years ago
Alternatives and similar repositories for pybigdata
Users that are interested in pybigdata are comparing it to the libraries listed below
Sorting:
- SpiderAdmin 一个集爬虫Scrapy+Scrapyd爬虫项目查看 和 爬虫任务定时调度的可视化管理工具☆95Updated 4 years ago
- 实现了一整套电商数仓的搭建，包括数据采集平台的搭建，将用户的行为数据分为四层分别分层搭建，并实现业务数据库的分层搭建，针对数据仓库中的数据进行，留存、转化率、复购率、GMV、活跃等报表分析，使用当下主流程数的框架，这个项目采用Apache版本的框架实现，后续会上传CDH版本…☆56Updated 3 years ago
- 💡数据化运营💡：会员数据化运营(RFM模型、营销响应预测)、商品数据化运营、流量数据化运营、内容数据化运营☆46Updated 6 years ago
- 模拟电商系统上线运行一段时间后，根据收集到大量的用户行为数据，利用大数据技术（Flink）进行深入挖掘和分析，进而得到感兴趣的商业指标并增强对风险的控制。 整体可以分为用户行为习惯数据和业务行为数据两大类。用户的行为习惯数据包括了用户的登录方式、上线的时间点及时长、点击和浏…☆133Updated 5 years ago
- 爬取知乎用户并对单个用户进行画像分析☆101Updated 6 years ago
- 参与针对于2019-nCoV数据可视化预测项目，后端完全使用ElasticSearch集群/Redis缓存，利用Flask提供API Server，利用前端/中后/前台的接口配合完成新型冠状病毒的疫情发展的相关信息可视化以及预测，方便观察疫情发展情况，并结合机器学习模型对疫…☆23Updated 5 years ago
- 数据治理、数据质量检核/监控平台（Django+jQuery+MySQL）☆190Updated 2 years ago
- 基于Django和Hadoop集群进行的大数据分析平台☆69Updated 7 years ago
- 数据治理、数据标准相关的 web 工具☆39Updated 3 years ago
- 用于职位发布，简历投递，招聘管理的开源项目，一个即刻能用的项目，Powered by Python & Django☆129Updated last year
- spark tutorial for big data mining。包括app流量运营分析、als推荐、smote样本采样、RFM客户价值分群、AHP层次分析客户价值得分、手机定位数据商圈挖掘、马尔可夫智能邮件预测、时序预测、关联规则、推荐电影好友等。☆40Updated 3 years ago
- 人 工智能Python全栈工程师 人工智能时代已经来临，再不学习就会被淘汰！ python考试，已经被列为国家计算机二级考试 python课程，已经被浙江的中学列为必修课内容之一 python课程，已经被山东的小学列为选修课课程之一 零基础？ 怕啥，君社教育来帮你！ Pyt…☆106Updated 4 years ago
- 猎头招聘数据仓库☆40Updated 7 years ago
- 一键搭建zookeeper/hadoop/hive/hbase/sqoop/kafka/spark/kylin☆33Updated 5 years ago
- 强大的 SQL 语法拓展，目标是打造 "易读易写 方便维护" 的 sql 脚本 | SQL Extension☆29Updated 5 years ago
- Python related technologies used in work: crawler, data analysis, timing tasks, RPC, page parsing, decorator, built-in functions, Python …☆104Updated 6 years ago
- 信用卡违约率分析☆21Updated 6 years ago
- 传统大数据分析工具以Hadoop、Spark为代表，集成了大量的技术框架， 对用户来说又重又笨又不灵活，难以维护和驾驭，国际和国内的敏捷型BI工具在对接时又面临性能、友好性、定制化能力弱的缺点。本项目独辟蹊径，以阿里开源的DataX为ETL工具，以列式数据库ClickHou…☆67Updated 5 years ago
- 基于Flask+apscheduler的定时任务系统☆112Updated 5 years ago
- 项目介绍： 智能交互金融智能聊天。具体实现用户在所有关于股票话题的智能问答。其中难点是问题 分类、数据预处理、参数提取。 ☆个人工作： 实现金融智能聊天,实现所有股票问题的精确回答。通过提取通用特征将5亿+条训练语料缩减为10w条，语料内存占用量从10G减少到2M，并将…☆67Updated 6 years ago
- 拉勾网+BOSS直聘网招聘信息大数据分析项目_数据获取+数据清洗+数据分析+数据可视化☆169Updated 3 years ago
- 这是一个数据查询和可视化的简单示例。 This is a simple project for data query and data visualization.☆46Updated 6 years ago
- 基于Spark2.2新闻网大数据实时系统项目☆61Updated 6 years ago
- 自主开发、整理的一套 Python 基础函数库，涵盖 system 系统增强包、logger 日志记录增强包、file 文件处理增强包、 date 日期处理函数包、data 数据信息处理函数包、csv 处理增强函数包、crypt 加密/编码增强包等，可减少程序开发工作量、降…☆99Updated 3 years ago
- 《左手MongoDB，右手Redis——从入门到商业实战》书籍配套源代码。☆213Updated last year
- 大数据分析可视化实践☆277Updated 4 years ago
- ⌚️让添加执行计划任务变得更加优雅~ Flask-Apscheduler Job Center🌹☆233Updated last year
- 基于SparkSQL的电影分析项目实战☆40Updated 4 years ago
- 爬虫项目，领英、专利、乐捐、好大夫、阿里拍卖、看准网、实习僧、百度百科、51job、智联招聘等近80个网站☆81Updated 5 years ago
- SuperBI 是达闼科技以开源项目superset为基础开发的企业级快速BI应用。 可扩展的框架设计，支持多种DBMS数据源，让数据BI更加简单。 superbi提供直观的UI，拖拽式的编辑体验，配置式的图例创建，轻松创建数据可视化dashboard的能力。☆48Updated 4 years ago