Alternatives and similar repositories for Data-Operation:

Users that are interested in Data-Operation are comparing it to the libraries listed below

• jecktion / myproject_zhaopin
  猎头招聘数据仓库
  ☆39Updated 6 years ago
• jacklon / bi_development_source_code
  传统大数据分析工具以Hadoop、Spark为代表，集成了大量的技术框架， 对用户来说又重又笨又不灵活，难以维护和驾驭，国际和国内的敏捷型BI工具在对接时又面临性能、友好性、定制化能力弱的缺点。本项目独辟蹊径，以阿里开源的DataX为ETL工具，以列式数据库ClickHou…
  ☆64Updated 4 years ago
• teamowu / SQL
  🧐SQL数据分析实战🧐：包含SQL基本查询语句、常用聚合函数、多表链接及如何通过SQL进行数据分析(漏斗模型、A/B test，转化率，UTM参数统计分析、用户流失率计算)
  ☆19Updated 5 years ago
• lishuaixingNewBee / BigData
  狗蛋实验室推出的智能化数据抓取、处理、分析，挖掘平台。提供美团、大众点评、饿了么、百度地图等数据。
  ☆43Updated 6 years ago
• zengxiao3p / mark
  本项目使用python3.5.2,使用scrapy作为爬取框架，主要爬取银行营销信息的爬虫项目，使用selenium模拟人工操作流程，包括保存登录信息cookies。 模拟人工操作规避ajax请求的动态渲染等问题，主要爬取银行官网，微信搜狗上银行的信息，微小宝上银行信息，银…
  ☆17Updated 5 years ago
• IronmanJay / E-CommerceWarehouse
  实现了一整套电商数仓的搭建，包括数据采集平台的搭建，将用户的行为数据分为四层分别分层搭建，并实现业务数据库的分层搭建，针对数据仓库中的数据进行，留存、转化率、复购率、GMV、活跃等报表分析，使用当下主流程数的框架，这个项目采用Apache版本的框架实现，后续会上传CDH版本…
  ☆49Updated 2 years ago
• chancechang / pySpider
  爬虫项目，领英、专利、乐捐、好大夫、阿里拍卖、看准网、实习僧、百度百科、51job、智联招聘等近80个网站
  ☆81Updated 4 years ago
• evanleungc / GoldSentAnalysis
  黄金舆情数据分析
  ☆46Updated 7 years ago
• likeweilikewei / financial-NLP-intelligent-interaction
  项目介绍： 智能交互金融智能聊天。具体实现用户在所有关于股票话题的智能问答。其中难点是问题 分类、数据预处理、参数提取。 ☆个人工作： 实现金融智能聊天,实现所有股票问题的精确回答。通过提取通用特征将5亿+条训练语料缩减为10w条，语料内存占用量从10G减少到2M，并将…
  ☆63Updated 5 years ago
• TurboWay / pybigdata
  使用 python 操作大数据的各种组件
  ☆62Updated last year
• HunterChao / book
  <数据化运营>图书代码
  ☆33Updated 6 years ago
• jiangnanboy / spark_data_mining
  spark tutorial for big data mining。包括app流量运营分析、als推荐、smote样本采样、RFM客户价值分群、AHP层次分析客户价值得分、手机定位数据商圈挖掘、马尔可夫智能邮件预测、时序预测、关联规则、推荐电影好友等。
  ☆40Updated 2 years ago
• CatWang / Lago-data-analysis
  本文使用Python编写爬虫，通过向端口传送请求并且抓取传输过来的json字符串来获取招聘职位信息，并且分类保存为csv格式的表格文件。最后通过长时间的爬取，最终得到37.7MB的表格数据，共计314093个招聘信息。之后通过SPSS对数据进行预处理和统计，再进行深度数据分…
  ☆36Updated 8 years ago
• KivenCkl / New_Energy_Vehicles_Info_Crawler
  工信部新能源汽车数据爬虫
  ☆36Updated 5 years ago
• alicelmx / wechat_public_spider
  通过搜狗搜索引擎爬取微信公众号文章
  ☆28Updated 7 years ago
• njzcx / DataPlatform
  数据采集、数据审核、数据分析平台
  ☆11Updated 2 years ago
• LongYosef / corpredit
  国家企业信用信息官网爬虫，未获取全部企业信息，重点在设计反爬思路
  ☆67Updated 6 years ago
• quicklysnail / PPD-data-mining
  拍拍贷网贷数据挖掘，风控建模
  ☆48Updated 7 years ago
• kugomusic / Easy_Data
  大数据/机器学习可视化分析平台
  ☆11Updated 5 years ago
• LeoMalik / Boss_zhipin_spider
  🔎 Boss 直聘 Python 招聘岗位信息爬取和分析🔎
  ☆70Updated 6 years ago
• whbing / taobaospider
  scrapy爬虫天猫（淘宝）店铺店名、月销售量、价格等详细信息。涉及分类大类30多个，小类数百个。总爬取结果50万+条
  ☆55Updated 7 years ago
• killstanding / FinanceCrawler
  金融数据爬虫
  ☆28Updated 9 years ago
• mobishift2011 / data007
  类似数据魔方的淘宝数据分析工具，包括商品分析，店铺分析，类别分析，品牌分析等。
  ☆27Updated 2 years ago
• 1414044032 / Sina_Spider
  新浪爬虫，基于Python+Selenium。模拟登陆后保存cookie，实现登录状态的保存。可以通过输入关键词来爬取到关键词相关的热门微博。
  ☆30Updated 6 years ago
• ChenHuabin321 / company_ino_spider
  本项目为企业工商信息网络爬虫，输入行业关键字，例如“铜箔”，可爬取八方资源网等工商信息网上所有与铜箔有关企业的工商信息。
  ☆22Updated 6 years ago
• haibincoder / ToutiaoCrawler
  今日头条爬虫，主要爬取关键词搜索结果，包含编辑距离算法、奇异值分解、k-means聚类。
  ☆71Updated 5 years ago
• keejo125 / web_scraping_and_data_analysis
  网络爬虫和数据分析，当当、豆瓣、知乎、猫眼、微信公众号、联想官网、今日头条爬虫
  ☆117Updated 5 years ago
• HeLiangHIT / house_price
  全国房价数据爬取+分析
  ☆109Updated 6 years ago
• Kdotm / Python_Series
  目前任职大数据开发工作，日常开发使用Python作为数据分析工具，在此比较常用的方面知识或难点总结、整理出来，以此分享，谢谢！
  ☆18Updated 6 years ago
• Wangler2333 / bilibili_video_stat
  爬取b站视频信息，供大数据分析用户喜好。使用scrapy-redis分布式，在16核服务器上实现抓取2500万条/天。可长期部署抓取，实现视频趋势分析
  ☆65Updated 6 years ago