Alternatives and similar repositories for web_scraping_and_data_analysis

Users that are interested in web_scraping_and_data_analysis are comparing it to the libraries listed below

• wqh0109663 / JobSpiders
  scrapy框架爬取51job(scrapy.Spider)，智联招聘(扒接口)，拉勾网(CrawlSpider)
  ☆200Updated last year
• zhanghe06 / news_spider
  新闻抓取（微信、微博、头条...）
  ☆225Updated 2 years ago
• CooperMin / qichacha
  企查查企业分类信息采集
  ☆43Updated 5 years ago
• Hopetree / Jobs-search
  招聘网站爬虫合集，不定期更新分支
  ☆140Updated 7 years ago
• Frank-qlu / recruit
  recruit 招聘爬虫+数据分析 1.爬虫： 采用Scrapy 分布式爬虫技术，使用mongodb作为数据存储，爬取的网站Demo为51job，数据我目前爬了有几千条 2.数据处理： 采用pandas对爬取的数据进行清洗和处理 2.数据分析： …
  ☆142Updated 3 years ago
• kong36088 / ZhihuSpider
  多线程知乎用户爬虫，基于python3
  ☆249Updated 2 years ago
• speng4096 / PyLoom
  Python爬虫框架，内置微博、自如、豆瓣图书、拉勾网、拼多多等爬虫
  ☆250Updated 6 years ago
• nnngu / LagouSpider
  🕷️ 爬取拉勾网职位信息的爬虫！
  ☆120Updated 7 years ago
• lihansunbai / Fang_Scrapy
  这是一个作者毕业设计的爬虫，爬取58同城、赶集网、链家、安居客、我爱我家网站的房价交易数据。
  ☆329Updated 9 years ago
• evanleungc / GoldSentAnalysis
  黄金舆情数据分析
  ☆52Updated 8 years ago
• izhouping / KPA
  知识付费套利（Knowledge payment arbitrage）
  ☆58Updated 6 years ago
• longxiaofei / dianping
  大众点评商家评论爬虫
  ☆48Updated 5 years ago
• jumper2014 / BeikeSpider
  贝壳网房价爬虫,基于Scrapy, 采集北京上海广州深圳等21个中国主要城市的房价数据（小区,二手房），稳定可靠快速！支持csv存储，注释丰富，链家网爬虫见我另一个项目
  ☆53Updated 6 years ago
• NightMarcher / zhihu-crawler
  徒手实现定时爬取知乎，从中发掘有价值的信息，并可视化爬取的数据作网页展示。
  ☆66Updated 2 years ago
• Tim9Liu9 / python_spider_jobs
  python写的爬虫，爬取51job前程无忧、智联招聘的大城市（北京、上海、深圳、广州、杭州、成都、武汉、长沙、珠海）各种编程岗位的职位数。
  ☆100Updated 6 years ago
• fredfeng0326 / Scraping
  京东，淘宝，苏宁，亚马逊爬虫抓取商品信息并分析数据
  ☆184Updated 2 years ago
• monkey-soft / Scrapy_IPProxyPool
  免费 IP 代理池。Scrapy 爬虫框架插件
  ☆103Updated 6 years ago
• xiaosimao / wx_code
  公众号文章代码
  ☆62Updated 6 years ago
• Jaysong2012 / tutorial
  Scrapy爬虫实战系列，从零开始爬取腾讯百度淘宝知乎各大网站内容 \n 12306刷票脚本系列
  ☆82Updated 6 years ago
• chancechang / pySpider
  爬虫项目，领英、专利、乐捐、好大夫、阿里拍卖、看准网、实习僧、百度百科、51job、智联招聘等近80个网站
  ☆83Updated 4 years ago
• 15920036578 / JD_Spider
  京东爬虫（大量注释，对刚入门爬虫者极度友好）
  ☆71Updated 6 years ago
• Northxw / City58
  58同城 (全国) 房屋信息爬虫
  ☆64Updated 6 years ago
• dangsh / hive
  lots of spider (很多爬虫）
  ☆118Updated 6 years ago
• haibincoder / ToutiaoCrawler
  今日头条爬虫，主要爬取关键词搜索结果，包含编辑距离算法、奇异值分解、k-means聚类。
  ☆72Updated 5 years ago
• alicelmx / wechat_public_spider
  通过搜狗搜索引擎爬取微信公众号文章
  ☆28Updated 7 years ago
• chenjiandongx / 51job-spider
  🔎 前程无忧 Python 招聘岗位信息爬取和分析
  ☆424Updated 7 years ago
• happyjared / python-learning
  Those years of learning Python - 这些年学习的Python
  ☆116Updated 5 years ago
• littlepai / Unofficial-Zhihu-API
  深度学习模型自动识别验证码，python爬虫库自动管理会话，通过简单易用的API，实现知乎数据的爬取
  ☆77Updated 2 years ago
• ioiogoo / scrapy-monitor
  scrapy-monitor，实现爬虫可视化，监控实时状态
  ☆110Updated 8 years ago
• Sunshiqisky / wechat_crawler
  爬取微信公众号评论、点赞等相关信息
  ☆44Updated 7 years ago