Alternatives and similar repositories for crawl:

Users that are interested in crawl are comparing it to the libraries listed below

• Germey / Weibo
  Weibo Spider
  ☆49Updated 8 years ago
• Germey / Zhihu
  Zhihu User Spider
  ☆133Updated 6 years ago
• Python3WebSpider / Weibo
  Weibo Spider Using Scrapy
  ☆137Updated 7 years ago
• xqtbox / AutoHomeSpider_Scrapy
  爬取汽车之家的口碑数据，并破解前端js反爬虫措施分析
  ☆62Updated 7 years ago
• dataabc / weiboPR
  用python判断微博用户的影响力
  ☆52Updated 9 years ago
• moranzcw / Zhihu-Spider
  一个获取知乎用户主页信息的多线程Python爬虫程序。
  ☆138Updated 6 years ago
• kong36088 / ZhihuSpider
  多线程知乎用户爬虫，基于python3
  ☆248Updated last year
• zhanghe06 / news_spider
  新闻抓取（微信、微博、头条...）
  ☆225Updated 2 years ago
• wanghuafeng / e-business
  电商爬虫系统：京东，当当，一号店，国美爬虫（代理使用）；论坛、新闻、豆瓣爬虫
  ☆106Updated 7 years ago
• littlepai / Unofficial-Zhihu-API
  深度学习模型自动识别验证码，python爬虫库自动管理会话，通过简单易用的API，实现知乎数据的爬取
  ☆78Updated 2 years ago
• brantou / crawler
  爬虫, http代理, 模拟登陆!
  ☆108Updated 7 years ago
• 15920036578 / JD_Spider
  京东爬虫（大量注释，对刚入门爬虫者极度友好）
  ☆71Updated 6 years ago
• Germey / TaobaoProduct
  Selenium Demo of Taobao Product
  ☆81Updated 6 years ago
• HITFRobot / happy-spiders
  🔧 🔩 🔨 收集整理了爬虫相关的工具、模拟登陆技术、代理IP、scrapy模板代码等内容。
  ☆267Updated 6 years ago
• lihansunbai / Fang_Scrapy
  这是一个作者毕业设计的爬虫，爬取58同城、赶集网、链家、安居客、我爱我家网站的房价交易数据。
  ☆328Updated 8 years ago
• Northxw / Meituan
  美团（美食）店铺信息爬虫
  ☆111Updated 5 years ago
• bowenpay / weibo-spider
  微博爬虫。通过调用weibo api，而非暴力爬取的方式获取信息。
  ☆32Updated 8 years ago
• duolaAOA / weibo_topic
  微博话题关键词,个人微博采集, 微博博文一键删除 selenium获取cookie,requests处理
  ☆31Updated 6 years ago
• haibincoder / ToutiaoCrawler
  今日头条爬虫，主要爬取关键词搜索结果，包含编辑距离算法、奇异值分解、k-means聚类。
  ☆72Updated 5 years ago
• Harhao / wechatPubSpider
  wechat spiders微信公众号爬虫
  ☆109Updated 3 years ago
• lcdevelop / weixin-crawler
  微信公众号批量抓取器
  ☆56Updated 8 years ago
• keejo125 / web_scraping_and_data_analysis
  网络爬虫和数据分析，当当、豆瓣、知乎、猫眼、微信公众号、联想官网、今日头条爬虫
  ☆122Updated 5 years ago
• happyjared / python-learning
  Those years of learning Python - 这些年学习的Python
  ☆116Updated 5 years ago
• brady-chen / tbNews
  金融新闻增量式聚焦爬虫
  ☆21Updated 7 years ago
• Python3WebSpider / Weixin
  Sougou Weixin Spider Using Proxy
  ☆87Updated 3 years ago
• Tim9Liu9 / python_spider_jobs
  python写的爬虫，爬取51job前程无忧、智联招聘的大城市（北京、上海、深圳、广州、杭州、成都、武汉、长沙、珠海）各种编程岗位的职位数。
  ☆100Updated 6 years ago
• leo8916 / wxhub
  微信公众号-文章-无限制抓取
  ☆156Updated 6 years ago
• DWJWendy / Weibo_Spider
  微博爬虫：输入对应的爬取账号ID，爬取微博内容/时间/微博名/转发数/点赞数/评论数
  ☆42Updated 7 years ago
• Qutan / Spider
  社交数据爬虫
  ☆216Updated 8 years ago
• Germey / MaoYan
  MaoYan Top100 Spider
  ☆61Updated 5 years ago