Alternatives and similar repositories for Crawler:

Users that are interested in Crawler are comparing it to the libraries listed below

• mazzzystar / BaiduCrawler
  Sample of using proxies to crawl baidu search results.
  ☆117Updated 6 years ago
• kong36088 / ZhihuSpider
  多线程知乎用户爬虫，基于python3
  ☆243Updated last year
• LiuXingMing / WeiboSliderCode
  m.weibo.cn登录，四宫格图形解锁验证码破解
  ☆108Updated 7 years ago
• CnPaMeng / WeiboMsgBackupGUI
  中国爬盟出品的微博备份神器：用于备份新浪微博指定用户全部微博的备份工具
  ☆191Updated 11 years ago
• AlexTan-b-z / ZhihuSpider
  知乎分布式爬虫（Scrapy、Redis）
  ☆166Updated 6 years ago
• zhanghe06 / news_spider
  新闻抓取（微信、微博、头条...）
  ☆220Updated 2 years ago
• luzhijun / weiboSA
  微博主题搜索分析，上海租房
  ☆114Updated 8 years ago
• ladingwu / python_zhihu
  一个知乎爬虫，登陆，获取答案，图片
  ☆304Updated 4 years ago
• LiuXingMing / Tmall1212
  天猫双12爬虫，附商品数据。
  ☆199Updated 8 years ago
• hailong0707-zz / spider_news_all
  Scrapy Spider for 各种新闻网站
  ☆106Updated 9 years ago
• gnemoug / sina_reptile
  获取新浪微博1000w用户的基本信息和每个爬取用户最近发表的50条微博,使用python编写，多进程爬取，将数据存储在了mongodb中
  ☆473Updated 11 years ago
• jackgitgz / CnblogsSpider
  用scrapy采集cnblogs列表页爬虫
  ☆274Updated 9 years ago
• qiyeboy / baidulogin
  百度登录加密协议分析，以及登录实现
  ☆135Updated 8 years ago
• csuldw / WSpider
  爬虫练习：新浪微博用户数据爬取、模拟知乎登陆
  ☆127Updated 8 years ago
• yoyzhou / weibo_scrapy
  WEIBO_SCRAPY is a Multi-Threading SINA WEIBO data extraction Framework in Python.
  ☆154Updated 7 years ago
• Rockyzsu / zhihuToKindle
  模拟登陆知乎，获取关注问题的id下 所有答案，并推送到kindle电子书
  ☆147Updated 5 years ago
• Germey / TaobaoMM
  WebSpider of TaobaoMM developed by PySpider
  ☆107Updated 8 years ago
• WuLC / ThesaurusSpider
  下载搜狗、百度、QQ输入法的词库文件的 python 爬虫，可用于构建不同行业的词汇库
  ☆112Updated 7 years ago
• billvsme / videoSpider
  抓取豆瓣，bilibili等中的电视剧、电影、动漫演员等信息
  ☆226Updated 2 years ago
• xiaoquantou / jd_spider
  京东爬虫，可抓取京东商品信息和评论
  ☆252Updated 7 years ago
• ppy2790 / weixin
  微信好友爬虫，图片处理
  ☆49Updated 7 years ago
• url2io / url2io-python-sdk
  ⛔ [DEPRECATED] URL2io Python SDK，用于网页信息提取，如正文提取
  ☆41Updated 4 years ago
• brantou / crawler
  爬虫, http代理, 模拟登陆!
  ☆109Updated 7 years ago
• ansenhuang / scrapy-zhihu-users
  scrapy爬取知乎用户数据
  ☆152Updated 8 years ago
• rieuse / DouyuTV
  DouyuTV弹幕，房间信息爬取，数据分析
  ☆79Updated 4 years ago
• wangshunping / weibo_spider
  graduate project, a weibo spider to find some interesting information such as "In social network , people tend to be happy or sad."
  ☆273Updated 8 years ago
• leitro / knowsecSpider2
  知道创宇爬虫题目 持续更新版本
  ☆95Updated 10 years ago
• moranzcw / Zhihu-Spider
  一个获取知乎用户主页信息的多线程Python爬虫程序。
  ☆138Updated 6 years ago
• HunterChao / Dangdang
  scrapy爬取当当网图书数据
  ☆73Updated 7 years ago
• darrenfantasy / image_crawler
  网站图片爬虫(已包含：微博，微信公众号，花瓣网)及免费IP代理 豆瓣电影爬虫
  ☆141Updated 7 years ago