Alternatives and similar repositories for multithread-crawler:

Users that are interested in multithread-crawler are comparing it to the libraries listed below

• SaberAlexander / Distributed
  an instant to crawl JD data in the way of distributed docker.
  ☆19Updated 7 years ago
• awolfly9 / job_wxbot
  微信机器人抓取并分发招聘信息
  ☆25Updated 8 years ago
• da2vin / Spider_index
  爬取百度指数和阿里指数，采用selenium，存入hbase，验证码自动识别，多线程控制
  ☆32Updated 8 years ago
• wwj718 / jobSpider
  jobSpider是一只scrapy爬虫，用于爬取职位信息
  ☆27Updated 8 years ago
• AoboJaing / thirdDemo
  python3 scrapy crawler crawl taobao.com, data import to MySQL
  ☆21Updated 8 years ago
• wangtonghe / hq-answer-assist
  百万英雄、冲顶大会等HQ类答题游戏辅助。Android、iOS均支持，推荐答案标红显示。
  ☆84Updated 7 years ago
• tianshuang / pull-readhub
  Pull news from https://readhub.cn/ and push to dingtalk
  ☆13Updated 2 years ago
• bluedazzle / multithreading-spider
  a simple demo use threading and queue get proxies from proxy sites
  ☆18Updated 9 years ago
• ToonoW / SpiderManager
  爬虫管理平台
  ☆31Updated 2 years ago
• wanghuafeng / baidu_spider
  百度爬虫：热词，词频，音乐，poi信息
  ☆22Updated 10 years ago
• ziwang-com / zwpy_lst
  中文版的python常用模块库清单,是zwPython项目的一部分,源自目前最常用的python第三方模块库清单：awesome-python的基础上
  ☆68Updated 10 years ago
• awolfly9 / jd_comment
  分布式抓取京东商品的评价信息
  ☆28Updated 8 years ago
• LiuXingMing / captcha_identify
  提供验证码识别接口
  ☆12Updated 6 years ago
• shuizhengqi1 / MaiMaiSpider
  ☆14Updated 7 years ago
• hexcola / wcspider
  微信公众号爬虫
  ☆42Updated 8 years ago
• bowenpay / weibo-spider
  微博爬虫。通过调用weibo api，而非暴力爬取的方式获取信息。
  ☆32Updated 8 years ago
• handalin / CharlieLrc
  查理歌词, 一个微信公众帐号, 1.0版本. 暂时可以实现快速查找歌词.
  ☆67Updated 10 years ago
• wanghuafeng / e-business
  电商爬虫系统：京东，当当，一号店，国美爬虫（代理使用）；论坛、新闻、豆瓣爬虫
  ☆106Updated 7 years ago
• PyCN / lagou_spider
  拉勾网爬虫, 利用通过微信公众号推送数据
  ☆8Updated 8 years ago
• Alihanniba / wechat_articles_spider
  A Spider About Wechat Articles 、Official Accounts
  ☆28Updated 2 years ago
• Geocld / RESRful-API-with-vuejs
  基于Python Flask的简易RESTful API接口，可实现基本的前后端分离。
  ☆64Updated 8 years ago
• LKI / wescraper
  依赖Scrapy和搜狗搜索微信公众号文章
  ☆46Updated 8 years ago
• weizetao / spider-roach
  分布式定向抓取集群
  ☆71Updated 7 years ago
• niubenaniu / dianshu
  点书：带着好心情读点书
  ☆20Updated 10 years ago
• ClericPy / EC-Spider
  Obsolete 已废弃.
  ☆86Updated 8 years ago
• 521xueweihan / PySpider
  Python爬虫的学习历程
  ☆51Updated 7 years ago
• hk029 / LagouSpider
  【图文详解】scrapy爬虫与动态页面——爬取拉勾网职位信息（1）
  ☆82Updated 8 years ago
• darrenfantasy / image_crawler
  网站图片爬虫(已包含：微博，微信公众号，花瓣网)及免费IP代理 豆瓣电影爬虫
  ☆145Updated 7 years ago
• LiuXingMing / WeiboSliderCode
  m.weibo.cn登录，四宫格图形解锁验证码破解
  ☆107Updated 7 years ago
• iamGavinZhou / py-captcha-breaking
  破解验证码的完整演示程序，just for demo!
  ☆51Updated 8 years ago