Alternatives and similar repositories for -scrapy-

Users that are interested in -scrapy- are comparing it to the libraries listed below

• cocoakekeyu / autoproxy
  一个用于scrapy爬虫的自动代理中间件
  ☆148Updated 7 years ago
• backto17 / SinaHouseCrawler
  基于scrapy,scrapy-redis实现的一个分布式网络爬虫,爬取了新浪房产的楼盘信息及户型图片,实现了常用的爬虫功能需求.
  ☆40Updated 8 years ago
• 521xueweihan / holleworld
  基于tornado框架的开源web app
  ☆39Updated 5 years ago
• FanhuaandLuomu / captcha_break_keras
  keras theano 验证码破解 字母+数字
  ☆61Updated 7 years ago
• PyCN / Ugly-Distributed-Crawler
  基于Redis实现的简单到爆的分布式爬虫
  ☆14Updated 7 years ago
• awolfly9 / job_wxbot
  微信机器人抓取并分发招聘信息
  ☆25Updated 8 years ago
• runtangr / taoyoulue_spider
  基于mongodb存储，redis缓存，celery 实现的分布式爬虫。
  ☆13Updated 2 years ago
• xrlin / DoubanPyspider
  使用Pyspider框架的豆瓣爬虫
  ☆27Updated 7 years ago
• cjxhaaa / cookies_pool-personal-
  个人建立的新浪登陆cookies池，用于爬取新浪微博(项目很久没有维护了，有兴趣的朋友可以当做参考吧)
  ☆23Updated 11 months ago
• rfyiamcool / AtomicPlus
  python atomic cas & plus
  ☆56Updated 6 years ago
• luyishisi / WebCrawlers
  ☆36Updated 8 years ago
• zhujiajunup / Jpider
  ☆27Updated 7 years ago
• HITFRobot / happy-spiders
  🔧 🔩 🔨 收集整理了爬虫相关的工具、模拟登陆技术、代理IP、scrapy模板代码等内容。
  ☆267Updated 6 years ago
• KDF5000 / RSpider
  一个基于scrapy-redis的分布式爬虫模板
  ☆42Updated 7 years ago
• ioiogoo / scrapy-monitor
  scrapy-monitor，实现爬虫可视化，监控实时状态
  ☆109Updated 8 years ago
• rfyiamcool / jd_product_spider
  京东商品爬虫服务
  ☆14Updated 7 years ago
• AoboJaing / thirdDemo
  python3 scrapy crawler crawl taobao.com, data import to MySQL
  ☆21Updated 8 years ago
• ShichaoMa / structure_spider
  组合多请求，抓取结构化数据，基于scrapy组件
  ☆29Updated 2 years ago
• saintic / flask-thirdLogin-demo
  使用Flask的第三方社会化账号登录演示样例，QQ、Weibo、GitHub等。
  ☆21Updated 8 years ago
• xiaosimao / weibo_spider
  ☆20Updated 7 years ago
• dongweiming / mp
  微信公众号文章代码库
  ☆88Updated 2 years ago
• LiuRoy / spider_docker
  为爬虫引用创建container，包括的模块：scrapy, mongo, celery, rabbitmq
  ☆37Updated 9 years ago
• da2vin / Spider_index
  爬取百度指数和阿里指数，采用selenium，存入hbase，验证码自动识别，多线程控制
  ☆32Updated 8 years ago
• happyte / buyhouse
  🏠基于python的scrapy爬虫，爬取链家网成都地区新房源，并用高德api在地图上可视化显示
  ☆111Updated 8 years ago
• FanhuaandLuomu / SINA_Spider
  新浪微博爬虫：登录、关键词微博查询、微博监控
  ☆32Updated 7 years ago
• w4n9H / pyfdfs
  基于Fastdfs和Python的分布式文件存储系统
  ☆22Updated 8 years ago
• Germey / TaobaoUser
  Get anonymous user of Taobao
  ☆49Updated 8 years ago
• Germey / AdslProxy
  ☆17Updated 7 years ago
• hk029 / LagouSpider
  【图文详解】scrapy爬虫与动态页面——爬取拉勾网职位信息（1）
  ☆82Updated 8 years ago
• A1014280203 / Ugly-Distributed-Crawler
  基于Redis实现的简单到爆的分布式爬虫
  ☆46Updated 7 years ago