Alternatives and similar repositories for scrapy

Users that are interested in scrapy are comparing it to the libraries listed below

• xiaosimao / AiSpider
  爬虫轻型框架
  ☆232Updated 7 years ago
• dangsh / hive
  lots of spider (很多爬虫）
  ☆117Updated 7 years ago
• lawlite19 / PythonCrawler-Scrapy-Mysql-File-Template
  scrapy爬虫框架模板，将数据保存到Mysql数据库或者文件中。
  ☆218Updated 8 years ago
• zjfGit / python3-scrapy-spider-phantomjs-selenium
  基于Python3的动态网站爬虫，使用selenium+phantomjs实现爬取动态网站, 本项目以爬取今日头条为例
  ☆177Updated 5 years ago
• xingag / weixin_spider
  爬取微信公众号文章
  ☆28Updated 6 years ago
• yyyy777 / crawler
  python爬虫练习
  ☆112Updated 6 years ago
• luyishisi / Nyspider
  各种爬虫---大众点评,安居客，58，人人贷，拍拍贷, IT桔子,拉勾网，豆瓣,搜房网,ASO100,气象数据,猫眼电影,链家,PM25.in...
  ☆198Updated 8 years ago
• TTyb / TTyb.github.io
  百哥么么哒|TTyb网站搭建成功，爬虫教程由浅入深已经完善，小白可以来学习
  ☆22Updated 4 years ago
• ZhiqiKou / Scrapy_notes
  一个向往成为程序员的码奴的Scrapy学习笔记
  ☆41Updated 7 years ago
• chenjiandongx / soksaccounts
  🔥 Shadowsocks 账号爬虫
  ☆161Updated 7 years ago
• simapple / spider
  test
  ☆160Updated 2 years ago
• Germey / TouTiao
  TouTiao Spider Demo
  ☆177Updated 6 years ago
• changetjut / ProxySpider
  爬取http://www.xicidaili.com/上代理IP，并验证代理可用性
  ☆142Updated 6 years ago
• happyjared / python-learning
  Those years of learning Python - 这些年学习的Python
  ☆116Updated 5 years ago
• feiweiwei / WeixinSpider
  爬虫爬取微信公众号文章
  ☆108Updated 7 years ago
• qqxx6661 / flask_yzd
  旧版某东监控网站前后端，轻量级Flask网站，可用作学习Flask
  ☆75Updated 2 years ago
• TTyb / tbtmGoods
  淘宝天猫商品数据抓取，代码和exe都在里面，持续更新页面中
  ☆154Updated 6 years ago
• FWC1994 / Python-Crawler
  python多线程爬虫爬取电影天堂资源
  ☆94Updated 5 years ago
• tmliang / Taobao_Spider
  基于Scrapy的Python3分布式淘宝爬虫
  ☆193Updated 4 years ago
• qiyeboy / spider_smooc
  爬取慕课网视频
  ☆365Updated 8 years ago
• qqxx6661 / scrapy-yzd
  该项目为scrapy框架脚手架，整合了自动切换agent，自动切换代理ip等中间件，可以下载后自行编写爬虫。 支持： 豆瓣电影，某东商品信息（名称价格等）。
  ☆33Updated 6 years ago
• SteelZheng / python-get-girl-image
  Python爬虫，抓取“mzitu.com”网站上的美女图片。支持将单一界面的多相册下的图片下载到本地。用到第三方库BeautifulSoup、request
  ☆85Updated 8 years ago
• Python3WebSpider / Weixin
  Sougou Weixin Spider Using Proxy
  ☆86Updated 4 years ago
• facert / github_search
  根据 keywords 搜索 github 上面的 repos, 并通过 web 展示
  ☆283Updated 9 years ago
• efonfighting / efonmark-wechat-spider
  微信公众号文章下载，并保存为pdf
  ☆157Updated 6 years ago
• thsheep / mzitu_scrapy
  基于Scrapy的www.mzitu.com的全站图片下载脚本
  ☆71Updated 6 years ago
• Python3WebSpider / TaobaoProduct
  Taobao Product Spider by Selenium
  ☆198Updated 5 years ago
• ozhiwei / SmartProxyPool
  高质量, 高灵活的IP代理池服务
  ☆388Updated 5 years ago
• monkey-soft / Scrapy_IPProxyPool
  免费 IP 代理池。Scrapy 爬虫框架插件
  ☆104Updated 7 years ago
• cuanboy / ScrapyProject
  开始Scrapy实战如：存数据库、下载文件、爬京东、淘宝、Anti-Anti-Spider……
  ☆423Updated 7 years ago