Alternatives and similar repositories for scrapy:

Users that are interested in scrapy are comparing it to the libraries listed below

• PyCN / book
  课题目标要求是网上商城的基本功能，进而深入学习更多python和Django框架方面的知识。 项目架构：1.项目采用前后端分离的应用模式；2.前端使用Vue.js；3.后端使用Django REST framework 前端部分：1.用户页面；2.商品页面；3.购物车页面4…
  ☆11Updated 3 years ago
• henrylee123 / gzssztCrawler
  scrapy实现商事主体信息公示平台爬虫。查询工商注册信息的网站，输入关键词可以爬相关所有注册企业数据的数据。 网址：http://cri.gz.gov.cn/
  ☆25Updated 5 years ago
• chichoyi / China-metro-sql
  最新中国城市地铁线路sql
  ☆13Updated 4 years ago
• OliverFoh / zhaobiao_spider
  招投标网站数据采集
  ☆14Updated 4 years ago
• ChenHuabin321 / company_ino_spider
  本项目为企业工商信息网络爬虫，输入行业关键字，例如“铜箔”，可爬取八方资源网等工商信息网上所有与铜箔有关企业的工商信息。
  ☆22Updated 6 years ago
• feixuelove1009 / mysite-hotpoint
  一个类似抽屉新热榜的新闻聚合分享站点
  ☆14Updated 8 years ago
• clayandgithub / helloscrapy
  ☆18Updated 8 years ago
• idealspark / ZhiShiWenDa-Helper
  百万英雄/冲顶大会/知识超人 答题助手 瞬间使用Chrome打开百度
  ☆102Updated 6 years ago
• bytebuff / dj-poetry-es
  django+es搭建的前后端分离，唐诗宋词搜索引擎。
  ☆34Updated 2 years ago
• zeeklog / jb51.com_crawler
  爬虫实战：python3.6 + scrapy + mysql爬取 脚本之家
  ☆17Updated 4 months ago
• langgithub / python_spider
  爬虫知识梳理 某宝爬虫 某运营商爬虫 某行征信爬虫 在线爬虫设计 密码控件爬虫 离线爬虫设计
  ☆18Updated 5 years ago
• realzhengyiming / newsSpier_scrapy
  news spider wrote by scrapy ,now it can crawl the news in sina ,and continue to update it.这个是多新闻的增量爬虫版本，爬取腾讯，网易，搜狐的每日新闻 scrapy 实现的版本
  ☆11Updated 5 years ago
• CarryChang / Video-Assistance
  自己使用Request+PyQT编写可视化视频解析工具，主要借用全民解析API的进行的各源头VIP视频解析，软件主要有各大厂的视频VIP解析功能，主要通过网络爬虫解析视频源，实现点击线路即可自动加载浏览器播放视频的功能，还有在加载视频的同时也生成对应的链接二维码，微信扫一扫…
  ☆23Updated 4 years ago
• gitjayzhen / ShellRepository
  一个好的测试运维工程师，应有自己的一个代码库。作为一个脚本仓库，将会是整个shell和bat的使用记录，会希望这个记录会有很多发散的内容，帮助到后面的工作。
  ☆21Updated 6 months ago
• hfuuss / python-movie
  基于flask+mysql的电影视频网站。
  ☆66Updated 7 years ago
• dafeizhu / python-spider-scrapy
  本项目是一个用Python语言编写的爬虫，通过控制台运行选择爬取，爬取腾讯招聘网的招聘信息，保存到数据库中，再运行一次选择展示，将前边爬取下来的数据，运用数据库查询语句从数据库中提取到控制台并显示出来
  ☆18Updated 5 years ago
• KevinZhaoZL / Spiders
  包含爬取商品信息的京东，天猫，苏宁的三个爬虫，以及一个对京东商品评论进行爬取和分析的脚本
  ☆13Updated 2 years ago
• dengqiuhua / owl
  猫头鹰搜索引擎，爬虫，分词，索引，搜索
  ☆27Updated 9 years ago
• xxduck / Shop
  一个基于Django的电商网站，含购物车系统以及支付宝结算
  ☆37Updated 6 years ago
• guyfar / Python_Chart
  基于Python+MySQL+日志文件 实现的监控报表
  ☆47Updated 7 years ago
• zhuima / findjob
  为了方便找工作，爬去拉勾数据进行数据可视化展示分析以便找到一个合适的工作，本项目仅做学习交流使用，请勿作他用
  ☆25Updated 2 years ago
• downdawn / eswork
  ElasticSearch+Django+Scrapy搜索引擎
  ☆27Updated 2 years ago
• realzhengyiming / Spider_of_keywordRank
  搜索引擎关键词排位爬虫，包括百度，搜狗，360的搜索引擎关键词排位爬虫，关键词从百度热词中取得，排位分别从三个搜索引擎中抓取。
  ☆19Updated 5 years ago
• yangqihua / new-jianhu
  荐乎 是自己创业时候的一个 to B 的商业项目，后台技术栈基于 Django，数据库使用 mysql+redis，前端使用jQuery-weui，界面及图标设计来自于腾讯某设计师。
  ☆52Updated 7 years ago
• xzh0723 / iQiyiLogin
  破解爱奇艺RSA加密密码，更新版本在 login_modle 里，还有很多其他网站
  ☆9Updated 5 years ago
• qi20172017 / douyin_spider
  APP端爬取抖音数据
  ☆9Updated 5 years ago
• sph116 / zhongxin_search
  中国新闻网爬虫（全站增量爬虫，可用时间至2019.7）
  ☆16Updated 5 years ago
• ShadowYIG / DouYinSpider
  爬虫练习——对抖音App进行数据采集（仅供学习使用）
  ☆14Updated 4 years ago
• llfccc / qichachaSpider
  企查查的scrapy爬虫实践
  ☆12Updated 8 years ago