Alternatives and similar repositories for scrapy

Users that are interested in scrapy are comparing it to the libraries listed below

• PyCN / book
  课题目标要求是网上商城的基本功能，进而深入学习更多python和Django框架方面的知识。 项目架构：1.项目采用前后端分离的应用模式；2.前端使用Vue.js；3.后端使用Django REST framework 前端部分：1.用户页面；2.商品页面；3.购物车页面4…
  ☆11Updated 3 years ago
• langgithub / python_spider
  爬虫知识梳理 某宝爬虫 某运营商爬虫 某行征信爬虫 在线爬虫设计 密码控件爬虫 离线爬虫设计
  ☆18Updated 5 years ago
• YanGen / NMPA_Spider
  国家药品监督管理局——数据查询
  ☆8Updated 5 years ago
• chichoyi / China-metro-sql
  最新中国城市地铁线路sql
  ☆13Updated 5 years ago
• henrylee123 / gzssztCrawler
  scrapy实现商事主体信息公示平台爬虫。查询工商注册信息的网站，输入关键词可以爬相关所有注册企业数据的数据。 网址：http://cri.gz.gov.cn/
  ☆26Updated 6 years ago
• clayandgithub / helloscrapy
  ☆18Updated 8 years ago
• realzhengyiming / newsSpier_scrapy
  news spider wrote by scrapy ,now it can crawl the news in sina ,and continue to update it.这个是多新闻的增量爬虫版本，爬取腾讯，网易，搜狐的每日新闻 scrapy 实现的版本
  ☆13Updated 5 years ago
• cyhleo / JinRiTouTiaoNews
  scrapy+pyppeteer，爬取今日头条中新闻及热门评论信息。
  ☆12Updated 5 years ago
• ChenHuabin321 / company_ino_spider
  本项目为企业工商信息网络爬虫，输入行业关键字，例如“铜箔”，可爬取八方资源网等工商信息网上所有与铜箔有关企业的工商信息。
  ☆24Updated 6 years ago
• xxduck / Shop
  一个基于Django的电商网站，含购物车系统以及支付宝结算
  ☆39Updated 7 years ago
• gitjayzhen / ShellRepository
  一个好的测试运维工程师，应有自己的一个代码库。作为一个脚本仓库，将会是整个shell和bat的使用记录，会希望这个记录会有很多发散的内容，帮助到后面的工作。
  ☆22Updated 11 months ago
• yueyue10 / PythonPro
  python多个项目集合：python基础知识、爬取github数据并保存到数据库、下载抖音视频、保存日志到数据库等功能
  ☆32Updated 2 years ago
• NO1117 / book_spider
  基于scrapy-redis的分布式爬虫，爬取JD图书，当当图书和Amazon图书
  ☆16Updated 6 years ago
• pymyworld / xingji100_spider
  主播数据平台基础数据爬虫，包括斗鱼、企鹅、熊猫、b站、全民、虎牙、龙珠、战旗、火猫
  ☆17Updated 6 years ago
• wuyue92tree / crwy
  一个简单的web爬虫框架，借鉴scrapy结构开发而来，并为scrapy使用者提供通用轮子^.^
  ☆13Updated 4 years ago
• dengqiuhua / owl
  猫头鹰搜索引擎，爬虫，分词，索引，搜索
  ☆27Updated 9 years ago
• yangqihua / new-jianhu
  荐乎 是自己创业时候的一个 to B 的商业项目，后台技术栈基于 Django，数据库使用 mysql+redis，前端使用jQuery-weui，界面及图标设计来自于腾讯某设计师。
  ☆52Updated 7 years ago
• mindawei / p2p
  一个基于 python 的 flask 框架的资讯网站， http://119.29.100.53:8086/
  ☆33Updated 6 years ago
• xiucaicoder / douyin-spider
  抖音无水印视频爬虫
  ☆11Updated 5 years ago
• lishuaixingNewBee / BigData
  狗蛋实验室推出的智能化数据抓取、处理、分析，挖掘平台。提供美团、大众点评、饿了么、百度地图等数据。
  ☆43Updated 6 years ago
• lemontang93 / news_feed
  🌏实时监控900多家中国企业的新闻动态
  ☆21Updated 7 years ago
• zeeklog / jb51.com_crawler
  爬虫实战：python3.6 + scrapy + mysql爬取 脚本之家
  ☆19Updated 9 months ago
• realzhengyiming / Spider_of_keywordRank
  搜索引擎关键词排位爬虫，包括百度，搜狗，360的搜索引擎关键词排位爬虫，关键词从百度热词中取得，排位分别从三个搜索引擎中抓取。
  ☆19Updated 5 years ago
• jackyshan / djangorestful_hui
  djangorestful结合hui框架搭建后台管理系统和后台接口
  ☆30Updated 2 years ago
• bytebuff / dj-poetry-es
  django+es搭建的前后端分离，唐诗宋词搜索引擎。
  ☆34Updated 3 years ago
• LuckyRyan-web / dailyfresh-xadmin
  基于Python3.6+Django1.11+xadmin+Redis+Mysql的天天生鲜商城
  ☆9Updated 4 years ago
• hfuuss / python-movie
  基于flask+mysql的电影视频网站。
  ☆68Updated 7 years ago
• stormsha / HTML
  使用仿站小工具，轻松抓取自己喜欢的网站前端源码
  ☆29Updated 6 years ago
• 123woscc / tianmao_shop_spider
  天猫店铺爬虫，爬取店铺所有商品数据
  ☆13Updated 7 years ago
• KevinZhaoZL / Spiders
  包含爬取商品信息的京东，天猫，苏宁的三个爬虫，以及一个对京东商品评论进行爬取和分析的脚本
  ☆13Updated 2 years ago