Alternatives and similar repositories for Scrapy-Redis_Demos

Users that are interested in Scrapy-Redis_Demos are comparing it to the libraries listed below

• littlepai / Unofficial-Zhihu-API
  深度学习模型自动识别验证码，python爬虫库自动管理会话，通过简单易用的API，实现知乎数据的爬取
  ☆77Updated 3 years ago
• guapier / zufang
  租房爬虫，基于flask，采用apscheduler定时任务，通过微信，定时给用户推送想要的租房信息
  ☆14Updated 6 years ago
• ioiogoo / scrapy-monitor
  scrapy-monitor，实现爬虫可视化，监控实时状态
  ☆110Updated 8 years ago
• happyjared / python-learning
  Those years of learning Python - 这些年学习的Python
  ☆116Updated 5 years ago
• HegemonyTao / crawlProject
  今日头条 、淘宝 、微博 、斗鱼 、抖音 、哔哩哔哩 、有道翻译、steam网站以及网易云音乐爬取
  ☆60Updated 5 years ago
• mindawei / p2p
  一个基于 python 的 flask 框架的资讯网站， http://119.29.100.53:8086/
  ☆34Updated 7 years ago
• laixin86714802 / spider-platform
  可视化爬虫自动采集平台
  ☆187Updated 2 years ago
• henrylee123 / gzssztCrawler
  scrapy实现商事主体信息公示平台爬虫。查询工商注册信息的网站，输入关键词可以爬相关所有注册企业数据的数据。 网址：http://cri.gz.gov.cn/
  ☆26Updated 6 years ago
• facert / scrapy_helper
  Dynamic configurable crawl (动态可配置化爬虫)
  ☆87Updated 7 years ago
• yueyue10 / PythonPro
  python多个项目集合：python基础知识、爬取github数据并保存到数据库、下载抖音视频、保存日志到数据库等功能
  ☆33Updated 3 years ago
• LoseNine / TopList-python
  今日热榜项目TopList的Python实现，异步爬取微博热榜，知乎，V2EX，GIthub，通过Flask展示。
  ☆69Updated 6 years ago
• tmliang / Taobao_Spider
  基于Scrapy的Python3分布式淘宝爬虫
  ☆193Updated 4 years ago
• Hopetree / TMTools
  一个用PYQT5写的图形化的多功能电商爬虫小工具
  ☆104Updated 8 years ago
• linyhuan / Crawler
  ☆37Updated 7 years ago
• ever391 / crack_gs
  全国工商企业信息查询 验证码破解 滑动验证码破解示例
  ☆219Updated 3 years ago
• xiaoe1314 / Python
  Python实战项目：爬取糗事百科、拉勾网、boss直聘等等知名网站实战，搭建响应式网站、Python web项目。
  ☆21Updated 3 years ago
• NGUWQ / Python3Spider
  爬虫项目
  ☆70Updated 7 years ago
• ErisYoung / douyin_spider
  🎨One simple and easy to use crawler for DouYin（一个简单易用的抖音爬虫,可下载指定用户,挑战,音乐的视频,音频和数据)
  ☆67Updated 6 years ago
• inlike / Python-FFmpeg-Video
  Python调用ffmpeg开源视频处理库，来实现视频批量的处理：水印、背景音乐、剪辑、合并、帧率、速率、分辨率等操作
  ☆117Updated 5 years ago
• zhaoboy9692 / qccspider
  企查查企业信息爬虫 ，企查查app每日新增企业抓取,可以进行每日的增量抓取、企业数据、工商数据等等。
  ☆332Updated 3 years ago
• pymyworld / xingji100_spider
  主播数据平台基础数据爬虫，包括斗鱼、企鹅、熊猫、b站、全民、虎牙、龙珠、战旗、火猫
  ☆17Updated 7 years ago
• Yanxueshan / Scrapy-Redis-Zhihu
  基于scrapy-redis实现分布式爬虫，爬取知乎所有问题及对应的回答，集成selenium模拟登录、英文验证码及倒立文字验证码识别、随机生成User-Agent、IP代理、处理302重定向问题等等
  ☆60Updated 6 years ago
• speng4096 / PyLoom
  Python爬虫框架，内置微博、自如、豆瓣图书、拉勾网、拼多多等爬虫
  ☆250Updated 6 years ago
• pig6 / taobao_spider
  爬取淘宝商品信息
  ☆149Updated 6 years ago
• Jaysong2012 / tutorial
  Scrapy爬虫实战系列，从零开始爬取腾讯百度淘宝知乎各大网站内容 \n 12306刷票脚本系列
  ☆82Updated 6 years ago
• Northxw / Meituan
  美团（美食）店铺信息爬虫
  ☆118Updated 6 years ago
• Boris-code / boris-spider
  boris-spider是一款使用Python语言编写的爬虫框架，于多年的爬虫业务中不断磨合而诞生，相比于scrapy，该框架更易上手，且又满足复杂的需求，支持分布式及批次采集。
  ☆85Updated 3 years ago
• whbing / taobaospider
  scrapy爬虫天猫（淘宝）店铺店名、月销售量、价格等详细信息。涉及分类大类30多个，小类数百个。总爬取结果50万+条
  ☆58Updated 7 years ago
• zhanghe06 / news_spider
  新闻抓取（微信、微博、头条...）
  ☆225Updated 3 years ago
• hl10502 / scrapy_site
  使用Scrapy框架，通过关键字检索，爬取招标网站的招投标信息，每天定时发送Email
  ☆58Updated 8 years ago