Alternatives and similar repositories for JDSpider

Users that are interested in JDSpider are comparing it to the libraries listed below

• guapier / zufang
  租房爬虫，基于flask，采用apscheduler定时任务，通过微信，定时给用户推送想要的租房信息
  ☆14Updated 6 years ago
• laixin86714802 / spider-platform
  可视化爬虫自动采集平台
  ☆185Updated 2 years ago
• kingking888 / CommNewsExtractor
  通用文章提取，正文，标题，时间，作者，图片，音视频，联系方式等
  ☆23Updated 2 years ago
• boss-mao / scrapy_enterprise_architecture
  python scrapy 企业级分布式爬虫开发架构模板
  ☆95Updated 7 years ago
• littlepai / Unofficial-Zhihu-API
  深度学习模型自动识别验证码，python爬虫库自动管理会话，通过简单易用的API，实现知乎数据的爬取
  ☆77Updated 3 years ago
• realzhengyiming / Spider_of_keywordRank
  搜索引擎关键词排位爬虫，包括百度，搜狗，360的搜索引擎关键词排位爬虫，关键词从百度热词中取得，排位分别从三个搜索引擎中抓取。
  ☆18Updated 6 years ago
• sml2h3 / openlawClawer
  openlaw数据爬虫v1.1 更新日期:2017.12.16 解决新版openlaw多种加密问题。引入celery轻松异步分布式，爬取速度再次翻倍！！
  ☆58Updated 6 years ago
• ioiogoo / scrapy-monitor
  scrapy-monitor，实现爬虫可视化，监控实时状态
  ☆109Updated 9 years ago
• longxiaofei / dianping
  大众点评商家评论爬虫
  ☆49Updated 6 years ago
• mouday / SpiderAdmin
  SpiderAdmin 一个集爬虫Scrapy+Scrapyd爬虫项目查看 和 爬虫任务定时调度的可视化管理工具
  ☆96Updated 4 years ago
• xiaosimao / wx_code
  公众号文章代码
  ☆62Updated 6 years ago
• striver-ing / distributed-spider
  通用新闻类网站分布式爬虫
  ☆79Updated 7 years ago
• xzh0723 / Taobao
  破解淘宝h5页面的sign参数， 新增淘宝pyppeteer登录， 有效绕过自动化工具检测。
  ☆55Updated 6 years ago
• Python3WebSpider / ScrapyUniversal
  Scrapy Universal Spider
  ☆56Updated 8 years ago
• xiucaicoder / douyin-spider
  抖音无水印视频爬虫
  ☆11Updated 5 years ago
• qqxx6661 / flask_yzd
  旧版某东监控网站前后端，轻量级Flask网站，可用作学习Flask
  ☆74Updated 2 years ago
• wkunzhi / SpiderUtilPackage
  📦 原创开发的 爬虫实用工具 【特定代理池】【特定cookies池】【注册辅助工具】
  ☆118Updated 6 years ago
• Northxw / Meituan
  美团（美食）店铺信息爬虫
  ☆118Updated 6 years ago
• facert / scrapy_helper
  Dynamic configurable crawl (动态可配置化爬虫)
  ☆86Updated 7 years ago
• HegemonyTao / crawlProject
  今日头条 、淘宝 、微博 、斗鱼 、抖音 、哔哩哔哩 、有道翻译、steam网站以及网易云音乐爬取
  ☆60Updated 5 years ago
• runtangr / taoyoulue_spider
  基于mongodb存储，redis缓存，celery 实现的分布式爬虫。
  ☆13Updated 3 years ago
• Germey / DragCaptcha
  Drag Captcha
  ☆20Updated 4 years ago
• pymyworld / xingji100_spider
  主播数据平台基础数据爬虫，包括斗鱼、企鹅、熊猫、b站、全民、虎牙、龙珠、战旗、火猫
  ☆16Updated 7 years ago
• Henryhaohao / Slider_Captcha_Crack
  Slider_Captcha_Crack某教育网站滑动验证码破解(识别率100%)
  ☆51Updated 7 years ago
• ice-tong / boring_item
  淘宝商品信息爬虫，词云，知乎模拟登陆，快音视加密参数获取，C# WPF 应用。
  ☆49Updated 7 years ago
• nickliqian / interactive_captcha
  交互式验证码（滑动、点选等）的识别方案和例子。
  ☆43Updated 7 years ago
• I4Can / ShoppingWebsiteCrawlwer
  基于关键字的配置化电商爬虫，目前已实现京东和苏宁（淘宝反爬太严重，因为没有使用selenium）
  ☆12Updated 5 years ago
• Henryhaohao / Wenshu_Spider
  Wenshu_Spider-Scrapy框架爬取中国裁判文书网案件数据(2019-1-9最新版)
  ☆201Updated 7 years ago
• chancechang / pySpider
  爬虫项目，领英、专利、乐捐、好大夫、阿里拍卖、看准网、实习僧、百度百科、51job、智联招聘等近80个网站
  ☆81Updated 5 years ago
• cyhleo / DaZongDianPing
  爬取大众点评中11205条厦门美食商铺信息，其中包含店名、人均消费、所属菜系、所属商圈、详细地址、口味评分、环境评分、服务评分信息。
  ☆20Updated 5 years ago