Alternatives and similar repositories for spider

Users that are interested in spider are comparing it to the libraries listed below

• soul-cat / DouYinSign
  web版抖音采集的一种解决方案
  ☆19Updated 5 years ago
• 18670775011 / VPS_Proxy
  顶点小说网站全站爬取
  ☆29Updated 6 years ago
• xzh0723 / Taobao
  破解淘宝h5页面的sign参数， 新增淘宝pyppeteer登录， 有效绕过自动化工具检测。
  ☆56Updated 6 years ago
• Python3WebSpider / AjaxHookSpider
  Ajax Hook Demo
  ☆31Updated 5 years ago
• maxnoodles / wechat_app_spider
  通过 airtest + mitmproxy 抓取手机端微信的公众号信息
  ☆39Updated 6 years ago
• OFZFZS / JS-Decryption
  提供大陆主流网站JS登录加密的解密例子(适合爬虫模拟登录)
  ☆89Updated 7 years ago
• onetwo1 / pinduoduo
  pdd (拼多多) 爬虫 js 解密 anti_content 参数解密及全站抓取代码思路实现
  ☆155Updated 6 years ago
• govzhz / artical-spider
  智能文章解析爬虫
  ☆17Updated 8 years ago
• cxapython / discogs_aio_spider
  基于httpx的一个大型项目 ，爬取黑胶唱片网站 Discogs
  ☆102Updated 6 months ago
• h1code2 / douyin_search_result
  Xposed+Sekiro简单实现抖音搜索结果获取
  ☆65Updated 5 years ago
• jynvch / pdd_spider
  爬取拼多多, 涉及到js解密, http://mobile.yangkeduo.com/search_result.html?search_key=%E6%9C%88%E9%A5%BC
  ☆19Updated 6 years ago
• panoslin / DouYinSpider
  Fiddler + Appium + Mitmproxy + Android Emulator
  ☆70Updated 5 years ago
• yjqiang / geetest_test
  极验滑动验证码研究报告
  ☆70Updated 4 years ago
• rockswang / wsjs.saic.mmewmd
  中国商标网加密接口。解析网页中的<meta id="9DhefwqGPrzGxEp9hPaoag">等加密内容，生成包含FSSBBIl1UgzbN7N80T, MmEwMD, y7bRbp, c1K5tw0w6_等密文的合法HTTP请求。
  ☆66Updated 6 years ago
• wkunzhi / SpiderUtilPackage
  📦 原创开发的 爬虫实用工具 【特定代理池】【特定cookies池】【注册辅助工具】
  ☆118Updated 6 years ago
• crazyxw / JsDecrypt
  js逆向解析
  ☆41Updated 5 years ago
• h1code2 / douyin_search
  frida rpc + Flask简单实现抖音搜索接口
  ☆113Updated 5 years ago
• lixi5338619 / weixin-spider
  《微信公众号采集系统》微信公众号文章的阅读数、在看数、评论数、评论列表，还有微信公众号的账号基本信息。
  ☆184Updated 3 years ago
• 1543889217 / nike_spider
  各个主流电商平台商品信息爬虫
  ☆26Updated 5 years ago
• tanxfengs / spiders
  记录一下
  ☆39Updated 3 years ago
• abo123456789 / leek
  Distributed task redisqueue(最简单python分布式函数调度框架)
  ☆65Updated 2 months ago
• chenchong6 / taobao-login
  taobao-login
  ☆45Updated 7 years ago
• skygongque / Spider
  爬虫合集
  ☆127Updated 2 years ago
• casual-silva / ppyolo-captcha
  使用百度开源ppyolo3目标检测模型识别滑动验证码 极验滑块验证码 识别成功率99% 🎯
  ☆87Updated 4 years ago
• Boris-code / boris-spider
  boris-spider是一款使用Python语言编写的爬虫框架，于多年的爬虫业务中不断磨合而诞生，相比于scrapy，该框架更易上手，且又满足复杂的需求，支持分布式及批次采集。
  ☆85Updated 4 years ago
• ybsdegit / JS_reverse_translate
  JS逆向—破解有道、百度、谷歌翻译爬虫参数（sign）
  ☆37Updated 6 years ago
• bytebuff / aioScrapy
  基于asyncio与aiohttp的异步协程爬虫框架 欢迎Star
  ☆35Updated 6 years ago
• zhaoboy9692 / dailyanalysis
  日常逆向分析的app，逆向教程 | 安卓逆向 | 安卓破解 | 财联社 | 企名片 | 钛媒体 | 新华社 | 伊对相亲 | 毒 | shockAPP | 封面新闻 | 口袋故事|95分
  ☆305Updated 4 years ago
• cxapython / infoq_aiospider
  基于aiohttp的infoq技术资讯网站爬虫
  ☆29Updated 3 years ago
• Boris-code / feaplat
  爬虫管理系统，支持集群，弹性伸缩。支持运行feapder、scrapy、selenium、playwright等各种框架及脚本
  ☆129Updated last year