Alternatives and similar repositories for spiders

Users that are interested in spiders are comparing it to the libraries listed below

• onetwo1 / pinduoduo
  pdd (拼多多) 爬虫 js 解密 anti_content 参数解密及全站抓取代码思路实现
  ☆154Updated 6 years ago
• xzh0723 / Taobao
  破解淘宝h5页面的sign参数， 新增淘宝pyppeteer登录， 有效绕过自动化工具检测。
  ☆55Updated 6 years ago
• panoslin / DouYinSpider
  Fiddler + Appium + Mitmproxy + Android Emulator
  ☆71Updated 5 years ago
• chenchong6 / taobao-login
  taobao-login
  ☆45Updated 7 years ago
• Weiney / douyin
  Just a simple app spider for douyin(Tiktok)
  ☆32Updated 2 years ago
• Python3WebSpider / AdslProxy
  Adsl Proxy Pool
  ☆239Updated 2 years ago
• lixi5338619 / weixin-spider
  《微信公众号采集系统》微信公众号文章的阅读数、在看数、评论数、评论列表，还有微信公众号的账号基本信息。
  ☆184Updated 3 years ago
• 3394772548 / yue-spider
  手机淘宝App 闲鱼App 相关爬虫 学习测试
  ☆138Updated 6 years ago
• skygongque / douyin_signature
  douyin web signature
  ☆118Updated 2 years ago
• OFZFZS / JS-Decryption
  提供大陆主流网站JS登录加密的解密例子(适合爬虫模拟登录)
  ☆88Updated 7 years ago
• jynvch / pdd_spider
  爬取拼多多, 涉及到js解密, http://mobile.yangkeduo.com/search_result.html?search_key=%E6%9C%88%E9%A5%BC
  ☆19Updated 6 years ago
• AwesomeCrawler / taobao_login
  淘宝登录，获取Cookies
  ☆77Updated 5 years ago
• swukong / douyin_signature
  抖音接口signature的生成破解
  ☆87Updated 7 years ago
• lifei1245 / Aweme-Kuaishou-Douyin
  抖音大部分接口,以及快手的首页feed接口 soul app接口 nice app接口 毒app加签接口
  ☆119Updated 6 years ago
• wc110302 / My-spider
  Spider of learning
  ☆128Updated 3 years ago
• wkunzhi / SpiderUtilPackage
  📦 原创开发的 爬虫实用工具 【特定代理池】【特定cookies池】【注册辅助工具】
  ☆118Updated 6 years ago
• rockswang / wsjs.saic.mmewmd
  中国商标网加密接口。解析网页中的<meta id="9DhefwqGPrzGxEp9hPaoag">等加密内容，生成包含FSSBBIl1UgzbN7N80T, MmEwMD, y7bRbp, c1K5tw0w6_等密文的合法HTTP请求。
  ☆66Updated 6 years ago
• wc110302 / AntiCrawlerSolution
  It covers the blockade principle of most anti-climbing strategies and corresponding solutions.（涵盖了大部分的反爬策略的封锁原理以及对应的解决方案。）
  ☆283Updated 7 years ago
• huaerxiela / MyJSCrack
  js破解相关
  ☆80Updated 6 years ago
• Boris-code / boris-spider
  boris-spider是一款使用Python语言编写的爬虫框架，于多年的爬虫业务中不断磨合而诞生，相比于scrapy，该框架更易上手，且又满足复杂的需求，支持分布式及批次采集。
  ☆85Updated 3 years ago
• ybsdegit / JS_reverse_translate
  JS逆向—破解有道、百度、谷歌翻译爬虫参数（sign）
  ☆37Updated 6 years ago
• xzkzdx / WeChatPC
  WeChat PC 微信PC版自动化控制API
  ☆98Updated 6 years ago
• Northxw / Pinduoduo
  拼多多商品信息爬虫
  ☆205Updated 6 years ago
• ybsdegit / captcha_qq
  腾讯防水墙滑动验证码破解
  ☆159Updated 6 years ago
• 13060923171 / Crawl-Project
  一些有趣的小项目，实现一些小功能，需要的可以下载来玩玩有qq音乐，京东，房天下，快代理的代理池，抖音，百度文库，千图，网易新闻，百度新闻，微博，酷狗，最好大学网，淘宝，豆瓣，天猫，有道翻译，疫情地图等
  ☆34Updated last year
• mouday / SpiderAdmin
  SpiderAdmin 一个集爬虫Scrapy+Scrapyd爬虫项目查看 和 爬虫任务定时调度的可视化管理工具
  ☆96Updated 4 years ago
• soul-cat / DouYinSign
  web版抖音采集的一种解决方案
  ☆19Updated 5 years ago
• nickliqian / interactive_captcha
  交互式验证码（滑动、点选等）的识别方案和例子。
  ☆43Updated 7 years ago
• ErisYoung / douyin_spider
  🎨One simple and easy to use crawler for DouYin（一个简单易用的抖音爬虫,可下载指定用户,挑战,音乐的视频,音频和数据)
  ☆67Updated 6 years ago
• OSinoooO / bilibili_geetest
  B站滑块验证码破解（极验）
  ☆65Updated 7 years ago