Alternatives and similar repositories for spiders:

Users that are interested in spiders are comparing it to the libraries listed below

• AwesomeCrawler / taobao_login
  淘宝登录，获取Cookies
  ☆78Updated 4 years ago
• onetwo1 / pinduoduo
  pdd (拼多多) 爬虫 js 解密 anti_content 参数解密及全站抓取代码思路实现
  ☆150Updated 5 years ago
• jynvch / pdd_spider
  爬取拼多多, 涉及到js解密, http://mobile.yangkeduo.com/search_result.html?search_key=%E6%9C%88%E9%A5%BC
  ☆17Updated 5 years ago
• xzh0723 / Taobao
  破解淘宝h5页面的sign参数， 新增淘宝pyppeteer登录， 有效绕过自动化工具检测。
  ☆56Updated 5 years ago
• panoslin / DouYinSpider
  Fiddler + Appium + Mitmproxy + Android Emulator
  ☆71Updated 4 years ago
• rockswang / wsjs.saic.mmewmd
  中国商标网加密接口。解析网页中的<meta id="9DhefwqGPrzGxEp9hPaoag">等加密内容，生成包含FSSBBIl1UgzbN7N80T, MmEwMD, y7bRbp, c1K5tw0w6_等密文的合法HTTP请求。
  ☆65Updated 5 years ago
• worldwonderer / gsxt_captcha
  破解含语序问题的点击验证码
  ☆23Updated 5 years ago
• naiveliberty / Toutiao_Spider
  今日头条新闻详情页面爬取，逆向 Cookies 中 __ac_signature 生成过程
  ☆34Updated 4 years ago
• chenchong6 / taobao-login
  taobao-login
  ☆46Updated 6 years ago
• jindameias / pdd_yangkeduo_spider
  ☆27Updated 5 years ago
• Henryhaohao / Taobao
  Selenium+PhantomJS淘宝商品信息的定向爬取
  ☆21Updated 6 years ago
• pymyworld / xingji100_spider
  主播数据平台基础数据爬虫，包括斗鱼、企鹅、熊猫、b站、全民、虎牙、龙珠、战旗、火猫
  ☆17Updated 6 years ago
• soul-cat / DouYinSign
  web版抖音采集的一种解决方案
  ☆19Updated 4 years ago
• huaerxiela / MyJSCrack
  js破解相关
  ☆79Updated 5 years ago
• onetwo1 / du-app
  毒 app sign 签名 js 解密的 python 复写版本
  ☆27Updated 5 years ago
• Weiney / douyin
  Just a simple app spider for douyin(Tiktok)
  ☆31Updated last year
• Boris-code / boris-spider
  boris-spider是一款使用Python语言编写的爬虫框架，于多年的爬虫业务中不断磨合而诞生，相比于scrapy，该框架更易上手，且又满足复杂的需求，支持分布式及批次采集。
  ☆83Updated 3 years ago
• nickliqian / interactive_captcha
  交互式验证码（滑动、点选等）的识别方案和例子。
  ☆43Updated 6 years ago
• 18670775011 / VPS_Proxy
  顶点小说网站全站爬取
  ☆27Updated 6 years ago
• striver-ing / crack_slider
  缺口类滑块验证码识别
  ☆34Updated 5 years ago
• xNathan / squid_proxy_pool
  Squid 代理池搭建
  ☆91Updated 5 years ago
• maxnoodles / wechat_app_spider
  通过 airtest + mitmproxy 抓取手机端微信的公众号信息
  ☆38Updated 5 years ago
• bytebuff / aioScrapy
  基于asyncio与aiohttp的异步协程爬虫框架 欢迎Star
  ☆35Updated 5 years ago
• OFZFZS / JS-Decryption
  提供大陆主流网站JS登录加密的解密例子(适合爬虫模拟登录)
  ☆85Updated 6 years ago
• qi20172017 / douyin_spider
  APP端爬取抖音数据
  ☆9Updated 5 years ago
• ybsdegit / JS_reverse_translate
  JS逆向—破解有道、百度、谷歌翻译爬虫参数（sign）
  ☆38Updated 5 years ago
• zhoujianjian / kurry
  京东/淘宝/拼多多/条形码 爬虫
  ☆11Updated 2 years ago
• swukong / douyin_signature
  抖音接口signature的生成破解
  ☆84Updated 6 years ago
• 13060923171 / Crawl-Project
  一些有趣的小项目，实现一些小功能，需要的可以下载来玩玩有qq音乐，京东，房天下，快代理的代理池，抖音，百度文库，千图，网易新闻，百度新闻，微博，酷狗，最好大学网，淘宝，豆瓣，天猫，有道翻译，疫情地图等
  ☆33Updated 5 months ago
• sml2h3 / HM4hUBT0dDOn80T_for_wenshu
  文书网最新解密server
  ☆20Updated 5 years ago