Alternatives and similar repositories for spiders:

Users that are interested in spiders are comparing it to the libraries listed below

• Litre-WU / businessInfo-api
  企业工商信息接口(包含天眼查、企查查、爱企查、国家企业公示系统平台、快准)
  ☆95Updated 2 years ago
• JoeanAmier / Spiders
  Python 网络爬虫实例
  ☆56Updated 2 years ago
• jielundong / douyin-gg
  抖音用户分享主页信息和无水印视频链接抓取
  ☆45Updated 2 years ago
• OrangeySeven / RedbookSpider
  小红书笔记爬虫
  ☆140Updated 3 years ago
• striver-ing / distributed-spider
  通用新闻类网站分布式爬虫
  ☆74Updated 6 years ago
• yezl77 / tianyancha
  天眼查爬取企业信息-企业信用信息查询系统-天眼查爬虫
  ☆74Updated 4 years ago
• LumingMelody / red_book_spider
  小红书相关爬虫
  ☆85Updated 2 years ago
• xm9304 / Taobao_spider
  淘宝的模拟登录，有requests和selenium两个版本
  ☆47Updated 4 years ago
• LLLzasd / python_spider
  一些 Python 爬虫练习：bilibili用户信息爬取、下载工具、房天下新房二手房redis分布式爬虫、简书全站文章爬取、观察者网站首页新闻爬取、淘宝模拟登陆、淘宝搜索商品信息爬取及可视化展示、知乎问题回答信息爬取\抖音无水印视频下载
  ☆126Updated last month
• zhaoboy9692 / qccspider
  企查查企业信息爬虫 ，企查查app每日新增企业抓取,可以进行每日的增量抓取、企业数据、工商数据等等。
  ☆316Updated 2 years ago
• kingking888 / CommNewsExtractor
  通用文章提取，正文，标题，时间，作者，图片，音视频，联系方式等
  ☆23Updated last year
• LMFrank / CrawlerProject
  爬虫项目：链家网（普通/scrapy）、虎扑、维基百科、百度地图api、房天下（分布式爬虫）、微信公众号（代理池爬取）
  ☆211Updated 2 years ago
• hahaha108 / MyNews
  基于scrapy-redis的分布式新闻爬虫，可同时获取腾讯、网易、搜狐、凤凰网、新浪、东方财富、人民网等各大平台新闻资讯
  ☆42Updated 6 years ago
• lixi5338619 / weixin-spider
  《微信公众号采集系统》微信公众号文章的阅读数、在看数、评论数、评论列表，还有微信公众号的账号基本信息。
  ☆168Updated 2 years ago
• monkey-hjy / python-spider
  python爬虫小项目【持续更新】【笔趣阁小说下载、Tweet数据抓取、天气查询、网易云音乐逆向、天天基金网查询、微博数据抓取（生成cookie）、有道翻译逆向、企查查免登陆爬虫、大众点评svg加密破解、B站用户爬虫、拉钩免登录爬虫、自如租房字体加密、知乎问答
  ☆105Updated last year
• yangge11 / scrapy_pro
  关于5000+站点的scrapy爬虫开发，涉及一些技术架构搭建以及各种反爬方案，详见readme文件
  ☆30Updated 2 years ago
• MgArcher / jiasule
  最新破解国家企业信用信息公示系统加速乐加密cookies
  ☆42Updated last year
• yokonsan / qcc_header_sign
  企查查请求头反爬破解
  ☆39Updated 4 years ago
• LunaticTian / TieBa-API-Sentiment
  贴吧API 微信智能控制 贴吧舆情监控 关键词分析 热点分析 python3 爬虫
  ☆103Updated 4 years ago
• leishufei / JS-Crack-Records
  各大网站逆向demo。企名片、震坤行工业超市、天翼云登录、物超所值、瓜子二手车、马蜂窝、中华诗词库、澳门彩票、药智网、福建省招标投标在线监管平台、全国公共资源交易平台、问卷星、中国人民银行条法司、中华人民共和国公安部、AqiStudy、巨量星图、HeyTap、掌上高考、船讯…
  ☆128Updated 3 years ago
• laixin86714802 / spider-platform
  可视化爬虫自动采集平台
  ☆177Updated 2 years ago
• IshtarTang / weibo_spider-scrapy
  微博的爬虫，爬个人主页，用的scrapy 框架
  ☆25Updated this week
• F-debug / NewsSpider
  该项目是基于Scrapy框架的Python新闻爬虫，能够爬取网易，搜狐，凤凰和澎湃网站上的新闻，将标题，内容，评论，时间等内容整理并保存到本地
  ☆37Updated 5 years ago
• LoseNine / TopList-python
  今日热榜项目TopList的Python实现，异步爬取微博热榜，知乎，V2EX，GIthub，通过Flask展示。
  ☆70Updated 5 years ago
• 52Lau / weixin_crawler-1
  高效微信公众号历史文章和阅读数据爬虫powered by scrapy 微信公众号爬虫 微信采集 公众号采集
  ☆64Updated 5 years ago
• whbing / taobaospider
  scrapy爬虫天猫（淘宝）店铺店名、月销售量、价格等详细信息。涉及分类大类30多个，小类数百个。总爬取结果50万+条
  ☆55Updated 7 years ago
• lonngxiang / xiaohongshu-spider
  小红书抓取，微信小程序，抓包工具
  ☆69Updated 5 years ago
• wangluozhe / toutiao
  今日头条用户数据的文章和视频爬取
  ☆49Updated 4 years ago
• Aoshika123 / TaoBao-Reptile
  对淘宝（天猫）的评论爬取并进行简单分析
  ☆27Updated 4 years ago
• ZhaoMeng8959 / Spider-GongZhongHao
  微信公众号爬虫，根据指定公众号名称，爬取该公众号所有文章。
  ☆36Updated 2 years ago