Alternatives and similar repositories for spider:

Users that are interested in spider are comparing it to the libraries listed below

• bowenpay / weibo-spider
  微博爬虫。通过调用weibo api，而非暴力爬取的方式获取信息。
  ☆32Updated 8 years ago
• pengfexue2 / hot_display
  爬取热门网站的热榜，集中展示；Integrate and display hot billboard or ranked topic from hot Chinese websites
  ☆14Updated 5 years ago
• CooperMin / qichacha
  企查查企业分类信息采集
  ☆43Updated 5 years ago
• url2io / url2io-python-sdk
  ⛔ [DEPRECATED] URL2io Python SDK，用于网页信息提取，如正文提取
  ☆41Updated 4 years ago
• Centurywang / spider_DownloadMeizituPictures
  爬取妹子图
  ☆10Updated 5 years ago
• longxiaofei / spider-lianjia
  链家二手房爬虫
  ☆11Updated 7 years ago
• bytebuff / dj-poetry-es
  django+es搭建的前后端分离，唐诗宋词搜索引擎。
  ☆34Updated 3 years ago
• hkcityu / xiaohongshu
  小红书API，获取小红书帖子内容，评论内容等信息
  ☆18Updated 5 years ago
• tianshuang / pull-readhub
  Pull news from https://readhub.cn/ and push to dingtalk
  ☆13Updated 2 years ago
• zkqiang / crawler-chrome-extensions
  爬虫工程师常用的 Chrome 插件 | Chrome extensions used by crawler developer
  ☆84Updated 2 years ago
• caiyongji / wechat-ranking
  微信公众号10w+文章数据
  ☆35Updated 6 years ago
• IshtarTang / weibo_spider-scrapy
  微博的爬虫，爬个人主页，用的scrapy 框架
  ☆27Updated last month
• maxnoodles / wechat_app_spider
  通过 airtest + mitmproxy 抓取手机端微信的公众号信息
  ☆38Updated 5 years ago
• zhangshier / scrapy-
  爬虫
  ☆14Updated 7 years ago
• liuhuanyong / AliIndexSpyder
  self complemented AlindexSpyder based on Selenium ，阿里商品指数抓取，包括淘宝采购指数，淘宝供应指数，1688供应指数。
  ☆21Updated 6 years ago
• shuizhengqi1 / MaiMaiSpider
  ☆14Updated 7 years ago
• gisShield / douyin
  抖音数据爬虫，初学python和scrapy框架的练手项目，未完善版本
  ☆24Updated 5 years ago
• evanleungc / GoldSentAnalysis
  黄金舆情数据分析
  ☆51Updated 7 years ago
• Yogayu / weibo-summary
  微博自动摘要系统 Chinese Microblog Automatic Summary System
  ☆30Updated 6 years ago
• Coande / co-wechat-life-export
  一个无需 root，用于导出朋友圈内容的 Auto.js Pro 项目
  ☆25Updated 2 years ago
• 52Lau / weixin_crawler-1
  高效微信公众号历史文章和阅读数据爬虫powered by scrapy 微信公众号爬虫 微信采集 公众号采集
  ☆66Updated 6 years ago
• iHealth-ecnu / iHealth_crawler
  iHealth 项目的内容爬虫（一个基于 python 和 MongoDB 的医疗咨询爬虫）
  ☆26Updated 5 years ago
• Degree-21 / xhs_sex
  怎么快速在小红书上找到性感美女,短视频，文章，爬虫，airtest,python,poco
  ☆22Updated 4 years ago
• chinwuDebug / CNKI-Sogou_Wechat-Sogou_News-Spider
  知网、搜狗微信、搜狗新闻的爬虫
  ☆15Updated 6 years ago
• LoseNine / TopList-python
  今日热榜项目TopList的Python实现，异步爬取微博热榜，知乎，V2EX，GIthub，通过Flask展示。
  ☆71Updated 5 years ago
• zhoujianjian / kurry
  京东/淘宝/拼多多/条形码 爬虫
  ☆11Updated 2 years ago
• AEXLORD / taobaoAnalysis
  一个不成熟的半自动淘宝商品评论爬取、清洗、分析、生成报表工具
  ☆21Updated 3 years ago
• downdawn / eswork
  ElasticSearch+Django+Scrapy搜索引擎
  ☆27Updated 2 years ago
• dongshixiaohehe / vxarticle_spider
  微信公众号文章采集爬虫，点赞数，评论数，阅读数，万能key，twitter爬虫，突破twitter限制，twitter数据采集，小红书详情采集，小红书采集，facebook数据采集 提供twitter,gzh,xhs api,xhs等全量数据，联系飞机 https://…
  ☆25Updated last week
• realzhengyiming / Spider_of_keywordRank
  搜索引擎关键词排位爬虫，包括百度，搜狗，360的搜索引擎关键词排位爬虫，关键词从百度热词中取得，排位分别从三个搜索引擎中抓取。
  ☆19Updated 5 years ago