Alternatives and similar repositories for spider

Users that are interested in spider are comparing it to the libraries listed below

• CooperMin / qichacha
  企查查企业分类信息采集
  ☆43Updated 5 years ago
• bytebuff / dj-poetry-es
  django+es搭建的前后端分离，唐诗宋词搜索引擎。
  ☆35Updated 3 years ago
• realzhengyiming / Spider_of_keywordRank
  搜索引擎关键词排位爬虫，包括百度，搜狗，360的搜索引擎关键词排位爬虫，关键词从百度热词中取得，排位分别从三个搜索引擎中抓取。
  ☆19Updated 5 years ago
• longxiaofei / spider-lianjia
  链家二手房爬虫
  ☆11Updated 7 years ago
• zhoujianjian / kurry
  京东/淘宝/拼多多/条形码 爬虫
  ☆11Updated 2 years ago
• hahaha108 / MyNews
  基于scrapy-redis的分布式新闻爬虫，可同时获取腾讯、网易、搜狐、凤凰网、新浪、东方财富、人民网等各大平台新闻资讯
  ☆45Updated 7 years ago
• maxnoodles / wechat_app_spider
  通过 airtest + mitmproxy 抓取手机端微信的公众号信息
  ☆39Updated 5 years ago
• RogerLiNing / wechat_mp
  微信公众号后台还是有很多好玩的API的， 例如搜索某个公众号的所有历史图文，或者根据关键词搜索原创的推文。
  ☆54Updated 2 years ago
• laixin86714802 / spider-platform
  可视化爬虫自动采集平台
  ☆185Updated 2 years ago
• striver-ing / distributed-spider
  通用新闻类网站分布式爬虫
  ☆78Updated 7 years ago
• quarrying / baidu-top-crawler
  定时爬取百度搜索风云榜实时热点.
  ☆34Updated this week
• mobishift2011 / data007
  类似数据魔方的淘宝数据分析工具，包括商品分析，店铺分析，类别分析，品牌分析等。
  ☆27Updated 2 years ago
• moyuweiqing / dazhongdianping
  更新给出selenium库的爬虫，效率很高，且能直接用。 python，大众点评的爬虫，突破反爬，获取关于任意店铺的评论和评分之类的。给出破解css加密的逻辑
  ☆40Updated 5 years ago
• LongYosef / corpredit
  国家企业信用信息官网爬虫，未获取全部企业信息，重点在设计反爬思路
  ☆69Updated 7 years ago
• 52Lau / weixin_crawler-1
  高效微信公众号历史文章和阅读数据爬虫powered by scrapy 微信公众号爬虫 微信采集 公众号采集
  ☆67Updated 6 years ago
• caiyongji / wechat-ranking
  微信公众号10w+文章数据
  ☆35Updated 6 years ago
• LyuDun / WeChatAssistant
  微信助手，有扫码登陆、关键词监控、自动回复、关键词及回复内容展示、群发消息等功能
  ☆47Updated 5 years ago
• mymusise / Baidu-Hot
  记录每天百度搜索热点
  ☆24Updated 3 years ago
• LoseNine / TopList-python
  今日热榜项目TopList的Python实现，异步爬取微博热榜，知乎，V2EX，GIthub，通过Flask展示。
  ☆71Updated 5 years ago
• luobo157 / weiyuanchuang
  伪原创相关
  ☆14Updated 5 years ago
• zkqiang / crawler-chrome-extensions
  爬虫工程师常用的 Chrome 插件 | Chrome extensions used by crawler developer
  ☆89Updated 3 years ago
• Joey-Coder / WeixinPublicCrawler
  微信公众号爬虫，可爬取公众号和文章
  ☆13Updated 5 years ago
• Aoshika123 / TaoBao-Reptile
  对淘宝（天猫）的评论爬取并进行简单分析
  ☆27Updated 5 years ago
• NiShuang / new_media_fans_cralwer
  facebook，微博，twitter，youtube，优酷 信息爬虫
  ☆22Updated 6 years ago
• naginoa / python-spider
  58同城 智联招聘 hao123 网易云课堂 中国大学排名 等 的python的一些爬虫
  ☆28Updated 5 years ago
• brady-chen / tbNews
  金融新闻增量式聚焦爬虫
  ☆21Updated 8 years ago
• Liangchengdeye / DaZhongdianping
  ☆105Updated 4 years ago
• Srpihot / GoodsSpider
  电商平台商品自定义爬虫脚本(已完成淘宝,京东)
  ☆100Updated 3 years ago
• SmileSmith / tiny-red-book
  小红书数据抓取
  ☆172Updated 6 years ago
• ice-tong / boring_item
  淘宝商品信息爬虫，词云，知乎模拟登陆，快音视加密参数获取，C# WPF 应用。
  ☆49Updated 6 years ago