Alternatives and similar repositories for spider-lianjia

Users that are interested in spider-lianjia are comparing it to the libraries listed below

• LongYosef / corpredit
  国家企业信用信息官网爬虫，未获取全部企业信息，重点在设计反爬思路
  ☆67Updated 7 years ago
• MgArcher / wenshu_jia
  基于scrapy实现裁判文书网爬虫
  ☆27Updated 5 years ago
• wanghuafeng / baidu_spider
  百度爬虫：热词，词频，音乐，poi信息
  ☆21Updated 10 years ago
• littlepai / Unofficial-Zhihu-API
  深度学习模型自动识别验证码，python爬虫库自动管理会话，通过简单易用的API，实现知乎数据的爬取
  ☆77Updated 3 years ago
• tenlee2012 / scrapy-kafka-redis
  Distributed crawling/scraping, Kafka And Redis based components for Scrapy
  ☆45Updated 5 years ago
• CooperMin / qichacha
  企查查企业分类信息采集
  ☆43Updated 5 years ago
• evanleungc / GoldSentAnalysis
  黄金舆情数据分析
  ☆51Updated 8 years ago
• Python3WebSpider / AjaxHookSpider
  Ajax Hook Demo
  ☆30Updated 5 years ago
• realzhengyiming / Spider_of_keywordRank
  搜索引擎关键词排位爬虫，包括百度，搜狗，360的搜索引擎关键词排位爬虫，关键词从百度热词中取得，排位分别从三个搜索引擎中抓取。
  ☆18Updated 6 years ago
• sunhailin-Leo / Scrapy-Kafka-Demo
  Scrapy and Kafka
  ☆14Updated 7 years ago
• govzhz / artical-spider
  智能文章解析爬虫
  ☆17Updated 8 years ago
• sml2h3 / openlawClawer
  openlaw数据爬虫v1.1 更新日期:2017.12.16 解决新版openlaw多种加密问题。引入celery轻松异步分布式，爬取速度再次翻倍！！
  ☆58Updated 6 years ago
• Python3WebSpider / CrackWeiboSlide
  Crack Weibo Slide Captcha
  ☆54Updated 7 years ago
• mimvp / mimvp-proxy-demo
  Proxy Demo of Java、Python、PHP、NodeJS、PhantomJS、Shell, etc.
  ☆44Updated 5 years ago
• mouday / SpiderAdmin
  SpiderAdmin 一个集爬虫Scrapy+Scrapyd爬虫项目查看 和 爬虫任务定时调度的可视化管理工具
  ☆96Updated 4 years ago
• maxnoodles / wechat_app_spider
  通过 airtest + mitmproxy 抓取手机端微信的公众号信息
  ☆39Updated 6 years ago
• da2vin / Spider_index
  爬取百度指数和阿里指数，采用selenium，存入hbase，验证码自动识别，多线程控制
  ☆32Updated 9 years ago
• kerlomz / captcha_spider
  简易验证码爬虫框架
  ☆23Updated 5 years ago
• zhanghe06 / news_spider
  新闻抓取（微信、微博、头条...）
  ☆225Updated 3 years ago
• iofu728 / spider
  🕷some website spider application base on proxy pool (support http & websocket)
  ☆112Updated 4 years ago
• boss-mao / scrapy_enterprise_architecture
  python scrapy 企业级分布式爬虫开发架构模板
  ☆95Updated 7 years ago
• 1414044032 / FlaskWX
  基于微信网页版爬虫来对微信中获取到的联系人相关信息Flask，Echarts进行数据分析
  ☆13Updated 6 years ago
• yeyeye777 / weixin_article_spider
  搜狗微信文章爬虫，对于临时链接进行转换为永久链接。
  ☆10Updated 5 years ago
• striver-ing / distributed-spider
  通用新闻类网站分布式爬虫
  ☆79Updated 7 years ago
• runtangr / taoyoulue_spider
  基于mongodb存储，redis缓存，celery 实现的分布式爬虫。
  ☆13Updated 3 years ago
• howie6879 / anan
  安安 - 育儿医疗问答机器人
  ☆23Updated 6 years ago
• soul-cat / DouYinSign
  web版抖音采集的一种解决方案
  ☆19Updated 5 years ago
• shuizhengqi1 / MaiMaiSpider
  ☆14Updated 8 years ago
• Python3WebSpider / PyppeteerTest
  Pyppeteer Demo
  ☆43Updated 5 years ago
• Python3WebSpider / ScrapyUniversal
  Scrapy Universal Spider
  ☆55Updated 8 years ago