Alternatives and similar repositories for SpiderRef

Users that are interested in SpiderRef are comparing it to the libraries listed below

• netxfly / dianying
  中国主流在线电影网站爬虫及搜索web代码
  ☆34Updated 11 years ago
• shelmesky / crawler
  淘宝爬虫原型，基于gevent
  ☆49Updated 12 years ago
• wwj718 / jobSpider
  jobSpider是一只scrapy爬虫，用于爬取职位信息
  ☆27Updated 8 years ago
• LiuRoy / spider_docker
  为爬虫引用创建container，包括的模块：scrapy, mongo, celery, rabbitmq
  ☆37Updated 9 years ago
• A1014280203 / Ugly-Distributed-Crawler
  基于Redis实现的简单到爆的分布式爬虫
  ☆47Updated 7 years ago
• weizetao / spider-roach
  分布式定向抓取集群
  ☆71Updated 7 years ago
• Wooden-Robot / spider-practice
  ☆20Updated 8 years ago
• limboinf / PersonNotes
  个人笔记集中营，快糙猛的形式记录技术性Notes .. 📚☕️⌨️🎧
  ☆63Updated 5 years ago
• wanghuafeng / baidu_spider
  百度爬虫：热词，词频，音乐，poi信息
  ☆22Updated 10 years ago
• awolfly9 / job_wxbot
  微信机器人抓取并分发招聘信息
  ☆25Updated 8 years ago
• da2vin / Spider_index
  爬取百度指数和阿里指数，采用selenium，存入hbase，验证码自动识别，多线程控制
  ☆32Updated 8 years ago
• wklken / KeepLearning
  之前学习一些东西的代码集合, 一般跟某份教程或者某本书一致. 代码+详细注释, 可执行
  ☆21Updated 9 years ago
• phodal / ml
  Python Github
  ☆16Updated 11 years ago
• qiwsir / BitJSCode
  ☆23Updated 9 years ago
• PyCN / lagou_spider
  拉勾网爬虫, 利用通过微信公众号推送数据
  ☆8Updated 8 years ago
• backto17 / SinaHouseCrawler
  基于scrapy,scrapy-redis实现的一个分布式网络爬虫,爬取了新浪房产的楼盘信息及户型图片,实现了常用的爬虫功能需求.
  ☆40Updated 8 years ago
• 521xueweihan / PySpider
  Python爬虫的学习历程
  ☆52Updated 7 years ago
• zihaolucky / Undergraduate-Innovation-Program
  SNS用户交互学习行为研究
  ☆46Updated 10 years ago
• bowenpay / weibo-spider
  微博爬虫。通过调用weibo api，而非暴力爬取的方式获取信息。
  ☆32Updated 8 years ago
• Germey / TaobaoUser
  Get anonymous user of Taobao
  ☆49Updated 8 years ago
• daoluan / WXSender-Python
  模拟登录微信公众平台群发消息
  ☆40Updated 11 years ago
• hexcola / wcspider
  微信公众号爬虫
  ☆42Updated 8 years ago
• veryyoung / crack-capatcha
  Use Java code to crack the capatcha(Java 破解验证码)
  ☆30Updated 9 years ago
• MacHu-GWU / Python-with-GitHub-PyPI-and-Readthedoc-Guide
  教你如何将你的Python项目用Github保管, 并在Pypi上发布, 和部署你的在线文档网站
  ☆26Updated 8 years ago
• junhuster / JDFS
  一款小巧的分布式文件管理系统JDFS，在一个用vmware player搭建的虚拟集群上，JDFS客户端可以把本地文件分片，并流式、冗余地存储到集群上，显示特定文件元信息，从集群上读取文件，删除文件等。后续可能会以JDFS为文件存储系统，开发一个map-reduce引擎
  ☆23Updated 7 years ago
• mysql-inception / inception-document
  一个集审核、执行、备份及生成回滚语句于一身的MySQL自动化运维工具之手册部分
  ☆38Updated 6 years ago
• ioiogoo / internet_job_analysis
  使用flask、mysql、C3.js搭建的基于互联网岗位需求的分析报告。
  ☆20Updated 8 years ago
• pelick / VerticleSearchEngine
  Academic Search Engine using Scrapy, MongoDB, Lucene/Solr, Tika, Struts2, Jquery, Bootstrap, D3, CAS
  ☆99Updated 12 years ago
• handalin / CharlieLrc
  查理歌词, 一个微信公众帐号, 1.0版本. 暂时可以实现快速查找歌词.
  ☆67Updated 10 years ago
• jhao104 / spider
  python crawler spider
  ☆71Updated 8 years ago