Alternatives and similar repositories for SpiderRef:

Users that are interested in SpiderRef are comparing it to the libraries listed below

• weizetao / spider-roach
  分布式定向抓取集群
  ☆71Updated 7 years ago
• netxfly / dianying
  中国主流在线电影网站爬虫及搜索web代码
  ☆34Updated 10 years ago
• wwj718 / jobSpider
  jobSpider是一只scrapy爬虫，用于爬取职位信息
  ☆27Updated 8 years ago
• da2vin / Spider_index
  爬取百度指数和阿里指数，采用selenium，存入hbase，验证码自动识别，多线程控制
  ☆32Updated 8 years ago
• yorkoliu / training
  Linux、Python、自动化运维、Docker、大数据技术培训（第一期）
  ☆23Updated 10 years ago
• mysql-inception / inception-document
  一个集审核、执行、备份及生成回滚语句于一身的MySQL自动化运维工具之手册部分
  ☆38Updated 6 years ago
• Wooden-Robot / spider-practice
  ☆20Updated 8 years ago
• phodal / ml
  Python Github
  ☆16Updated 10 years ago
• shelmesky / crawler
  淘宝爬虫原型，基于gevent
  ☆49Updated 11 years ago
• daoluan / WXSender-Python
  模拟登录微信公众平台群发消息
  ☆40Updated 10 years ago
• zhuoran / crawler4j
  Open Source Simple Web Crawler for Java. Simple Flexible And Lightweight
  ☆30Updated 2 years ago
• muyannian / higo
  海狗-多维在线分析系统
  ☆73Updated 10 years ago
• loveNight / PythonScripts
  用于保存自己写的一些Python脚本
  ☆6Updated 8 years ago
• A1014280203 / Ugly-Distributed-Crawler
  基于Redis实现的简单到爆的分布式爬虫
  ☆46Updated 7 years ago
• bigdata-labs / spark2-hadoop2.6-hbase-labs
  ☆39Updated 7 years ago
• ddviplinux / crawler-framework
  分布式爬虫框架,基于webdrvier模拟用户请求,kafka消息传递,分布式网页存储使用hbase,task异步任务多线程解析,提供基础服务如:proxy ip服务和号码验证服务等, proxy page使用H5和we版进行接入
  ☆13Updated 9 years ago
• rocky1001 / pykylin
  Python DBAPI Driver and Sqlalchemy Dialect for Apache Kylin, the "Extreme OLAP Engine for Big Data"
  ☆31Updated 8 years ago
• flybird1971 / spider
  抓取rss订阅，根据后台配置规则抓取指定网站
  ☆9Updated 8 years ago
• toryzen / ccfirewall
  基于Strom的实时流量分析防火墙系统
  ☆12Updated 8 years ago
• wanghuafeng / baidu_spider
  百度爬虫：热词，词频，音乐，poi信息
  ☆22Updated 9 years ago
• awolfly9 / job_wxbot
  微信机器人抓取并分发招聘信息
  ☆25Updated 7 years ago
• handalin / CharlieLrc
  查理歌词, 一个微信公众帐号, 1.0版本. 暂时可以实现快速查找歌词.
  ☆67Updated 10 years ago
• PyCN / lagou_spider
  拉勾网爬虫, 利用通过微信公众号推送数据
  ☆8Updated 8 years ago
• dinp / dinp-demo-python-flask
  DINP demo：使用Flask的Python项目
  ☆15Updated 9 years ago
• limboinf / PersonNotes
  个人笔记集中营，快糙猛的形式记录技术性Notes .. 📚☕️⌨️🎧
  ☆63Updated 5 years ago
• qiwsir / BitJSCode
  ☆23Updated 9 years ago