Alternatives and similar repositories for spider:

Users that are interested in spider are comparing it to the libraries listed below

• zhegexiaohuozi / SeimiCrawler
  一个简单、敏捷、分布式的支持SpringBoot的Java爬虫框架;An agile, distributed crawler framework.
  ☆1,981Updated 2 months ago
• xuxueli / xxl-crawler
  A lightweight web crawler framework.（Java爬虫框架）
  ☆706Updated 3 weeks ago
• CrawlScript / WebCollector
  WebCollector is an open source web crawler framework based on Java.It provides some simple interfaces for crawling the Web,you can setup …
  ☆3,073Updated 2 weeks ago
• foxinmy / weixin4j
  (微信开发工具包)weixin sdk for Java
  ☆817Updated last month
• xtuhcy / gecco
  Easy to use lightweight web crawler（易用的轻量化网络爬虫）
  ☆2,505Updated 11 months ago
• sd4324530 / fastweixin
  极其方便的实现微信公众平台服务端开发，2行代码完成服务器绑定，3行代码实现用户消息监听
  ☆774Updated 6 months ago
• ihaolin / antares
  分布式任务调度平台(Distributed Job Schedule Platform)
  ☆559Updated 2 years ago
• zhegexiaohuozi / SeimiAgent
  A headless,standalone webkit server which make grabing dynamic web page easier.
  ☆225Updated 5 years ago
• webmagic-io / jobhunter
  使用WebMagic抓取招聘信息，并且持久化到Mysql的例子。
  ☆224Updated 8 years ago
• FastBootWeixin / FastBootWeixin
  基于Spring Boot的注解驱动式公众号极速开发框架，用注解重新定义公众号开发
  ☆653Updated 2 years ago
• yuki-lau / weibo-spider
  新浪微博爬虫，采用Java语言开发，基于HTTPClient 4.0，采用MySQL存储爬取数据，支持多进程并发执行。功能包括：爬取微博、评论、转发、关注列表（层次）。根据数据需求，持续更新...
  ☆352Updated 10 years ago
• chenerzhu / proxy-pool
  java代理IP池 Proxy Pool，提供可用率达到95%以上的代理IP。
  ☆390Updated 6 years ago
• Martin404 / PayMap
  Java后端实现三方支付集成支付宝（国内、国际、移动端、PC端）、微信、银联（acp、upop）、光大（网关、网页）、邮政支付
  ☆788Updated 7 years ago
• pzhgugu / goshop2
  在goshop的基础上进行重构，将逐步完善分布式、高可用、多店铺电商系统
  ☆1,105Updated 7 years ago
• wycm / zhihu-crawler
  zhihu-crawler是一个基于Java的高性能、支持免费http代理池、支持横向扩展、分布式爬虫项目
  ☆913Updated 5 years ago
• yangfuhai / jboot
  一个优雅的微服务框架，SpringCloud 之外的另一个选择，已经使用在用户量过亿的商业产品上，有超过1000家公司在使用Jboot做极速开发...
  ☆730Updated 2 weeks ago
• code4craft / jsoup-learning
  Jsoup学习笔记。添加了部分学习代码和注释。
  ☆638Updated last year
• Dreampie / Resty
  The minimalist framework of RESTful(server and client) - Resty
  ☆1,244Updated 3 years ago
• zhangkaitao / es
  JavaEE项目开发脚手架（我的公众号：kaitao-1234567，我的新书：《亿级流量网站架构核心技术》）
  ☆2,163Updated 6 years ago
• abel533 / guns
  Guns基于SpringBoot,致力于做更简洁的后台管理系统,完美整合springmvc + shiro + 分页插件PageHelper + 通用Mapper + beetl!Guns项目代码简洁,注释丰富,上手容易,同时Guns包含许多基础模块(用户管理,角色管理,部…
  ☆713Updated 2 years ago
• T-baby / MongoDB-Plugin
  MongoDB Plugin for Java
  ☆238Updated 7 years ago
• nutzam / nutz
  Nutz -- Web Framework(Mvc/Ioc/Aop/Dao/Json) for ALL Java developer
  ☆2,534Updated 4 months ago
• borball / weixin-sdk
  微信公众平台(订阅号、服务号、企业号、小程序)、微信开放平台和微信支付 Java SDK
  ☆1,053Updated 2 years ago
• lionsoul2014 / jcseg
  Jcseg is a light weight NLP framework developed with Java. Provide CJK and English segmentation based on MMSEG algorithm, With also keywo…
  ☆916Updated last year
• fengzhizi715 / ProxyPool
  给爬虫使用的代理IP池
  ☆551Updated 5 years ago
• dubboclub / dubbokeeper
  dubbo服务管理以及监控系统
  ☆1,285Updated last year
• paoding-code / paoding-rose
  paoding-rose 提供最好用的Java Web应用整体性框架。
  ☆604Updated 5 years ago
• AnoyiX / anoyi
  Anoyi's website
  ☆1,098Updated last month
• itstamen / rop
  rapid open platform
  ☆420Updated 7 years ago
• JFanZhao / spider
  使用java+httpclient+httpcleaner，多线程、分布式爬去电商网站商品信息，数据存储在hbase上，并使用solr对商品建立索引，使用redis队列存储一个共享的url仓库；使用zookeeper对爬虫节点生命周期进行监视等。
  ☆231Updated 4 years ago