gsh199449 / spider
A configurable web spider with a easy-to-use web console
☆990Updated 6 years ago
Related projects ⓘ
Alternatives and complementary repositories for spider
- 一个简单、敏捷、分布式的支持SpringBoot的Java爬虫框架;An agile, distributed crawler framework.☆1,980Updated last year
- A headless,standalone webkit server which make grabing dynamic web page easier.☆224Updated 5 years ago
- A distributed web crawler framework.（分布式爬虫框架XXL-CRAWLER）☆691Updated last year
- WebCollector is an open source web crawler framework based on Java.It provides some simple interfaces for crawling the Web,you can setup …☆3,070Updated 7 months ago
- Easy to use lightweight web crawler（易用的轻量化网络爬虫）☆2,503Updated 8 months ago
- 基于双缓冲队列、多刷盘机制的超轻量级 java 日志☆517Updated 6 years ago
- 使用WebMagic抓取招聘信息，并且持久化到Mysql的例子。☆225Updated 7 years ago
- 给爬虫使用的代理IP池☆551Updated 5 years ago
- 极其方便的实现微信公众平台服务端开发，2行代码完成服务器绑定，3行代码实现用户消息监听☆774Updated 3 months ago
- Java后端实现三方支付集成支付宝（国内、国际、移动端、PC端）、微信、银联（acp、upop）、光大（网关、网页）、邮政支付☆789Updated 7 years ago
- (微信开发工具包)weixin sdk for Java☆817Updated last month
- 新浪微博爬虫，采用Java语言开发，基于HTTPClient 4.0，采用MySQL存储爬取数据，支持多进程并发执行。功能包括：爬取微博、评论、转发、关注列表（层次）。根据数据需求，持续更新...☆353Updated 10 years ago
- 在goshop的基础上进行重构，将逐步完善分布式、高可用、多店铺电商系统☆1,106Updated 7 years ago
- JavaEE项目开发脚手架（我的公众号：kaitao-1234567，我的新书：《亿级流量网站架构核心技术》）☆2,166Updated 6 years ago
- A Java CAPTCHA recognition library for sticky characters☆206Updated 9 years ago
- Jsoup学习笔记。添加了部分学习代码和注释。☆636Updated 11 months ago
- APDPlat是Application Product Development Platform的缩写，即应用级产品开发平台。☆522Updated 2 years ago
- 对java、scala等运行于jvm的程序进行实时日志采集、索引和可视化，对系统进行进程级别的监控，对系统内部的操作进行策略性的报警、对分布式的rpc调用进行trace跟踪以便于进行性能分析☆866Updated 2 years ago
- 基于Spring Boot的注解驱动式公众号极速开发框架，用注解重新定义公众号开发☆653Updated 2 years ago
- Java分布式中文分词组件 - word分词☆1,818Updated 3 years ago
- zhihu-crawler是一个基于Java的高性能、支持免费http代理池、支持横向扩展、分布式爬虫项目☆913Updated 5 years ago
- Anoyi's website☆1,096Updated 2 weeks ago
- java代理IP池 Proxy Pool，提供可用率达到95%以上的代理IP。☆395Updated 6 years ago
- 一个基于webmagic框架二次开发的java爬虫框架实战，已实现能爬取腾讯，搜狐，今日头条（单独集成功能）等资讯内容，配合elasticsearch框架用法，实现了自动爬虫，已投入线上生产使用。☆336Updated 2 years ago
- wechat4j is wechat(weixin) develop framework for java 微信开发框架JAVA版，最简单易用微信开发框架☆862Updated 7 years ago
- WK系列开发框架-V1至V5 Java开源企业级开发框架(单应用/微服务/分布式)☆1,620Updated last year