fengzhizi715 / NetDiscovery
NetDiscovery 是一款基于 Vert.x、RxJava 2 等框架实现的通用爬虫框架/中间件。
☆641Updated 4 years ago
Alternatives and similar repositories for NetDiscovery:
Users that are interested in NetDiscovery are comparing it to the libraries listed below
- 给爬虫使用 的代理IP池☆558Updated 5 years ago
- java代理IP池 Proxy Pool,提供可用率达到95%以上的代理IP。☆395Updated 6 years ago
- A idea-plugin for Java/Scala, support custom code template.☆521Updated 5 years ago
- 使用RxJava2 和 Java 8的特性开发的图片爬虫☆56Updated 5 years ago
- 基于Spring Boot的注解驱动式公众号极速开发框架,用注解重新定义公众号开发☆652Updated 2 years ago
- Jsoup学习笔记。添加了部分学习代码和注释。☆638Updated last year
- A configurable web spider with a easy-to-use web console☆994Updated 6 years ago
- 历经开发周期多年,并且应用过千万级别项目的工具箱☆688Updated this week
- A lightweight web crawler framework.(Java爬虫框架)☆719Updated 3 months ago
- 一个优雅的微服务框架,SpringCloud 之外的另一个选择,已经使用在用户量过亿的商业产品上,有超过1000家公司在使用Jboot做极速开发...☆728Updated 3 months ago
- 纯Java实现的支持W3C Xpath 1.0标准语法的HTML解析器。A html parser with xpath base on Jsoup and Antlr4. Maybe it is the best in java.Just try it.☆454Updated 4 months ago
- 一个基于webmagic框架二次开发的java爬虫框架实战,已实现能爬取腾讯,搜狐,今日头条(单独集成功能)等资讯内容,配合elasticsearch框架用法,实现了自动爬虫,已投入线上生产使用。☆338Updated 2 years ago
- 这是针对Vertx官方文档翻译的仓库☆403Updated 4 years ago
- 爬虫代理IP池服务,可供其他爬虫程序通过restapi获取