yida-lxw / spider4jLinks
Spider4j is an open source web crawler expand from webmagic for Java which provides a simple interface for crawling the Web. Using it, you can setup a multi-threaded web crawler in few minutes.
☆18Updated 2 years ago
Alternatives and similar repositories for spider4j
Users that are interested in spider4j are comparing it to the libraries listed below
Sorting:
- Gecko crawler supports distributed by redis☆24Updated 7 years ago
- kafa spring插件☆14Updated 10 years ago
- 简单实用的同步工具,实现mysql数据库中数据定期同步到elasticsearch,只需简单的配置,便能达到非凡 的效果,支持elasticsearch 5.X版本☆48Updated 8 years ago
- 舆情搜索服务框架,其中lucene和solr版本为4.8。☆61Updated 9 years ago
- 日志分析器,仿造elk中logstash的简单Java实现,实现监控目录日志,自动解析存入elasticsearch。☆22Updated 9 years ago
- Gecco crawler downloader for htmlunit☆27Updated 9 years ago
- Cronner 是一个分布式定时任务框架,支持作业依赖、分片、失效转移、集中配置和监控。☆54Updated 7 years ago
- 基于语义级别模调轻量业务监控系统☆20Updated 8 years ago
- Groovy based lightweight rule engine☆82Updated 9 years ago
- shiro 基于 url做的权限系统☆43Updated 10 years ago
- 大规模分布式系统的跟踪、监控、告警平台☆55Updated 11 years ago
- 基于zookeeper的统一配置中心实现☆46Updated 10 years ago
- 基于Solr4.9.0的搜索系统:包括Solr索引建立、Solr索引查询DUBBO接口等内容。☆30Updated 2 years ago
- spring cloud 的学习,对大部分的服务做了一定的技术预调研。☆31Updated 8 years ago
- Dubbox整合Spring Boot基于Avro、Thrift协议构建REST服务☆40Updated 9 years ago
- unified exception framework(统一异常处理框架:统一的异常日志记录、异常通知,etc)☆18Updated 9 years ago
- 一个基于Spring Boot的Storm开发手脚架,开箱即用!集成读写Kafka、写Redis、写MySQL示例。☆59Updated 7 years ago
- 该项目主要是为了熟悉sql的人员能够很方便的进行elasticsearch数据的查询,降低学习成本。☆48Updated 10 years ago
- 铜板街轻量级JDBC层分库分表框架☆49Updated last year
- 使用SpringBoot,Scala開發的自動化測試平台☆37Updated 8 years ago
- ☆22Updated 8 years ago
- DEPRECATED☆27Updated 7 years ago
- 专业java监控平台☆77Updated 10 years ago
- solrj示例☆55Updated 9 years ago
- 基于Drools的规则引擎系统☆98Updated 12 years ago
- spring整合guava和redis实现本地和远程缓存☆42Updated 10 years ago
- 使用 Java 开发的一个任务调度框架,可以远程执行一次性或重复性的JOB,查看任务的执行状态以及任务结果(返回值、执行时间等) 本框架只负责调度,支持集群,任务执行在目标的服务器上,与业务解耦。☆71Updated 9 years ago
- 这是一个统一管理系统权限,设计的目标 是给开发者一个完整地权限管理系统,以便你能更专注自己系统业务的开发☆36Updated 9 years ago
- spring boot 集成各种中间件☆47Updated 9 years ago
- 一个简化kettle插件开发的通用插件,采用JSON作为参数配置,省去ui调试设计步骤,只需一个类就可以开发一个插件。☆40Updated 2 years ago