yida-lxw / spider4jLinks
Spider4j is an open source web crawler expand from webmagic for Java which provides a simple interface for crawling the Web. Using it, you can setup a multi-threaded web crawler in few minutes.
☆18Updated 2 years ago
Alternatives and similar repositories for spider4j
Users that are interested in spider4j are comparing it to the libraries listed below
Sorting:
- 简单实用的同步工具,实现mysql数据库中数据定期同步到elasticsearch,只需简单的配置,便能达到非凡的效果,支持elasticsearch 5.X版本☆48Updated 8 years ago
- Gecko crawler supports distributed by redis☆24Updated 7 years ago
- kafa spring插件☆14Updated 10 years ago
- 最近公司有个项目使用了Hessian,特做个Demo备份。☆9Updated 7 years ago
- Dubbox整合Spring Boot基于Avro、Thrift协议构建REST服务☆40Updated 9 years ago
- 日志分析器,仿造elk中logstash的简单Java实现,实现监控目录日志,自动解析存入elasticsearch。☆22Updated 9 years ago
- 一个基于Spring Boot的Storm开发手脚架,开箱即用!集成读写Kafka、写Redis、写MySQL示例。☆59Updated 6 years ago
- 该项目主要是为了熟悉sql的人员能够很方便的进行elasticsearch数据的查询,降低学习成本。☆48Updated 10 years ago
- 一个简化kettle插件开发的通用插件,采用JSON作为参数配置,省去ui调试设计步骤,只需一个类就可以开发一个插件。☆40Updated 2 years ago
- redis分布式锁☆47Updated 10 years ago
- Cronner 是一个分布式定时任务框架,支持作业依赖、分片、失效转移、集中配置和监控。☆54Updated 6 years ago
- 基于词典的负面舆情信息评分算法。☆26Updated 10 years ago
- 互联网架构 SOA(Dubbo)+配置中心(ZK)+消息中间件MQ(RocketMq)+高速缓存(Redis)互联网架构☆65Updated 7 years ago
- 基于Drools的规则引擎系统☆99Updated 12 years ago
- unified exception framework(统一异常处理框架:统一的异常日志记录、异常通知,etc)☆18Updated 9 years ago
- xxl-job-admin 任务调度平台 Spring Boot 版本[后台部分] , 统一改为rest接口☆38Updated 2 years ago
- 专业java监控平台☆77Updated 10 years ago
- ☆99Updated 2 months ago
- Gecco crawler downloader for htmlunit☆27Updated 9 years ago
- 【基于shiro的权限管理系统——分布式版】一个用spring、mybatis、redis和shiro开发的分布式权限管理系统☆127Updated last year
- spring cloud 的学习,对大部分的服务做了一定的技术预调研。☆31Updated 8 years ago
- 大规模分布式系统的跟踪、监控、告警平台☆55Updated 11 years ago
- 一套基于ES的搜索方案☆25Updated 2 years ago
- CAS Server 4.0二次开发。添加登录错误三次及以上验证码校验、用户登录数据库认证、CAS Server REST等☆125Updated 8 years ago
- shiro 基于 url做的权限系统☆43Updated 10 years ago
- spring-boot+drools7+mybatis实现数据库加载规则文件☆28Updated 8 years ago
- dubbox的介绍和简单示例☆77Updated 8 years ago
- 订单状态机☆35Updated 9 years ago
- Groovy based lightweight rule engine☆82Updated 9 years ago
- 分布式任务调度框架教程, 包括: Quartz、Elastic-Job和TBSchedule.☆31Updated 6 years ago