jinshuai86 / Spider
基于Java的多线程爬虫框架
☆12Updated 5 months ago
Related projects ⓘ
Alternatives and complementary repositories for Spider
- 用于数据迁移、缓存预热，springboot架构。支持数据区间分割、动态调整线程池配置、任务进度实时查看等特性☆45Updated 7 years ago
- 基于Disruptor的异步并行框架☆20Updated 9 years ago
- 由java构建的轻量级消息队列，支持订阅和点对点模式☆32Updated 5 years ago
- java spring redies：订阅/发布系统；统一配置管理；lua脚本实现分布式锁；缓存应用（连接池，切片连接池，哨兵模式）☆28Updated last year
- Java nio学习的代码案例，常用模式☆17Updated 11 years ago
- 限流幂等框架☆18Updated 6 years ago
- 干净的RPC全家桶thrift、dubbo、google-protocol-buffer，当然zookeeper注册中心是少不了的，其中在test的测试单元模块，我写了dubbo的底层实现原理（例如socket的RPC反射代理完成跨机器请求，同时还有RMI的代理模型）一看就…☆22Updated last year
- java 实现线程池☆15Updated 7 years ago
- java核心 运算符,控制语句,函数,异常,集合,线程,数组,IO流,网路编程,设计模式,java8,面试相关☆19Updated 6 years ago
- Java JUC 学习项目 包括各种并发多线程的高级使用。java自带多线程并发锁高级应用☆14Updated 6 years ago
- 轻量级java消息中间件☆51Updated 8 years ago
- 规则引擎☆21Updated 6 years ago
- 在公司接了一个任务，完成一个项目数据同步的模块。要求是不能操作项目的数据库。怕操作不当，数据丢失。所以想到的方案是使用log4jdbc记录数据源的SQL语句到日志文件。然后按行读取日志文件中的数据，记录读取的Point，以便下次继续读取。读取的数据进入bigqueue队列，…☆12Updated 7 years ago
- Lnk RPC是一款基于Netty实现RPC通讯协议，支持同步，异步和异步回调三种RPC调用方式，支持参数和返回值多态。支持多种负载均衡方式，支持调用流量控制，支持zookeeper和consul等服务注册发现方式，服务端口支持开发人员，运维人员配置以及动态分配，支持服务依…☆28Updated 6 years ago
- 《Spring Boot 2.x 核心技术实战》上 基础篇 Demo☆31Updated 6 years ago
- 支付订单系统分表分库高并发实现☆13Updated 2 years ago
- commons-pools使用示例☆15Updated 8 years ago
- API聚合框架，只需要简单的配置就可以完成多个API的聚合操作。☆19Updated 4 years ago
- 基于SpringBoot(2.0.3)的微服务的单应用秒杀、分布式秒杀示例☆11Updated 6 months ago
- A simple example of the Java worker pattern☆28Updated 12 years ago
- 基于Kafka和MongoDB的结构化日志异步记录和预警框架☆10Updated 8 years ago
- 《深入剖析Tomcat》阅读与实践 How Tomcat Works☆36Updated 2 years ago
- 基于netty实现的轻量级消息中间件mini-mq，致力于解决分布式事务问题，支持可靠性消息，并具备较强的扩展性和较完善的监控系统。☆19Updated last year
- 使用kafka实现log4j日志集中管理☆14Updated 3 years ago