jinshuai86 / Spider
基于Java的多线程爬虫框架
☆11Updated 8 months ago
Alternatives and similar repositories for Spider:
Users that are interested in Spider are comparing it to the libraries listed below
- 用于数据迁移、缓存预热,springboot架构。支持数据区间分割、动态调整线程池配置、任务进度实时查看等特性☆45Updated 7 years ago
- java spring redies:订阅/发布系统;统一配置管理;lua脚本实现分布式锁;缓存应用(连接池,切片连接池,哨兵模式)☆28Updated 2 years ago
- 基于Disruptor的异步并行框架☆20Updated 9 years ago
- Java JUC 学习项目 包括各种并发多线程的高级使用。java自带多线程并发锁高级应用☆14Updated 6 years ago
- Java nio学习的代码案例,常用模式☆17Updated 11 years ago
- 限流幂等框架☆19Updated 6 years ago
- 基于SpringBoot(2.0.3)的微服务的单应用秒杀、分布式秒杀示例☆11Updated 9 months ago
- java 实现线程池☆16Updated 8 years ago
- 基于队列的任务调度及分发中间件,based on RocketMQ☆15Updated 2 years ago
- 最近公司有个项目使用了Hessian,特做个Demo备份。☆8Updated 6 years ago
- 抛弃tomcat, 拥抱vert.x☆15Updated 2 years ago
- 使用kafka实现log4j日志集中管理☆14Updated 4 years ago
- 支付订单系统分表分库高并发实现☆13Updated 2 years ago
- 自定义注解,包括了自定义校验注解、自定义缓存注解、自定义权限校验注解示例代码☆14Updated 2 years ago
- Java后端开发库,涵盖:常用工具类、SPI扩展、分布式锁、限流、分布式链路追踪等。☆39Updated 2 years ago
- xxl-job-admin 任务调度平台 Spring Boot 版本[后台部分] ,统一改为rest接口☆37Updated 2 years ago
- 规则引擎☆21Updated 6 years ago
- API聚合框架,只需要简单的配置就可以完成多个API的聚合操作。☆19Updated 4 years ago
- Swagger 是一款RESTFUL接口的文档在线自动生成+功能测试功能软件。本文简单介绍了在项目中集成swagger的方法和一些常见问题。如果想深入分析项目源码,了解更多内容,见参考资料。 Swagger 是一个规范和完整的框架,用于生成、描述、调用和可视化 RESTfu…☆16Updated 7 years ago
- java 网络编程☆13Updated 7 years ago
- Springboot-Netty-Protostuff-ZooKeeper-asyn 同步链接 异步发送消息阻塞等待返回☆24Updated 7 years ago
- 由java构建的轻量级消息队列,支持订阅和点对点模式☆32Updated 5 years ago
- 以Spring Boot框架为基础,实现各分布式事务(JTA/消息/TCC)的DEMO☆9Updated 8 years ago
- 个人学习xxl-job源码 核心部分加上了中文注释☆16Updated 6 years ago
- 基于netty实现的轻量级消息中间件mini-mq,致力于解决分布式事务问题,支持可靠性消息,并具备较强的扩展性和较完善的监控系统。☆20Updated 2 years ago
- 基于redis的分布式锁,适用于秒杀,自增ID等web分布式开发场景☆11Updated 7 years ago
- 微服务的网关,包含oauth2授权、调用次数限制和服务路由☆13Updated 8 years ago
- 在公司接了一个任务,完成一个项目数据同步的模块。要求是不能操作项目的数据库。怕操作不当,数据丢失。所以想到的方案是使用log4jdbc记录数据源的SQL语句到日志文件。然后按行读取日志文件中的数据,记录读取的Point,以便下次继续读取。读取的数据进入bigqueue队列,…☆12Updated 7 years ago
- Netty project - an event-driven asynchronous network application framework! 加入中文注释☆26Updated 7 years ago
- jvm堆内存结构、垃圾回收原理、jvm内存调优、jvm监控等☆17Updated 5 years ago