jinshuai86 / SpiderLinks
基于Java的多线程爬虫框架
☆11Updated last year
Alternatives and similar repositories for Spider
Users that are interested in Spider are comparing it to the libraries listed below
Sorting:
- 用于数据迁移、缓存预热，springboot架构。支持数据区间分割、动态调整线程池配置、任务进度实时查看等特性☆45Updated 7 years ago
- 基于spring 4.x 开发的redis集群中间件应用:redis-cache、redis-cluster-cache、session共享、消息队列等。☆9Updated 8 years ago
- java 实现线 程池☆16Updated 8 years ago
- active-mq源码阅读☆11Updated 6 years ago
- SpringBoot项目。 主要是Netty与RabbitMq，包含服务与客户端，编码与解码器；定义了两个线程池一个用于netty，一个用于异步写日志。使用了自定义注解获取相应的handler。同时包含mysql、mongo、redis☆16Updated 6 years ago
- 基于Disruptor的异步并行框架☆21Updated 10 years ago
- Java JUC 学习项目 包括各种并发多线程的高级使用。java自带多线程并发锁高级应用☆15Updated 7 years ago
- 基于队列的任务调度及分发中间件，based on RocketMQ☆16Updated 2 years ago
- 一个用Solr做企业应用内的搜索引擎的SpringBoot项目☆22Updated 6 years ago
- 基于SpringBoot(2.0.3)的微服务的单应用秒杀、分布式秒杀示例☆11Updated last year
- 基于spring boot + quartz + redis实现job任务调度，前端使用vue和element-ui实现页面控制台。☆13Updated 6 years ago
- 在公司接了一个任务，完成一个项目数据同步的模块。要求是不能操作项目的数据库。怕操作不当，数据丢失。所以想到的方案是使用log4jdbc记录数据源的SQL语句到日志文件。然后按行读取日志文件中的数据，记录读取的Point，以便下次继续读取。读取的数据进入bigqueue队列，…☆12Updated 7 years ago
- 规则引擎☆21Updated 7 years ago
- 自定义注解，包括了自定义校验注解、自定义缓存注解、自定义权限校验注解示例代码☆14Updated 3 years ago
- java spring redies：订阅/发布系统；统一配置管理；lua脚本实现分布式锁；缓存应用（连接池，切片连接池，哨兵模式）☆28Updated 2 years ago
- Java后端开发库，涵盖：常用工具类、SPI扩展、分布式锁、限流、分布式链路追踪等。☆40Updated 2 years ago
- 支付订单系统分表分库高并发实现☆13Updated 3 years ago
- Spring项目集成了消息队列-RabbitMQ，实现了普通消息订阅-发布模式的消息队列、延迟消息队列、定时发送消息等☆20Updated 7 years ago
- logging-aspect 项目中日志收集实现AOP 和 Listener两种全局实现☆10Updated 7 years ago
- 限流幂等框架☆19Updated 7 years ago
- 集成第三方登录功能（新浪微博，腾讯QQ，微信，公众号登录）☆24Updated 8 years ago
- mybatis3在spring中的分库分表☆26Updated 8 years ago
- 个人学习xxl-job源码 核心部分加上了中文注释☆16Updated 6 years ago
- Java nio学习的代码案例，常用模式☆17Updated 12 years ago
- 分布式MySQL数据库中间件，支持数据的水平、垂直拆分，支持分库分表，支持读写分离，支持结果集合并，支持故障自动切换。☆26Updated 9 years ago
- jvm堆内存结构、垃圾回收原理、jvm内存调优、jvm监控等☆17Updated 6 years ago
- 由java构建的轻量级消息队列，支持订阅和点对点模式☆33Updated 6 years ago
- 基于netty实现的轻量级消息中间件mini-mq，致力于解决分布式事务问题，支持可靠性消息，并具备较强的扩展性和较完善的监控系统。☆20Updated 2 years ago
- Java技术栈的各种框架和源码的讲解☆17Updated 3 years ago
- 分表分库☆12Updated 8 years ago