jinshuai86 / Spider
基于Java的多线程爬虫框架
☆11Updated 10 months ago
Alternatives and similar repositories for Spider:
Users that are interested in Spider are comparing it to the libraries listed below
- 用于数据迁移、缓存预热,springboot架构。支持数据区间分割、动态调整线程池配置、任务进度实时查看等特性☆45Updated 7 years ago
- java 实现线程池☆16Updated 8 years ago
- Java nio学习的代码案例,常用模式☆17Updated 12 years ago
- java spring redies:订阅/发布系统;统一配置管理;lua脚本实现分布式锁;缓存应用(连接池,切片连接池,哨兵模式)☆28Updated 2 years ago
- Java JUC 学习项目 包括各种并发多线程的高级使用。java自带多线程并发锁高级应用☆15Updated 7 years ago
- 在公司接了一个任务,完成一个项目数据同步的模块。要 求是不能操作项目的数据库。怕操作不当,数据丢失。所以想到的方案是使用log4jdbc记录数据源的SQL语句到日志文件。然后按行读取日志文件中的数据,记录读取的Point,以便下次继续读取。读取的数据进入bigqueue队列,…☆12Updated 7 years ago
- 基于Disruptor的异步并行框架☆21Updated 9 years ago
- 线程池、任务、任务组、任务池,定时任务的类库☆23Updated 3 months ago
- A simple example of the Java worker pattern☆27Updated 12 years ago
- 限流幂等框架☆19Updated 7 years ago
- 由java构建的轻量级消息队列,支持订阅和点对点模式☆33Updated 6 years ago
- 分享一些技术类的但不仅仅是技术类的pdf书籍供大家学习☆11Updated 6 years ago
- 基于SpringBoot(2.0.3)的微服务的单应用秒杀、分布式秒杀示例☆11Updated 11 months ago
- 微服务的网关,包含oauth2授权、调用次数限制和服务路由☆13Updated 8 years ago
- 简单netty轮子☆22Updated 3 years ago
- jvm堆内存结构、 垃圾回收原理、jvm内存调优、jvm监控等☆17Updated 6 years ago
- Zipkin 是一款Twitter开源的分布式实时数据追踪系统(Distributed Tracking System),此库是为国内著名服务治理框架dubbo编写的zipkin instrument library,支持对dubbo调用的全链路实时调用数据统计与依赖分析。…☆21Updated 8 years ago
- 使用一致性哈希consistent-hashing来实现分布式redis,基于spring使用的缓存工具☆14Updated 7 years ago
- 基于Spring+SpringMVC+Mybatis分布式敏捷开发系统架构,提供整套公共微服务服务模块:集中权限管理(单点登录)、内容管理、支付中心、用户管理(支持第三方登录)、微信平台、存储系统、配置中心、日志分析、任务和通知等,支持服务治理、监控和追踪,努力为中小型企业…☆13Updated 7 years ago
- 使用kafka实现log4j日志集中管理☆14Updated 4 years ago
- java核心 运算符,控制语句,函数,异常,集合,线程,数组,IO流,网路编程,设计模式,java8,面试相关☆18Updated 6 years ago
- 基于Kafka和MongoDB的结构化日志异步记录和预警框架☆10Updated 8 years ago
- 规则引擎☆21Updated 7 years ago
- 支付订单系统分表分库高并发实现☆13Updated 3 years ago
- 点赞机器人,spring4,mybatis,quartz,mongodb,MS消息队列,dubbo☆10Updated 10 years ago
- redis缓存和mysql集成的示例☆25Updated last year
- rocketmq 是由阿里巴巴开源出来的一个分布式消息服务器,rocketmq是在kafka的基础上进行重构,然后开发出来支撑阿里巴巴双十一高并发量的消息服务器。现在阿里巴巴已经将项目托管到apache基金会。 相较于ActiveMQ、kafka、RabbitMQ等开源…☆11Updated 4 years ago
- java 网络编程☆14Updated 7 years ago
- 阿里druid连接池剥离出来的sql解析代码☆12Updated 2 years ago
- 解读源码的环境,内有tomcat源码、Socket、NIO、Netty等源码分析材料☆13Updated 2 years ago