xpleaf / ispiderLinks
A Distributed Crawler System Designed By Java.
☆213Updated 7 years ago
Alternatives and similar repositories for ispider
Users that are interested in ispider are comparing it to the libraries listed below
Sorting:
- 本项目已废弃，笔记收藏整理参考：☆69Updated 4 years ago
- 实现定时爬取与IP代理池☆150Updated 7 years ago
- 一个采用Netty实现的RPC框架，适用于Spring Boot，Spring Cloud!☆163Updated 4 years ago
- 使用java+httpclient+httpcleaner，多线程、分布式爬去电商网站商品信息，数据存储在hbase上，并使用solr对商品建立索引，使用redis队列存储一个共享的url仓库；使用zookeeper对爬虫节点生命周期进行监视等。☆232Updated 4 years ago
- 基于Spring Boot + Quartz 的分布式任务调度系统☆247Updated 4 years ago
- 👨🎓学习各种知识的记录☆169Updated 4 years ago
- 基于SpringCloud 的微服务，订单，支付，商场（活动），工作流，用户，短信，极光☆206Updated last year
- 分布式锁的简单实现☆108Updated 8 years ago
- 基于 Spring 和 Redis 的分布式消息队列（MessageQueue）实现☆117Updated 9 years ago
- SpingBoot框架使用与研究项目。☆176Updated 6 years ago
- 基于Redis的分布式限流组件，注解支持☆147Updated 6 years ago
- 微服务 spring dubbo项目：dubbo rpc；druid数据源连接池；mybatis配置集成，多数据源；jmx监控MBean；定时任务；aop；ftp；测试；Metrics监控；参数验证；跨域处理；shiro权限控制；consul服务注册，发现；redis分布式…☆224Updated 2 years ago
- ElasticSearch Java Rest Client Examples☆189Updated 2 years ago
- SpringBoot企业级核心技术，对应简书《Spring Boot 核心技术》专题配套源码☆117Updated 7 years ago
- 自定义的spring-boot的hbase starter，为hbase的query和更新等操作提供简易的api并集成spring-boot的auto configuration☆324Updated 7 years ago
- 一个基于webmagic框架二次开发的java爬虫框架实战，已实现能爬取腾讯，搜狐，今日头条（单独集成功能）等资讯内容，配合elasticsearch框架用法，实现了自动爬虫，已投入线上生产使用。☆343Updated 2 years ago
- Java网络编程：BIO、NIO、AIO☆136Updated 3 years ago
- 基于Spring AOP 使用元注解 实现系统操作日志记录☆83Updated 10 months ago
- 服务网关集成dubbox rest服务☆151Updated 2 years ago
- 随着技术日新月异，新技术新平台不断出现，对现如今的开发人员来说选择快速高效的框架进行项目开发，既能提高产出，又能节约时间。本框架无需开发即可实现服务注册、服务发现、负载均衡、服务网关、配置中心、API管理、分布式事务、支撑平台、集成框架、数据传输加密等功能，是学习Sprin…☆359Updated last year
- Funda 是一个以 SpringBoot 为基础搭建一个 Restful 服务☆63Updated 6 years ago
- Spring Boot 整合Mybatis、Druid、PageHelper、Swagger 、AOP、过滤器、拦截器、thymeleaf 基础入门demo☆134Updated 6 years ago
- ElasticSearch的使用笔记,包括使用sdk，使用springboot+Jest、rollover索引切分和使用docker启动完成es的部署索引和搜索等☆86Updated 3 years ago
- 日积月累，开源框架学习（Thrift、Dubbo、Spring、Guava ... ）☆76Updated 3 years ago
- clover 1、开发server和client端 定时向zk集群发送心跳数据包，利用Java自带的timer程序实现该功能 2、开发整天的monitor程序，用来定时向zk中获取server和client端的心跳数据信息，如果超过指定时间没有收到最新的数据包，那么任务se…☆195Updated 10 years ago
- RabbitMQ为异步消息处理提出了一个很好的解决方案，它是一个非常好用的消息中间件，主要用于中间件的解耦，同时，Spring Boot为RabbitMQ提供了支持, Spring Boot为Rabbit准备了spring-boot-starter-amqp，spring-…☆180Updated 8 years ago
- 使用WebMagic抓取招聘信息，并且持久化到Mysql的例子。☆224Updated 8 years ago
- Java底层知识点、源码解读，技术栈相关原理知识点、工具解读最佳实践、功能点实战，问题排查，开发技巧等☆132Updated 3 years ago
- 虽然很多人已经使用了JDK8，看到不少代码，貌似大家对于Java语言or SDK的使用看起来还是停留在7甚至6。 Java8在流式 or 链式处理，并发 or 并行方面增强了很多，函数式的风格使代码可读性更高 。 希望通过这个分享，多达200+例子的演示，让…☆114Updated 8 years ago
- 无侵入的应用级网关限流框架,无需配置文件，细粒度控制，高灵活性，高可用性，使用redis+lua脚本实现。☆152Updated last month