xpleaf / ispider
A Distributed Crawler System Designed By Java.
☆208Updated 6 years ago
Alternatives and similar repositories for ispider:
Users that are interested in ispider are comparing it to the libraries listed below
- 基于springboot的rest调用框架,定义接口然后即可直接注入使用。☆149Updated 6 years ago
- 秒杀与抢购系统架构设计与实现☆275Updated 6 years ago
- 实现定时爬取与IP代理池☆148Updated 6 years ago
- 分布式锁的简单实现☆106Updated 7 years ago
- netty☆121Updated 7 years ago
- 用netty实现长连接和心跳监测的示例代码☆135Updated 6 years ago
- 一个采用Netty实现的RPC框架,适用于Spring Boot,Spring Cloud!☆165Updated 3 years ago
- 本项目已废弃,笔记收藏整理参考:☆70Updated 4 years ago
- 基于 Spring 和 Redis 的分布式消息队列(MessageQueue)实现☆118Updated 9 years ago
- Spring-boot 集成druid数据库连接池,Spring-boot实现druid的动态数据源,Spring-boot实现定时任务schedule,spring-boot集成mybatis☆186Updated 6 years ago
- elasticsearch+hbase海量数据查询,支持千万数据秒回查询☆281Updated 8 years ago
- 基于Redis的分布式限流组件,注解支持☆144Updated 6 years ago
- 构建 Zookeeper + Dubbo + Spring Boot 的分布式调用入门学习项目实战。旧搭建教程地址:http://blog.csdn.net/hemin1003/article/details/64439876 / 最新搭建教程(201908更新):…☆60Updated 2 years ago
- springboot 学习mybatis+mysql读写分离(一写多读)+事务☆125Updated 6 years ago
- 👨🎓学习各种知识的记录☆171Updated 3 years ago
- 基于Spring Cloud(Finchley版本)架 构体系,整合各微服务基础组件的最新最全的脚手架工程。微服务架构: Spring Cloud全家桶 + Spring boot 2.x + Oauth2 + Mybatis + Druid + Mysql + Shardi…☆171Updated 6 years ago
- java代理IP池 Proxy Pool,提供可用率达到95%以上的代理IP。☆390Updated 6 years ago
- A high-performance, open-source java RPC framework.☆157Updated last year
- 项目遭到举报,停更,有问题可以直接给我发邮件。☆193Updated 6 years ago
- ElasticSearch Java Rest Client Examples☆188Updated 2 years ago
- 一个基于webmagic框架二次开发的java爬虫框架实战,已实现能爬取腾讯,搜狐,今日头条(单独集成功能)等资讯内容,配合elasticsearch框架用法,实现了自动爬虫,已投入线上生产使用。☆338Updated 2 years ago
- 使用java+httpclient+httpcleaner,多线程、分布式爬去电商网站商品信息,数据存储在hbase上,并使用solr对商品建立索引,使用redis队列存储一个共享的url仓库;使用zookeeper对爬虫节点生命周期进行监视等。☆231Updated 4 years ago
- maven多模块化,springboot项目,基础各种微服务、搜索引擎☆227Updated 2 years ago
- 服务网关集成dubbox rest服务☆150Updated 2 years ago
- spring boot + jsoup + redis 抓取CSDN每周干货知识☆30Updated 7 years ago
- 使用WebMagic抓取招聘信息,并且持久化到Mysql的例子。☆224Updated 8 years ago
- ☆157Updated 9 years ago
- 基于SpringCloud 的微服务,订单,支付,商场(活动),工作流,用户,短信,极光☆203Updated 3 months ago
- 一种简单易懂的分库分表方案☆94Updated 5 years ago
- 一个分布式限流的解决方案!☆106Updated 2 years ago