java分布式爬虫,主机和从机控制的机制
☆14May 21, 2015Updated 10 years ago
Alternatives and similar repositories for DistributedCrawler
Users that are interested in DistributedCrawler are comparing it to the libraries listed below
Sorting:
- DistributeCrawler的Maven版☆10Jun 20, 2022Updated 3 years ago
- 华南理工大学高英实验室进行的分布式爬虫项目,除了实验室内部人员外,不得私自传播.☆21Jul 13, 2014Updated 11 years ago
- 爬虫项目源码整理,使用redis进行url缓存,hbase进行详细信息的存储。使用zookeeper进行爬虫线程的状态监控。☆19Oct 7, 2015Updated 10 years ago
- word,excel转pdf☆11Oct 26, 2018Updated 7 years ago
- 网络游戏服务器通信框架☆13Apr 29, 2020Updated 5 years ago
- 基于Bytebuddy的Java Agent AOP框架☆11Feb 21, 2024Updated 2 years ago
- LiveServer是一个用Go语言编写的游戏服务器,分布式,采用goprobuf做协议,采用Mongodb做数据库,目前一些便利工具仅用于Windows下。☆23Dec 22, 2015Updated 10 years ago
- JVM虚拟DNS,开发期间可以省去hosts文件配置☆37Oct 8, 2022Updated 3 years ago
- spider使用java语言开发,使用Spring作为IoC容器,采用TCP/IP协议,在此基础上,结合SaaS金融交易系统的特性进行针对性和重点设计,以更加灵活和高效的满足金融交易系统多租户、高可用、分布式部署的要求。 spider默认采用JSON作为序列化机制,后续版本…☆10Sep 11, 2018Updated 7 years ago
- 使用openresty结合lua开发dubbo restful网关☆11Nov 5, 2018Updated 7 years ago
- maat是一个分布式事务中间件,实现了基于可靠消息的最终一致性事务控制.其可靠消息服务通过独立消息服务方案实现,与业务系统耦合低,目前支持的MQ有RocketMQ☆12Dec 6, 2018Updated 7 years ago
- ZxFrame为JAVA框架-支持读写分离,读数据源熔断,分库分表;多级缓存,防缓存击穿/穿透/雪崩;支持分布式ID/锁;配置 热更新等☆13Jun 21, 2022Updated 3 years ago
- golang版redis服务器实现☆10Feb 16, 2019Updated 7 years ago
- 基于ffmpeg+spring+quartz+dubbo+zookeeper+MyBatis服务化的视频转换分布式服务☆12Jul 21, 2016Updated 9 years ago
- 完整视频播放app,完成用户会员体系,积分体系,视频分类体系,项目可运行,但后端服务器需要自己修改bmob基础配置即可 设计技术点:1.应用material design设计交互 2.集成腾讯x5 3.集成bmob后端云 4.手势密码锁 5.ButterKnife和ev…☆10Mar 3, 2018Updated 7 years ago
- 基于Openresty整合lua server framework☆10Oct 20, 2017Updated 8 years ago
- 大型分布式系统实时监控平台☆29Jan 12, 2023Updated 3 years ago
- dubbo-brave集成☆10Mar 16, 2016Updated 9 years ago
- Pinot 是一个实时分布式的 OLAP 数据存储和分析系统。LinkedIn 使用它实现低延迟可伸缩的实时分析。Pinot 从离线数据源(包括 Hadoop 和各类文件)和在线数据源(如 Kafka)中攫取数据进行分析。Pinot 被设计是可以进行水平扩展的☆16Nov 8, 2015Updated 10 years ago
- 单文件Http工具类,支持GET,POST,断点续传,多线程断点续传☆11Sep 1, 2016Updated 9 years ago
- 我经常用到的一些小工具类:类型验证、转换,http,oauth,job,redis queue,jsonrpc等☆13Feb 8, 2017Updated 9 years ago
- java实现的基于raft算法和netty网络通信的分布式强一致kv存储。☆13Feb 5, 2024Updated 2 years ago
- java implementation framework from github☆13Apr 8, 2015Updated 10 years ago
- qq加群机器人,根据配置的关键词来搜索群并自动发送加群验证。难点:list滚动需要跨进程模拟触屏事件。使用前提:需要获取root权限,如需要获取更多机型的支持,需要添加相应机型的模拟触屏实现类。本项目不再维护,只提供给个人开发者学习使用。☆16Jul 23, 2018Updated 7 years ago
- 分布式timer插件, 轻量, 易用, 去中心化, 均衡负载, 集群节点通过zookeeper同步作业, java编写☆15May 22, 2017Updated 8 years ago
- 微信短视频后端☆14Oct 11, 2023Updated 2 years ago
- 分布式网络爬虫架构☆16Sep 26, 2016Updated 9 years ago
- 此工程不更新了,请移步到最新的工程 https://github.com/xiangxik/castle-platform ,Based on servlet3.1, the realization of modular expansion of the java deve…☆24Nov 8, 2016Updated 9 years ago
- rocketmq后台管理,从阿里开源修改。换成rest风格访问,增加拦截器登录配置☆15Jul 1, 2016Updated 9 years ago
- Library for using Redis sessions in Tomcat 8.☆15Jul 17, 2015Updated 10 years ago
- 分布式服务器框架,主要适用于全球服游戏☆21Mar 30, 2018Updated 7 years ago
- a simple rpc framework for java☆14Dec 9, 2014Updated 11 years ago
- java快速上手的网络IO框架,基于netty, google protobuf 数据传输协议,disruptor队列,zookeeper服务注册发现,支持心跳检测,断线重连,tcp连接池,注解分发消息。用于服务器间长连接通讯,可搭建分布式服务器以及分布式游戏。☆21Oct 4, 2022Updated 3 years ago
- 基于Netty、JSON-RPC的分布式弱联网游戏服务端☆34May 3, 2017Updated 8 years ago
- 全新设计的mysql分库分表中间件。使用netty 4.1开发,基于spring boot/cloud提供管理接口。☆17Mar 31, 2021Updated 4 years ago
- springboot-dubbo-apigateway☆18Dec 2, 2016Updated 9 years ago
- 高可用,高性能的分布式发号服务☆17Nov 1, 2022Updated 3 years ago
- HiMagpie 网关,负责 TCP 长连接建立、心跳、消费消息队列并推送等。☆16Jun 1, 2017Updated 8 years ago
- JBFS 是基于facebook haystack 开发的一套分布式海量小文件存储系统☆18Feb 25, 2016Updated 10 years ago