lsf921016 / outterSortLinks
完整的外排序算法,对8000万条数据(2G)大小进行排序,使用临时文件作为内存扩展,算法思想:使用选择置换排序最大化顺串长度,多路归并减少IO开销,使用败者树来使归并达到最优。
☆34Updated 5 years ago
Alternatives and similar repositories for outterSort
Users that are interested in outterSort are comparing it to the libraries listed below
Sorting:
- 由java构建的轻量级消息队列,支持订阅和点对点模式☆33Updated 6 years ago
- 封装常用的生产者-消费者模型☆19Updated 8 years ago
- Java应用性能监控系统,使用JMX实现,实现了类加载监控、内存监控、线程监控、GC监控☆75Updated 5 years ago
- 1、支持网页爬虫 2、多线程、线程池 3、支持全文搜索 4、支持Hadoop分布式平台、HDFS/MapReduce、Zookeeper、HBase 5、支持redis分布式缓存 6、集成微信公众号开发 7、Spring4新特性 8、ActiveMQ 9、Nginx详细配置…☆16Updated 2 years ago
- netty实现的轻量级rpc框架☆20Updated 2 years ago
- 基于Netty实现的轻量级分布式应用配置中心☆82Updated 2 years ago
- rocketmq的磁盘存储模块,我增加了延时消息☆11Updated 6 years ago
- 阿里中间件比赛系列代码,包括:第二届初复赛、第三届初复赛。☆16Updated 7 years ago
- java时间轮☆37Updated 6 years ago
- seata demo,包括tcc模式(解决了幂等性问题,允许空回滚,拒绝空回滚后的操作),和at模式☆24Updated 4 years ago
- 高性能分布式事务框架☆41Updated 3 years ago
- ☆43Updated 2 years ago
- 爬虫项目源码整理,使用redis进行url缓存,hbase进行详细信息的存储。使用zookeeper进行爬虫线程的状态监控。☆19Updated 9 years ago
- 手把手教你设计并实现一个基于Redis的分布式锁☆72Updated 6 years ago
- zookeeper的笔记以及教程☆14Updated 6 years ago
- 数据挖掘大作业基于协同过滤推荐算法的电影推荐☆28Updated 10 years ago
- 规则引擎☆21Updated 7 years ago
- 个人工具汇总:一致性哈希工具,Bitmap工具,布隆过滤器参数生成器,Yaml和properties互转工具,一键式生成整个前后端工具,单机高性能幂等工具,zookeeper客户端工具,分布式全局id生成器,时间转换工具,Http封装工具☆67Updated 2 years ago
- 博睿文件系统☆19Updated 6 years ago
- 慕课网广告系统设计微服务☆32Updated 3 years ago
- DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括 MySQL、Oracle、HDFS、Hive、OceanBase、HBase、OTS、ODPS 等各种异构数据源之间高效的数据同步功能。☆23Updated 3 years ago
- java分布式爬虫,主机和从机控制的机制☆14Updated 10 years ago
- Redis-based distributed queue with queue task monitoring, task timeout, failed task retries and more☆19Updated 7 years ago
- 基于redis的消息队列☆48Updated 3 years ago
- 基于Spring Cloud微服务架构的广告系统☆57Updated 3 years ago
- 一个超轻量级的RPC服务注册, 发现, 调用的框架. 使用Spring Boot管理Bean以及自动配置, 使用Netty处理网络请求, 使用ProtoStuff编解码, 使用Zookeeper作为服务注册和发现. 使用Quasar替代线程进行服务的调用.☆62Updated 8 years ago
- 用于数据迁移、缓存预热,springboot架构。支持数据区间分割、动态调整线程池配置、任务进度实时查看等特性☆45Updated 8 years ago
- hero☆1Updated 7 years ago
- 自己编写RPC(动态代理+反射+zookeeper+netty通信),并结合Spring☆33Updated 6 years ago
- JBFS 是基于facebook haystack 开发的一套分布式海量小文件存储系统☆18Updated 9 years ago