huangjianqin / bigdata
对大数据相关技术的研究和实践
☆8Updated 2 years ago
Alternatives and similar repositories for bigdata
Users that are interested in bigdata are comparing it to the libraries listed below
Sorting:
- idcenter(分布式ID生成中心):极高效的分布式id生成系统,每个客户端获取id的tps可达到400万+,服务端可支持海量的客户端。具备高容错性,即使网络不稳定也能运转(只要不连续长时间断网)。使用http协议进行通信,可支持多语言。具备完整的管理员登录、权限校验。部…☆34Updated 2 years ago
- java爬虫,反爬虫策略、ETL清洗数据,以及spark离线和实时分析新闻并存入ES☆21Updated 6 years ago
- 大型分布式系统实时监控平台☆28Updated 2 years ago
- 论坛日志分析系统清洗程序(包含IP规则库,UDF开发,MapReduce程序,日志数据)☆33Updated 6 years ago
- 用户画像代码,根据算法推算出用户的性别和年龄比率☆11Updated 7 years ago
- 基于Hadoop和HBase的大规模海量数据去重☆29Updated 7 years ago
- 基于redis的分布式锁,适用于秒杀,自增ID等web分布式开发场景☆11Updated 8 years ago
- 蓝泰源大数据基础平台☆17Updated 7 years ago
- 基于云计算Iaas平台的企业级云计算,一站式解决方案,http://www.springcloud.cn☆28Updated 9 years ago
- 业务风控系统☆11Updated 8 years ago
- 线程池、任务、任务组、任务池,定时任务的类库☆23Updated 3 months ago
- Java:购物车规则引擎。采用SOA思想,每个促销规则以插件的形式增减☆20Updated 9 years ago
- 基于Kettle的MySQL数据库同步☆26Updated 6 years ago
- ☆16Updated 2 years ago
- 移动用户行为统计系统,服务器端的数据采集分析,参考开源的cobub razor的设计☆36Updated 8 years ago
- 基于spring cloud Alibaba的P2P借贷平台(后端服务)☆26Updated 2 years ago
- 基于Redis的延迟队列系统☆46Updated 8 years ago
- 大数据组件学习;包括dataflow,spring cloud stream;elasticsearch;flink;spark;kafka;phoenix;Hive;Hbase;☆23Updated 2 years ago
- 数据处理平台☆16Updated 8 years ago
- SpringBoot框架搭建的WebSocket项目☆10Updated 7 years ago
- 快速计算视觉听觉 线性卷积数据分析☆87Updated 3 years ago
- Spring Cloud 跨服务数据聚合小框架,解决服务拆分的静态数据聚合之痛☆9Updated 7 years ago
- Pudding 是一款迷你级分布式服务框架☆24Updated 8 years ago
- zookeeper官方提供的分布式锁,选举master,和分布式队列实现☆17Updated 11 years ago
- 以知乎日报为数据源,全流程实践一个机器学习过程,从数据获取到数据分析,对知乎日报进行聚类、分类,并可视化这一过程☆17Updated 9 years ago
- 大数据平台相关代码(ES/Hive/Hadoop/hdfs/hbase)☆75Updated 2 years ago
- mykit-chat是基于Netty实现的实时聊天系统服务器端:1. 支持昵称登录; 2. 支持多人同时在线; 3. 同步显示在线人数; 4. 支持文字和表情的内容; 5. 浏览器与服务器保持长连接,定时心跳检测;☆37Updated 2 years ago
- springboot项目使用脚手架,集成redis、mysql、pg,hbase、elasticsearch、kafka等常用组件功能☆21Updated 2 years ago
- DataX 是异构数据广泛使用的离线数据同步工具/平台,实现包括 MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、OTS、ODPS 等各种异构数据源之间高效的数据同步功能。☆23Updated 7 years ago
- 基于SpringBoot2.x、SpringCloud和SpringCloudAlibaba并采用前后端分离的企业级微服务多租户系统架构。并引入组件化的思想实现高内聚低耦合并且高度可配置化,适合学习和企业中使用。真正实现了基于RBAC、jwt和oauth2的无状态统一权限认…☆15Updated 2 years ago