linyiqun / MapReduce-Code
Hadoop平台下的MapReduce源码分析
☆8Updated 10 years ago
Related projects ⓘ
Alternatives and complementary repositories for MapReduce-Code
- Spark源码分析,主要包含SparkContext源码、Executor进程启动、Stage划分、Task执行和Spark2.0的新特性☆82Updated 5 years ago
- 大数据平台相关代码（ES/Hive/Hadoop/hdfs/hbase）☆74Updated 2 years ago
- 易观开源大数据互联网百亿级记录互传Backquarter项目☆18Updated 2 years ago
- hbase+solr实现hbase的二级索引☆47Updated 3 years ago
- 总结了一些Spark学习过程中的例子（附代码详细注释）☆24Updated 6 years ago
- Spark1.6和spark2.2的示例，包含kafka,flume,structuredstreaming,jedis,elasticsearch,mysql,dataframe☆15Updated 6 years ago
- 基于Yarn的容器调度引擎(container scheduler based on yarn)☆37Updated 8 years ago
- Spark Streaming + kafka + hbase☆15Updated 6 years ago
- 使用spark对hive、hbase、ES的读写， 实现一次配置可对不同数据库进行导入导出，并对ES、hbase进行封装☆32Updated 7 years ago
- 论坛日志分析系统清洗程序(包含IP规则库，UDF开发，MapReduce程序，日志数据)☆33Updated 6 years ago
- Storm Kafka 流数据 处理系统☆20Updated 6 years ago
- 可以说近几年Spark的流行带动了Scala的发展，它集成了面向对象编程和函数式编程的各种特性，Scala具有更纯Lambda表粹的函数式业务逻辑解决方案，其语法比Java8后Lambda更加简洁方便，SpringBoot为Spring提供了一种更加方便快捷的方式，不再要求…☆61Updated 7 years ago
- 使用spring-boot-spark的一个样例☆11Updated 6 years ago
- 基于Hadoop和HBase的大规模海量数据去重☆29Updated 6 years ago
- spark sql online editor☆13Updated last year
- Spark源代码中文注释☆42Updated 6 years ago
- Spark机器学习书代码☆26Updated 6 years ago
- 记录Spark、Flink研究经验☆25Updated 5 years ago
- spark算子使用例子, spark RDD的算子挺多，有时候如何灵活的使用，该如何用一下子想不起来，这一段时间将spark的算子如何使用的例子给记录了下来，下面是spark RDD 的一些常用算子的使用 这些算子包括有java的，也有scala的语言(博客中才有)，由于精…☆36Updated 6 years ago
- 本项目记录我学习hadoop和spark等开源框架的代码，因为也是最近才用github，之前都是荒废状态，故部分都是是之前写好的，现在上传至github☆84Updated 7 years ago
- SparkStreaming中利用MySQL保存Kafka偏移量保证0数据丢失☆45Updated 7 years ago
- Scala语言实现的慕课网秒杀系统增强版(含Java版)，Scala v1☆47Updated 4 years ago
- 使用spark streaming 导入kafka数据到hbase☆25Updated 8 years ago
- 分布式数据仓库最佳实践☆57Updated 6 years ago