Alternatives and similar repositories for HadoopDedup

Users that are interested in HadoopDedup are comparing it to the libraries listed below

• xiaokugua250 / DataMingProject
  大数据平台相关代码（ES/Hive/Hadoop/hdfs/hbase）
  ☆75Updated 2 years ago
• appleappleapple / BigDataLearning
  Spark、Hadoop、Flink、Storm、Kafka编程实例学习
  ☆168Updated 8 years ago
• zhang637 / kafka_spark_hbase_demo
  kafka spark hbase 日志统计
  ☆80Updated 8 years ago
• windwant / bigdata-service
  hadoop flume hbase kafka storm；读取kafka数据=》storm实时处理（分割字符，统计字符）=》写入hdfs
  ☆21Updated 6 years ago
• Thinkgamer / Hadoop-Spark-Learning
  本项目记录我学习hadoop和spark等开源框架的代码，因为也是最近才用github，之前都是荒废状态，故部分都是是之前写好的，现在上传至github
  ☆87Updated 7 years ago
• chensoul / grab
  基于spark、mahout和spring boot构建的推荐系统
  ☆131Updated 4 months ago
• Gyoliu / phoenix-hbase
  phoenix 操作hbase和springboot的整合
  ☆11Updated 7 years ago
• huangyueranbbc / SparkDemo
  spark全示例代码(java、scala) Spark most full instance code DEMO (java、scala)
  ☆85Updated 5 years ago
• Paleozoic / storm_spring_boot_demo
  一个基于Spring Boot的Storm开发手脚架，开箱即用！集成读写Kafka、写Redis、写MySQL示例。
  ☆59Updated 6 years ago
• wang1365 / storm-traffic
  使用Storm实时处理交通大数据（数据源：kafka，集群管理：zookeeper）
  ☆51Updated 2 years ago
• 344399160 / sparkForDB
  使用spark对hive、hbase、ES的读写， 实现一次配置可对不同数据库进行导入导出，并对ES、hbase进行封装
  ☆33Updated 8 years ago
• ken-hu / hui-bigdata-spark
  【bigdata】spirngboot+spark 脚手架+相关实例
  ☆22Updated 3 years ago
• thestyleofme / common-datax
  基于DataX的通用数据同步微服务，一个Restful接口搞定所有通用数据同步
  ☆54Updated 3 years ago
• laixiangshun / bigdata-study
  大数据组件学习；包括dataflow，spring cloud stream；elasticsearch；flink；spark；kafka；phoenix；Hive；Hbase；
  ☆23Updated 3 years ago
• huangyueranbbc / Spark_ALS
  基于spark-ml,spark-mllib,spark-streaming的推荐算法实现
  ☆96Updated 6 years ago
• zhangziliang04 / DDW
  分布式数据仓库最佳实践
  ☆57Updated 7 years ago
• Will-Grindelwald / Storm-Kafka
  Storm Kafka 流数据 处理系统
  ☆20Updated 6 years ago
• a123demi / spring-sparkstreaming-kafka-10
  spring+spark streaming+kafka 10版本集成和异常问题处理
  ☆17Updated 8 years ago
• jason-learn / Flume-Hadoop-Hbase-SpringMVC-MyBatis-MySQL-Highcharts
  项目实战：Hadoop生态圈
  ☆30Updated 7 years ago
• liguozhong / demo_11.11_storm-spark-hadoop
  hadoop_storm_spark结合实验的例子，模拟淘宝双11节，根据订单详细信息，汇总出总销售量，各个省份销售排行，以及后期的SQL分析，数据分析，数据挖掘等。 --------大概流程------- 第一阶段（storm实时报表） 第二阶段（离线报表）第三阶段（大规…
  ☆323Updated 10 years ago
• qindongliang / hbase-increment-index
  hbase+solr实现hbase的二级索引
  ☆47Updated 5 months ago
• 2shou / HBaseObserver
  通过HBase Observer同步数据到ElasticSearch
  ☆54Updated 10 years ago
• xpleaf / data-extract-clean-analysis
  The project of data cleaning and data analysis based on MapReduce.
  ☆62Updated 7 years ago
• gingerredjade / flink-userportrait-VuejsShow
  基于Flink流处理的动态实时亿级全端用户画像系统可视化界面
  ☆36Updated 2 years ago
• winstonelei / BigDataTools
  tools for bigData
  ☆37Updated 6 years ago
• oeljeklaus-you / LogAnalyzeHelper
  论坛日志分析系统清洗程序(包含IP规则库，UDF开发，MapReduce程序，日志数据)
  ☆33Updated 7 years ago
• linzhouzhi / spark_recommend
  hbase + spark 实现常用推荐算法（主要用于精准广告投放和推荐系统）
  ☆68Updated 9 years ago
• Chihuataneo / Spark_Personas
  Spark中实现用户画像系统价值度、忠诚度、流失预警、活跃度等模型
  ☆66Updated 8 years ago
• xxrznj / flink-kafka-sql
  kafka传数据到Flink存储到mysql之Flink使用SQL语句聚合数据流（设置时间窗口，EventTime）
  ☆32Updated 7 years ago
• wormsleep / etl
  ETL Tools 数据抽取-转换-加载工具
  ☆79Updated 8 years ago