peopleindreamdontsleep / SparkanSpider

Related projects ⓘ

Alternatives and complementary repositories for SparkanSpider

• oeljeklaus-you / LogAnalyzeHelper
  论坛日志分析系统清洗程序(包含IP规则库，UDF开发，MapReduce程序，日志数据)
  ☆33Updated 6 years ago
• sev7e0 / bigdata-practice
  常用大数据工具学习实战，包含Hadoop、HBase、Kafka、ClickHouse、Hive、Redis、Zookeeper...
  ☆21Updated 2 years ago
• chucheng92 / HadoopDedup
  基于Hadoop和HBase的大规模海量数据去重
  ☆29Updated 6 years ago
• wang1365 / storm-traffic
  使用Storm实时处理交通大数据（数据源：kafka，集群管理：zookeeper）
  ☆52Updated last year
• xiaokugua250 / DataMingProject
  大数据平台相关代码（ES/Hive/Hadoop/hdfs/hbase）
  ☆74Updated 2 years ago
• Dasions / daydayfund
  天天基金网爬虫，可多ip节点部署，按ip节点动态调整并发数，可设置代理ip反爬，定时爬取，定时通过邮件反馈基金行情统计数据
  ☆26Updated last year
• xxrznj / flink-kafka-sql
  kafka传数据到Flink存储到mysql之Flink使用SQL语句聚合数据流（设置时间窗口，EventTime）
  ☆31Updated 6 years ago
• huangjianqin / bigdata
  对大数据相关技术的研究和实践
  ☆8Updated last year
• tensor-core / ice-gate
  spring cloud集成全渠道在线客服以及后台管理系统，所有微服务之间的消息传递采用区块链技术，持续更新中～～目标是：第一阶段：采用spring cloud微服务搭建后台管理系统第二阶段：集成在线客服，采用netty实现websocket长连接第三阶段：集成h5、微信、…
  ☆16Updated last year
• wwzzhh14 / AnyQuant
  量化交易网站 java
  ☆11Updated 7 years ago
• janecd / RiskRule
  实时风控系统，基于spark-streaming、drools、kafka、redis
  ☆50Updated 6 years ago
• gingerredjade / flink-userportrait-VuejsShow
  基于Flink流处理的动态实时亿级全端用户画像系统可视化界面
  ☆33Updated last year
• changge458 / userdraw
  用户画像代码，根据算法推算出用户的性别和年龄比率
  ☆11Updated 6 years ago
• xushaomin / apple-ums-server
  移动用户行为统计系统，服务器端的数据采集分析，参考开源的cobub razor的设计
  ☆37Updated 7 years ago
• hongs01 / ltybdservice-root
  蓝泰源大数据基础平台
  ☆17Updated 6 years ago
• lzxlin / spark-goods
  spark流式计算电商商品关注度+推荐系统/关联系统
  ☆15Updated 6 years ago
• shiyuren / databi
  数据分析快速开发平台：包含统一数据访问接口，数据建模，数据治理，数据展现
  ☆22Updated 6 years ago
• 344399160 / sparkForDB
  使用spark对hive、hbase、ES的读写， 实现一次配置可对不同数据库进行导入导出，并对ES、hbase进行封装
  ☆32Updated 7 years ago
• windwant / bigdata-service
  hadoop flume hbase kafka storm；读取kafka数据=》storm实时处理（分割字符，统计字符）=》写入hdfs
  ☆21Updated 6 years ago
• liu-weihao / kettle
  基于Kettle的MySQL数据库同步
  ☆26Updated 6 years ago
• jetbinliu / prophet
  一个优秀的大数据查询平台，提供hive异步任务查询、LDAP用户、数据权限控制、历史查询任务与结果存储、邮件通知、excel下载等功能。
  ☆24Updated 6 years ago
• cloverfisher / zeus
  Hadoop作业平台
  ☆36Updated 11 years ago
• laixiangshun / bigdata-study
  大数据组件学习；包括dataflow，spring cloud stream；elasticsearch；flink；spark；kafka；phoenix；Hive；Hbase；
  ☆21Updated 2 years ago
• 2016gary / hummingbirdSystem
  蜂鸟数据分析平台帮助企业快速完成多数据整合，建立统一数据口径，支持自助式数据准备（ETL）， 并提供可视化分析，帮助企业构建贴合自身业务的企业洞察，并将数据决策覆盖各层员工及应用场景
  ☆21Updated 5 years ago
• andieguo / poi-parent
  关于通过百度地图API采集POI数据，并存储到HBase的项目。
  ☆24Updated 8 years ago
• yaoguangluo / ETL_Unicorn
  数据可视化, 数据挖掘, 数据处理 ETL分析
  ☆166Updated 2 years ago
• lvwangbeta / Mahout-zhihuDaily
  以知乎日报为数据源，全流程实践一个机器学习过程，从数据获取到数据分析，对知乎日报进行聚类、分类，并可视化这一过程
  ☆17Updated 8 years ago