LXiong / video-transcoding-system-base-on-hadoopLinks
这是一个基于Hadoop的视频转码系统,首先视频在本地进行分割成64M左右大小,然后从本地文件夹中上传到HDFS中,然后启动一个MapReduce作业,每一个Map作业下载一个视频到本地,进行转码到在上传到HDFS中,没有reduce过程,最后客户端自行下载这些转码后的分片进行合并
☆28Updated 11 years ago
Alternatives and similar repositories for video-transcoding-system-base-on-hadoop
Users that are interested in video-transcoding-system-base-on-hadoop are comparing it to the libraries listed below
Sorting:
- 使用Spark批量处理离线交通大数据☆15Updated 7 years ago
- 关于通过百度地图API采集POI数据,并存储到HBase的项目。☆24Updated 9 years ago
- 本工具为自定义转流工具jar包源码,利用java对FFMPEG进行二次封装,能将直播视频输入流转换成HLS切片,并且支持批量自动创建文件夹、自动重连、音视频混流、转码等功能。☆24Updated 8 years ago
- 基于JAVA NIO 的轻量级消息传输框架。主要功能包括:文本消息传输、二进制文件传输、文本及二进制混合传输、消息的自定义实现加密传输算法、同步或异步传输、客户端、服务端框架内置心跳监 听、服务端认证、支持网络断线客户端自动重连。☆44Updated 8 years ago
- 一个简易的搜索引擎,采用Java开发☆32Updated 11 years ago
- 基于Flume、Kafka、SparkSql模拟的实时日志分析系统☆12Updated 9 years ago
- java爬虫,反爬虫策略、ETL清洗数据,以及spark离线和实时分析新闻并存入ES☆21Updated 6 years ago
- mumu-mahout是一个学习项目,主要通过这个项目来学习mahout的功能和使用方式。mahout是一款开源的机器学习算法,主要包括协同过滤推荐、聚类、分类等三大块内容。 推荐可以基于用户的推荐和基于物品的推荐,可以给用户推荐一些数据,智能化数据。☆22Updated 6 years ago
- 微云盘,高仿百度云;使用技术jdbc/servlet/jquery MVC三层架构;同时封装了大量通用工具☆35Updated 5 years ago
- 对电影进行个性化推荐,基于Mahout框架实现的,使用的协同过滤算法☆33Updated 12 years ago
- 各大电商网站数据抓取分析☆33Updated 11 years ago
- B/S模式,成熟架构spring-mvc+spring+ibatis+mysql,完成的第一款智能门禁系统,作者闫鑫独立完成90%的源码开发,历时80多个工作日,并且协同android作为前置采集指纹系统,java用来做为指纹的的匹配和记录,通过CRUD的逻辑性,判断可否智…☆20Updated 9 years ago
- JEECMS是一款基于JAVA技术研发的站群管理系统。 1、支持大规模网站群管理; 2、跨站全文检索、数据共享; 3、微官网/手机网站同步建设; 4、高效二次开发的插件化管理 5、支持可视化模板制作;☆26Updated 8 years ago
- 基于Hadoop和HBase的大规模海量数据去重☆29Updated 7 years ago
- 推荐算法☆30Updated 10 years ago
- spark流式计算电商商品关注度+推荐系统/关联系统☆15Updated 7 years ago
- 基于Spring的开源即时通讯系统☆14Updated 9 years ago
- 基于Map/Reduce爬虫,可抽取各大新闻网站的新闻正文并进行分类和聚类☆77Updated 11 years ago
- 基于Spring Cloud Alibaba实现分布式广告系统☆47Updated 2 years ago
- 大数据平台相关代码(ES/Hive/Hadoop/hdfs/hbase)☆75Updated 2 years ago
- 个性化推荐算法的通用处理框架,基于Mahout和Lucene☆18Updated 10 years ago
- 京东商品推荐系统-数据爬虫☆18Updated 10 years ago
- 云笔记项目,大数据项目,Hbase+Redis+Hadoop+Zookeeper☆13Updated 7 years ago
- 以知乎日报为数据源,全流程实践一个机器学习过程,从数据获取到数据分析,对知乎日报进行聚类、分类,并可视化这一过程☆17Updated 9 years ago
- 视频教育网站☆16Updated 6 years ago
- livePush推流器的使用web demo:采用REST请求来发布和停止推流,并使用videoJS/ckPlayer播放器进行实时预览☆22Updated 8 years ago
- springmvc、httpclient登陆教务系统、获取教务通知、上传下载文件、app接口、后台管理☆8Updated 8 years ago
- DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括 MySQL、Oracle、HDFS、Hive、OceanBase、HBase、OTS、ODPS 等各种异构数据源之间高效的数据同步功能。☆23Updated 3 years ago
- 社交类app后端☆13Updated 9 years ago
- java方向书籍的学习,包括《java编程思想》,《实战java虚拟机》(作者:葛一鸣)《java高并发》(作者:葛一鸣)。☆18Updated 6 years ago