LXiong / video-transcoding-system-base-on-hadoop
这是一个基于Hadoop的视频转码系统,首先视频在本地进行分割成64M左右大小,然后从本地文件夹中上传到HDFS中,然后启动一个MapReduce作业,每一个Map作业下载一个视频到本地,进行转码到在上传到HDFS中,没有reduce过程,最后客户端自行下载这些转码后的分片进行合并
☆26Updated 10 years ago
Alternatives and similar repositories for video-transcoding-system-base-on-hadoop:
Users that are interested in video-transcoding-system-base-on-hadoop are comparing it to the libraries listed below
- 关于通过百度地图API采集POI数据,并存储到HBase的项目。☆24Updated 8 years ago
- 本工具为自定义转流工具jar包源码,利用java对FFMPEG进行二次封装,能将直播视频输入流转换成HLS切片,并且支持批量自动创建文件夹、自动重连、音视频混流、转码等功能。☆24Updated 8 years ago
- livePush推流器的使用web demo:采用REST请求来发布和停止推流,并使用videoJS/ckPlayer播放器进行实时预览☆22Updated 8 years ago
- hadoop flume hbase kafka storm;读取kafka数据=》storm实时处理(分割字符,统计字符)=》写入hdfs☆21Updated 6 years ago
- 基于JAVA NIO 的轻量级消息传输框架。主要功能包括:文本消息传输、二进制文件传输、文本及二进制混合传输、消息的自定义实现加密传输算法、同步或异步传输、客户端、服务端框架内置心跳监听、服务端 认证、支持网络断线客户端自动重连。☆44Updated 7 years ago
- 基于Hadoop和HBase的大规模海量数据去重☆29Updated 6 years ago
- 基于Netty的文件传输程序,方便与其他系统的集成☆21Updated 6 years ago
- java爬虫,反爬虫策略、ETL清洗数据,以及spark离线和实时分析新闻并存入ES☆20Updated 6 years ago
- 微云盘,高仿百度云;使用技术jdbc/servlet/jquery MVC三层架构;同时封装了大量通用工具☆34Updated 5 years ago
- 使用Spark批量处理离线交通大数据☆15Updated 7 years ago
- 精品教育在线考试☆28Updated 11 years ago
- 云笔记项目,大数据项目,Hbase+Redis+Hadoop+Zookeeper☆13Updated 6 years ago
- springmvc、httpclient登陆教务系统、获取教务通知、上传下载文件、app接口、后台管理☆8Updated 8 years ago
- 大数据平台相关代码(ES/Hive/Hadoop/hdfs/hbase)☆74Updated 2 years ago
- DataX 是阿里巴巴集团内被广泛使用的离线数据 同步工具/平台,实现包括 MySQL、Oracle、HDFS、Hive、OceanBase、HBase、OTS、ODPS 等各种异构数据源之间高效的数据同步功能。☆23Updated 3 years ago
- 消息推送群推restful,支持Android和ios,Android与activemq集成,ios与javapns集成☆15Updated 9 years ago
- 业务风控系统☆11Updated 8 years ago
- 大文件分块上传到fastDfs☆18Updated 6 years ago
- 蘑菇街一款既是做开源又是做产品的企业办公即时通信软件☆33Updated 9 years ago
- 日志实时监控,检索,报警☆19Updated 8 years ago
- B/S模式,成熟架构spring-mvc+spring+ibatis+mysql,完成的第一款智能门禁系统,作者闫鑫独立完成90%的源码开发,历时80多个工作日,并且协同android作为前置采集指纹系统,java用来做为指纹的的匹配和记录,通过CRUD的逻辑性,判断可否智…☆20Updated 9 years ago
- 迪拜后台系统框架:基于Springside、Mysql、Bootstrap2的后台系统框架,旨在为繁杂的各种业务流程提供一个界面简约、操作高效、运行稳定、容易集成和横向扩展的开发基础框架及规范。☆44Updated 2 years ago
- 学习netty时的一些demo,学习书籍netty权威指南,以及自己实现的基于netty的私有协议栈☆19Updated 7 years ago
- 这是一个开源的互联网在线广告投放系统。该系统可用于网站、视频播放的所有页面广告、视频广告以及无线客户端、TV广告的管理、播放、定向和统计,包括了业务管理、售前计划管理、广告活动管理、广告引擎、播放器内广告、展示广告、数据及商业智能、人群定向、第三方广告管理等几大模块。采用C…☆87Updated 9 years ago
- 移动用户行为统计系统,服务器端的数据采集分析,参考开源的cobub razor的设计☆36Updated 7 years ago
- 图片服务器,能够对源图片进行转换(指定高宽,等比缩放,添加水印,添加业务图标,改 变透明度等),并且进行业务图片的缓存,提供业务图片的静态地址等☆35Updated 8 years ago
- JEECMS是一款基于JAVA技术研发的站群管理系统。 1、支持大规模网站群管理; 2、跨站全文检索、数据共享; 3、微官网/手机网站同步建设; 4、高效二次开发的插件化管理 5、支持可视化模板制作;☆25Updated 8 years ago
- 开源p2p软件☆31Updated 8 years ago
- 如果你正新开始一个服务器端API项目,使用的正是maven, Spring MVC技术,并使用JSON作为服务器返回的格式,那么codegen-builder-plugin将让你免费获得自动生成文档,自动生成Android 客户端代码等功能。例子代码:https://gith…☆14Updated 6 years ago
- 处理海量数据的excel/dbf/csv文件,包括文件的读取和写入☆13Updated 5 years ago