实战派带你玩真正的大数据,14周高强度特训!

锋云网

 找回密码
 快速注册

QQ登录

只需一步,快速开始

搜索
查看: 1062|回复: 0

[其它云平台] 网易视频云技术分享:移动端播放器框架搭建

[复制链接]
发表于 2016-11-2 11:02:43 | 显示全部楼层 |阅读模式
  一、概述4 k9 c; e5 f( @6 L) [" ]% w4 r) h
  目前,移动互联网技术飞速发展,影响着人们生活的各个方面。据有关数据统计,2016年中国的移动互联网用户数已经超过8亿。旅游,教育,购物,娱乐等方面都与之紧密联系。其中最火的当属移动直播,各种直播APP铺天盖地,而播放器是其中非常重要的部分,播放器的好坏直接影响到直播的用户体验。8 ~" b$ K1 Z( x7 z4 }* [! ?. t
  如何打造一个适合移动直播的播放器呢?首先要保证功能强大,其次兼容性要好,能够适用于绝大多数的手机,最后要保证轻量级,因为移动设备的内存和磁盘容量都是有限的。
2 v5 p: L/ N+ k2 N$ q& F  二、播放器框架' {  C( Z3 ~' }! _+ @% ?& g. @. z
  对于一个播放器来说,需要包含如下几个模块:
+ k$ Z* E1 w$ _' ]0 T  1、初始化模块
& b1 I: o. y! q7 K. S  该模块中主要做一些初始化的工作,包括播放器实例的创建,消息机制和, E  S0 I6 X9 h, {
  线程的创建,以及相关全局变量的初始化。
- D$ L; \' N+ ]% Q) Y3 {7 x  2、输入模块( ]8 J3 m+ ~  ^2 j: e
  输入模块包含请求流媒体数据和对流媒体数据进行分解(Demux)两个部分。
9 Y0 G4 `& f1 }! q4 p- p  对于移动直播,请求流媒体数据需要支持RTMP、HTTP和HLS协议。Demux模块需要支持诸如FLV、TS等格式的解析,并将分解后的音视频裸数据存放在相应的缓冲队列中,用于后续的解码。' w7 _, k$ r4 S
  3、解码模块8 T0 b/ C! V" R3 v, J
  解码模块包含音频解码模块和视频解码模块,音视频解码需要分别在两个
: x9 D( E9 f- m) _" y; O  线程中进行,从输入模块的缓冲队列中获取音视频裸数据,传入对应的解码器进行解码,并将解码后的音视频数据帧存入相应的队列中用于显示。其中解码可以采用软件解码和硬件解码两种方式:软件解码兼容性可容错性较好,但是耗CPU性能;硬件解码依赖于系统,Android采用MediaCodec(Android 4.1+),iOS采用VideoToolBox(iOS 8.0+)。兼容性和容错性较差,好处是不耗CPU。
5 V$ C9 z' C  ~* T- ~  5、显示模块6 e7 y4 G$ L+ g( I1 L
  该模块主要将解码后的音视频数据帧展现出来。音频和视频的显示也是分别: J$ x( `4 Q$ w  }& y
  由两个线程来执行,分别从解码后的音视频帧队列中获取音视频帧进行播放,Android端音频可以用AudioTrack或OpenSL ES进行播放,视频可以用NativeWindow和Surface进行播放;iOS端音频可以用AudioQueue或AudioUnit进行播放,视频可以用OpenGL ES进行播放。6 m/ ~' L+ q" t* A5 Y5 f$ Z
  6、事物处理模块+ d  h$ {; u( ~
  该模块主要是对播放器进行一些逻辑控制,比如暂停,播放,seek,截图等操作,以及一些播放过程中一些消息的反馈。
3 V0 c* f* M* S2 _  X   图片1.jpg
( B; \$ l. `: d7 l, Q2 S; }  W  图1 播放器框架" H; _) o7 r8 F3 I% L0 v, U
  三、说明
" N: V# {/ z- c8 T  将上述6个模块有机的整合在一起,就可以完成一个播放器的开发,但是仅9 }' q1 J! Q2 ^2 ]/ M& m
  仅这些还是不够的。由于移动设备的特殊性,我们可能在播放过程中突然来电,查看QQ、微信等消息,完成这些后希望播放还能够继续。这就需要播放器能够对这些操作有相应的应对措施。有些用户希望APP切入后台还能够继续播放,有些则不需要,这都需要我们做出相应的处理。并且移动设备的内存和磁盘空间较小,需要我们保证播放器功能完善的前提下包大小尽可能的小,我们可以对各个模块中所用到的处理引擎进行裁剪,只保留我们所需的功能,这样我们就可以保证APP的轻量级。4 M+ K- ]3 w; i& Y/ Y2 \
  综上所述,我们不仅要保证底层音视频引擎高效的运转,也要保证上层逻辑处理能够满足移动设备的特性,这样我们就可以打造出一款功能完善,兼容性好的播放器。
# T9 _0 O& N, p7 `: a
5 w9 j3 b! r# M# M, F
学大数据 到大讲台
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 快速注册

本版积分规则

在线咨询|关于锋云|联系我们|手机版|投诉建议|版权声明|云计算|Hadoop|大数据|锋云网 ( 京ICP备13050990号 )

这是云计算时代的精英部落,这是中国最大的云计算社区 —— 锋云网(sharpcloud.cn)!

本站CDN/存储服务由本站CDN/存储服务由又拍云提供提供

Powered by Discuz! X3.2

© 2001-2015 Sharpcloud.cn

 

锋云网官方QQ群

中国云计算精英群(ID:64924638)中国云计算精英群      Hadoop技术交流群②(ID:25728812)Hadoop技术交流群②      Spark技术交流群(ID:413581066)Spark技术交流群

Hadoop技术交流群(ID:113156288,2000人群已满)

返回顶部