实战派带你玩真正的大数据,14周高强度特训!

锋云网

 找回密码
 快速注册

QQ登录

只需一步,快速开始

搜索
查看: 929|回复: 0

[其它云平台] 网易视频云技术分享:移动端播放器框架搭建

[复制链接]
发表于 2016-11-2 11:02:43 | 显示全部楼层 |阅读模式
  一、概述
$ {7 g5 ?7 F/ U  目前,移动互联网技术飞速发展,影响着人们生活的各个方面。据有关数据统计,2016年中国的移动互联网用户数已经超过8亿。旅游,教育,购物,娱乐等方面都与之紧密联系。其中最火的当属移动直播,各种直播APP铺天盖地,而播放器是其中非常重要的部分,播放器的好坏直接影响到直播的用户体验。' l/ A" y, E: j$ D" O6 P  b! C" L" r# i
  如何打造一个适合移动直播的播放器呢?首先要保证功能强大,其次兼容性要好,能够适用于绝大多数的手机,最后要保证轻量级,因为移动设备的内存和磁盘容量都是有限的。
! d, J4 w/ p5 f$ y7 @: \  二、播放器框架
# J3 s& H( E3 ?# k7 `  对于一个播放器来说,需要包含如下几个模块:
0 [; G- j! y$ O4 x0 H  1、初始化模块
4 r1 i5 S1 _) M  |' Y) C  该模块中主要做一些初始化的工作,包括播放器实例的创建,消息机制和
; k7 ]6 e$ V1 w2 ~+ A0 [  线程的创建,以及相关全局变量的初始化。
/ [7 ~, H. z& k1 N  2、输入模块
' a  K# R$ |0 s' d4 m  输入模块包含请求流媒体数据和对流媒体数据进行分解(Demux)两个部分。
- ]0 z, a& q' ^: U/ m. W0 t/ I  对于移动直播,请求流媒体数据需要支持RTMP、HTTP和HLS协议。Demux模块需要支持诸如FLV、TS等格式的解析,并将分解后的音视频裸数据存放在相应的缓冲队列中,用于后续的解码。; t) E" q3 D* y: E0 q6 |3 }3 L
  3、解码模块2 C: T- b' e: |3 U/ W
  解码模块包含音频解码模块和视频解码模块,音视频解码需要分别在两个9 k6 t* A# I) {, U, ]# N. z- `% t
  线程中进行,从输入模块的缓冲队列中获取音视频裸数据,传入对应的解码器进行解码,并将解码后的音视频数据帧存入相应的队列中用于显示。其中解码可以采用软件解码和硬件解码两种方式:软件解码兼容性可容错性较好,但是耗CPU性能;硬件解码依赖于系统,Android采用MediaCodec(Android 4.1+),iOS采用VideoToolBox(iOS 8.0+)。兼容性和容错性较差,好处是不耗CPU。
0 L  R. X2 p3 l5 ]$ a( m& u  5、显示模块  o1 R/ s, y/ q9 Z7 [
  该模块主要将解码后的音视频数据帧展现出来。音频和视频的显示也是分别
1 n8 \6 B* K! ~% }% v- D7 _0 f  由两个线程来执行,分别从解码后的音视频帧队列中获取音视频帧进行播放,Android端音频可以用AudioTrack或OpenSL ES进行播放,视频可以用NativeWindow和Surface进行播放;iOS端音频可以用AudioQueue或AudioUnit进行播放,视频可以用OpenGL ES进行播放。
# d( y  w+ Y) O! j& x. E  6、事物处理模块# D7 [% @- F/ U- J% H
  该模块主要是对播放器进行一些逻辑控制,比如暂停,播放,seek,截图等操作,以及一些播放过程中一些消息的反馈。
4 P% g: ?& H% h# Q3 A   图片1.jpg 8 c/ J4 ~3 ?3 k, O* b9 S' l8 J
  图1 播放器框架
$ i( Q+ X. ~% p6 T$ N, F  三、说明' o3 Z: H# x0 D8 e! ?
  将上述6个模块有机的整合在一起,就可以完成一个播放器的开发,但是仅
1 Y- w5 ]) B0 ~) p6 Y+ B4 t5 W% ]  仅这些还是不够的。由于移动设备的特殊性,我们可能在播放过程中突然来电,查看QQ、微信等消息,完成这些后希望播放还能够继续。这就需要播放器能够对这些操作有相应的应对措施。有些用户希望APP切入后台还能够继续播放,有些则不需要,这都需要我们做出相应的处理。并且移动设备的内存和磁盘空间较小,需要我们保证播放器功能完善的前提下包大小尽可能的小,我们可以对各个模块中所用到的处理引擎进行裁剪,只保留我们所需的功能,这样我们就可以保证APP的轻量级。6 X1 z& j/ z8 h/ S" P9 \7 u: P
  综上所述,我们不仅要保证底层音视频引擎高效的运转,也要保证上层逻辑处理能够满足移动设备的特性,这样我们就可以打造出一款功能完善,兼容性好的播放器。" R8 [$ q9 ?; A% i: N: U$ N' U! A+ r

9 C2 R0 T* R8 j6 z9 S
学大数据 到大讲台
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 快速注册

本版积分规则

在线咨询|关于锋云|联系我们|手机版|投诉建议|版权声明|云计算|Hadoop|大数据|锋云网 ( 京ICP备13050990号 )

这是云计算时代的精英部落,这是中国最大的云计算社区 —— 锋云网(sharpcloud.cn)!

本站CDN/存储服务由本站CDN/存储服务由又拍云提供提供

Powered by Discuz! X3.2

© 2001-2015 Sharpcloud.cn

 

锋云网官方QQ群

中国云计算精英群(ID:64924638)中国云计算精英群      Hadoop技术交流群②(ID:25728812)Hadoop技术交流群②      Spark技术交流群(ID:413581066)Spark技术交流群

Hadoop技术交流群(ID:113156288,2000人群已满)

返回顶部