iOS 视频播放流程及原理

笔者iOS开发工程师，现在很多应用场景下都会用到视频播放技术，当然iOS APP也不例外，这是写这篇文章的背景。

成都创新互联长期为上1000家客户提供的网站建设服务，团队从业经验10年，关注不同地域、不同群体，并针对不同对象提供差异化的产品和服务；打造开放共赢平台，与合作伙伴共同营造健康的互联网生态环境。为七台河企业提供专业的成都做网站、成都网站制作，七台河网站改版等技术服务。拥有10多年丰富建站经验和众多成功案例,为您定制开发。

最近我一个同样做iOS工程师的同学说他最近面试了一个人，简历里写着做过视频播放，就问他基本的视频播放原理是什么，结果此人一脸懵逼状什么也没答上来，只是说会用iOS SDK下调用视频播放的几个API。我同学跟我说他就是想问问此人计算机基础怎么样，其实只要应聘者能说出“解码”两个字都会让他满意的，可惜他却什么也没说出来。这又让笔者想起几年前临近大学毕业时同寝室友校招面试时也遇到了同样的问题，他也做过视频播放，人家就问他其中有两个问题，一是如果现在有一种非常奇怪的格式的视频让你播放你该怎么办，他也是懵逼了。二是如果现在有一个1G的超大视频让你播放，你又该怎么办，他直接就傻了，面试自然折戟沉沙了。

事实上仅就iOS APP来讲，要想做出视频播放的功能来，的确是调用 AVFoundation 框架下几个常用的API就可以了，iOS 9 之前常用的是 MPMoviePlayerController ,ios 9 之后推荐使用流播放技术的 AVPlayer ，可是就像常说的API普通的程序员都会调，可是真正有专业基础和想进阶就要知其然还要知其所以然，有专业基础的和半路出家的程序员的最大区别也正在于此，这也就成了本片文章写作的契机，下面这些内容也是笔者整合了一些自己的一些积累，主要来源于我们有合作关系的一家叫保利威视的视频解决方案提供商，希望对大家有帮助，水平有限，有不足之处还请大家不吝赐教。

视音频技术主要包含以下几点：** 封装技术，视频压缩编码技术以及音频压缩编码技术。如果考虑到网络传输的话，还包括流媒体协议技术。**

视频播放器播放网上的视频文件，需要经过以下几个步骤：** 解协议，解封装，解码视音频，视音频同步**。如果播放本地文件则不需要解协议，为以下几个步骤：解封装，解码视音频，视音频同步。过程如图所示。

解协议的作用，就是将流媒体协议的数据，解析为标准的相应的封装格式数据。视音频在网络上传播的时候，常常采用各种流媒体协议，例如HTTP，RTMP，或是MMS等等。这些协议在传输视音频数据的同时，也会传输一些信令数据。这些信令数据包括对播放的控制（播放，暂停，停止），或者对网络状态的描述等。解协议的过程中会去除掉信令数据而只保留视音频数据。例如，采用RTMP协议传输的数据，经过解协议操作后，输出FLV格式的数据。

解封装的作用，就是将输入的封装格式的数据，分离成为音频流压缩编码数据和视频流压缩编码数据。封装格式种类很多，例如MP4，MKV，RMVB，TS，FLV，AVI等等，它的作用就是将已经压缩编码的视频数据和音频数据按照一定的格式放到一起。例如，FLV格式的数据，经过解封装操作后，输出H.264编码的视频码流和AAC编码的音频码流。

解码的作用，就是将视频/音频压缩编码数据，解码成为非压缩的视频/音频原始数据。音频的压缩编码标准包含AAC，MP3，AC-3等等，视频的压缩编码标准则包含H.264，MPEG2，VC-1等等。解码是整个系统中最重要也是最复杂的一个环节。通过解码，压缩编码的视频数据输出成为非压缩的颜色数据，例如YUV420P，RGB等等；压缩编码的音频 数据输出成为非压缩的音频抽样数据，例如PCM数据。

视音频同步的作用，就是根据解封装模块处理过程中获取到的参数信息，同步解码出来的视频和音频数据，并将视频音频数据送至系统的显卡和声卡播放出来。

iOS - 自定义视频播放器 -- (1)

如何将视频添加上自定义的渲染效果，并显示？

1、解码视频

2、获取视频帧

3、渲染视频帧

4、显示渲染后的视频帧

5、编码视频帧，生成新的视频

AVPlayer：驱动播放用例的中心阶层，是用于管理媒体资产的回放和定时的控制器对象

这里AVPlayer，我制作简单的播放，暂停，seek。并且添加上AVPlayerItemVideoOutput做一个视频帧输出的工作。

创建一个播放器

AVPlayerItemVideoOutput 获取视频帧

主要的核心工具是 AVPlayerItemVideoOutput ，这对象相当于一个视频解码工具，对它进行属性设置，可以获取视频中某一时刻的想要数据的 CVPixelBuffer 视频帧。

通过获取到的CVPixelBuffer，进行OPenGL自定义渲染显示。

外部需要开启一个定时器，来实时的进行画面的刷新。定时器时间可以根据视频的FPS来控制。

至此如何获取视频帧就可以了。

如何获取视频帧，这里都比较简单，都是通过系统层去实现功能。

主要注意的是：

1、AVPlayerItemVideoOutput的获取的数据格式定义，根据 需求设置RGBA还是YUV420的数据 。

2、AVPlayer使用seek时候，使用 精度比较高的方法 ，提高在seek时候的画面流畅度

3、获取的CVPixelBuffer 在Swift语言，不需要手动释放 。在OC上需要调用 CVPixelBufferRelease() 手动释放

Git Code：AVPlayer-Render

iOS 视频播放器的实现

最近工作之余, 写了一个视频播放器，输入要播放的视频资源地址，即可实现播放功能。

目前功能比较简单，支持锁屏、屏幕旋转等基础功能，后续会继续完善。。。

下面讲解下实现思路：

因 MediaPlayer/MediaPlayer.h 中 MPMoviePlayerController MP_DEPRECATED("Use AVPlayerViewController in AVKit.", ios(2.0, 9.0)) 在iOS9以后已经废弃，为了更好的兼容性，采用了 AVFoundation/AVFoundation.h 为技术实现方案。

框架在此就不讲解了，官网讲的比较清楚，不懂的可以查看官档。 - 戳这里

监听视频资源的加载状态, 根据不同的状态进行相应的操作。

更新视频资源的播放进度。

实现控制视图 QYPlayerControlView 的Delegate。 当控制视图进行了相应操作，事件被传递到该类中进行统一处理。

该类中还有对操作视图 显示/隐藏 的方法。

后续调整视频亮度、音量、进度等手势都需添加在该分类中，便于统一管理。

主要存放时间转换的分类 NSString+Custom 、常用宏 QYPlayerDefine 等工具类。

1). BaseViewController 中实现了控制屏幕旋转的系统方法，实现的控制器要继承自 BaseViewController 。

2). 在子控制器中实现如下方法。

此时屏幕旋转功能已经添加成功！

以上便是整个播放器的源码解析，具体的细节请查看源码。

源码放在GitHub上了，想查看的小伙伴可以 -戳这里。

千里之行，始于足下。

ios 开发视频播放器(仿照 优酷ios视频播放器)？

我觉得 进度条自己做的，根据影片信息中带的分隔位置标示进行显示

分享题目：ios视频播放器开发,ios上的视频播放器
网站路径：http://scyanting.com/article/dsccpji.html