短视频的首屏秒开优化
点播的首屏秒开方案也可以先参考一下直播中的首屏加载优化。
前置 metadata
播放器在网络点播场景下去请求 MP4 视频数据,需要先获取到文件的 metadata,解析出该文件的编码、帧率等信息后才能开始边下边播。如果 MP4 的 metadata 数据块被编码在文件尾部,这种情况会导致播放器只有下载完整个文件后才能成功解析并播放这个视频。对于这种视频,我们最好能够在服务端将其重新编码,将 metadata 数据块转移到靠近文件头部的位置,保证播放器在线请求时能较快播放。比如 FFmpeg 的下列命令就可以支持这个操作:
ffmpeg -i bad.mp4 -movflags faststart good.mp4
优化 FFmpeg 的播放参数
基于 FFmpeg 实现的播放器,在播放视频时都会调用到一个 avformat_find_stream_info
(libavformat/utils.c) 函数,该函数的作用是读取一定长度的码流数据,来分析码流的基本信息,为视频中各个媒体流的 AVStream 结构体填充好相应的数据。这个函数中做了查找合适的解码器、打开解码器、读取一定的音视频帧数据、尝试解码音视频帧等工作,基本上完成了解码的整个流程。在不清楚视频数据的格式又要做到较好的兼容性时,这个过程是比较耗时的,从而会影响到播放器首屏秒开。
在外部可以通过设置 probesize
和 analyzeduration
两个参数来控制该函数读取的数据量大小和分析时长为比较小的值来降低 avformat_find_stream_info
的耗时,从而优化播放器首屏秒开。但是,需要注意的是这两个参数设置过小时,可能会造成预读数据不足,无法解析出码流信息,从而导致播放失败、无音频或无视频的情况。所以,在服务端对视频格式进行标准化转码,从而确定视频格式,进而再去推算 avformat_find_stream_info
分析码流信息所兼容的最小的 probesize
和 analyzeduration
,就能在保证播放成功率的情况下最大限度地区优化首屏秒开。
在我们能控制视频格式达到标准化后,我们可以直接修改 avformat_find_stream_info
的实现逻辑,针对该视频格式做优化,进而优化首屏秒开。比如,你可以试试将函数中用到的一个变量 fps_analyze_framecount
初始化为 0 试试效果。
甚至,我们可以进一步直接去掉 avformat_find_stream_info
这个过程,自定义完成解码环境初始化。参见:VLC优化(1) avformat_find_stream_info 接口延迟降低 和 FFMPEG avformat_find_stream_info 替换。
对 avformat_find_stream_info
代码的分析,还可以看看这里:FFmpeg源代码简单分析:avformat_find_stream_info()。
选择合适的缓冲策略
在点播场景下,为了减少播放过程中的卡顿,通常会缓冲一定的数据后再解码播放,这是一种播放策略。
为了加快首屏播放速度,也可以选择降低首次缓冲的数据量。甚至在第一帧没有渲染出来的情况下,不做任何缓冲,有数据就直接塞给解码器解码播放。
在 iOS 平台上,使用系统的 AVPlayer 时,属性 automaticallyWaitsToMinimizeStalling
就是控制播放器缓冲策略的。当该值为 YES 时,AVPlayer 会努力尝试延迟开始播放,加载足够的数据来保证整个播放过程中尽量卡顿最少。这个接口在 iOS 10 及以上版本才开放,在 iOS 10 之前的版本,在播放 HLS 这种流媒体视频时,效果如同 automaticallyWaitsToMinimizeStalling
为 YES,播放基于文件的视频资源,包括通过网络传输的网络视频文件,则效果如同 automaticallyWaitsToMinimizeStalling
为 NO。
使用 HTTPDNS 加快建连
在现在的网络视频播放场景中,对视频资源的访问通常都要经过 CDN 网络进行内容分发和调度。如果调度得当,将访问资源时的节点调度到离得近、速度快的节点,会大大加快首屏播放。
这时候我们可以使用与 CDN 网络配套的 HTTPDNS 服务。HTTPDNS 使用 HTTP 协议进行域名解析,代替现有基于 UDP 的 DNS 协议,域名解析请求直接发送到相应的 HTTPDNS 服务器,从而绕过运营商的 Local DNS,能够避免 Local DNS 造成的域名劫持问题和调度不精准问题。
以 iOS 上的 AVPlayer 为例,当使用 HTTPDNS 时,可以用视频资源 URL 对应的 Host 向 HTTPDNS 请求节点 IP,然后用节点 IP 替换 URL 中的 Host 部分,再在 HTTP Header 里设置原 Host。这样即可通过 IP 直连的方式访问 HTTPDNS 返回的较优节点。
示例代码大致如下:
// 假设原视频 URL 是:http://www.example.com/abc.mp4
// 假设从 HTTPDNS 服务获取的 www.example.com 这个 Host 对应的 IP 是:192.168.1.1
// 那么处理后的 URL 是:http://192.168.1.1/abc.mp4
NSMutableDictionary *headers = [NSMutableDictionary dictionary];
[headers setObject:@"www.example.com" forKey:@"Host"];
NSURL *videoURL = [NSURL URLWithString:@"http://192.168.1.1/abc.mp4"];
AVAsset *asset = [AVURLAsset URLAssetWithURL:videoURL options:@{@"AVURLAssetHTTPHeaderFieldsKey": headers}];
AVPlayerItem *playerItem = [AVPlayerItem playerItemWithAsset:asset];
AVPlayer *player = [AVPlayer playerWithPlayerItem:playerItem];
这种方案在使用 HTTPS 时,是会失败的。因为 HTTPS 在证书验证的过程,会出现 domain 不匹配导致 SSL/TLS 握手不成功。这时候的方案参考 HTTPS(含SNI)业务场景“IP直连”方案说明 和 iOS HTTPS SNI 业务场景“IP直连”方案说明。
提升 CDN 命中率
通常 CDN 的缓存命中策略是与访问资源的 URL 有关。如果命中策略是 URL 全匹配,那么就要尽量保证 URL 的变化性较低。比如:尽量不要在 URL 的参数中带上随机性的值,这样会造成 CDN 缓存命中下降,从而导致不断回源,这样访问资源耗时也就增加了。当然这样就失去了一些灵活性。
CDN 方面其实可以提供一些配置策略,比如:根据域名可配置对其缓存命中策略忽略掉某些参数。这样就能保证一定的灵活性了。