移动端HTML5<video>视频播放优化实践[转]

http://www.xuanfengge.com/html5-video-play.html

遇到的挑战

移动端HTML5使用原生<video>标签播放视频,要做到两个基本原则,速度快和体验佳,先来分析一下这两个问题。

下载速度

以一个8s短视频为例,wifi环境下提供的高清视频达到1000kbps,文件大小大约1MB;非wifi环境下提供的低码率视频是500kbps左右,文件大小大约500KB;参考QzoneTouch多普勒测速,2g网络的平均速度是14KB/s,那么下载一个低码率视频耗时35s;那么要想流畅播放视频,就需要一个加载等待的过程,这个过程要有明确的反馈,不能让用户有“坏掉了”的感觉。

多普勒测速数据参考

# dns(s) conn(s) rtt(s) tran(kb/s)
2g 3.85785 2.33482 2.57478 14.0374
3g 1.60643 0.743109 0.608047 60.1967
wifi 0.986921 0.550208 0.444332 70.8728

用户体验

视频是否可以自动播放,是否能循环播放,是否能显示下载进度,播放的时候如何隐藏控制条,暂停的时候又能显示出来呢。这些问题看上去貌似简单,但是由于PC/iOS/Android这些不同平台、不同的浏览器内核、甚至相同内核的不同版本,所实现的<video>属性、方法和事件差异较大,解决兼容性问题又给开发造成了很大困扰。

分析原因

事件差异

下面是播放一个短视频,在不同平台触发事件和获取属性的差异表现。

PC

# event readyState currentTime (s) buffered (s) duration (s) 视频状态
1 loadstart NOTHING 0 - - -
2 suspend NOTHING 0 - - -
3 play NOTHING 0 - - -
4 waiting NOTHING 0 - - -
5 durationchange METADATA 0 5.35 7.91 获取到视频长度
6 loadedmetadata METADATA 0 0.66 7.91 获取到元数据
7 loadeddata ENOUGHDATA 0 0.66 7.91 -
8 canplay ENOUGH_DATA 0 0.66 7.91 -
9 playing ENOUGH_DATA 0 0.66 7.91 开始播放
10 canplaythrough ENOUGH_DATA 0 0.66 7.91 可以流畅播放
11 progress ENOUGH_DATA 0.11 3.68 7.91 持续下载
12 timeupdate ENOUGH_DATA 0.14 4.44 7.91 播放进度变化
23 progress ENOUGH_DATA 1.77 7.91 7.91 下载完毕
24 suspend ENOUGH_DATA 1.77 7.91 7.91 -
25 timeupdate ENOUGH_DATA 1.9 7.91 7.91 继续播放中
48 timeupdate ENOUGH_DATA 7.7 7.91 7.91 -
49 timeupdate ENOUGH_DATA 0 7.91 7.91 -
50 seeking METADATA 0 7.91 7.91 -
51 waiting METADATA 0 7.91 7.91 -
52 timeupdate ENOUGH_DATA 0 7.91 7.91 -
53 seeked ENOUGH_DATA 0 7.91 7.91 播放完毕进度回到起点
54 canplay ENOUGH_DATA 0 7.91 7.91 -
55 playing ENOUGH_DATA 0 7.91 7.91 循环播放
56 canplaythrough ENOUGH_DATA 0 7.91 7.91 -
57 timeupdate ENOUGH_DATA 0.19 7.91 7.91 -

iOS

# event readyState currentTime (s) buffered (s) duration (s) 视频状态
1 loadstart NOTHING 0 - - -
2 play NOTHING 0 - - -
3 waiting NOTHING 0 - - -
4 durationchange METADATA 0 - 7.91 获取到视频长度
5 loadedmetadata METADATA 0 - 7.91 获取到元数据
6 loadeddata ENOUGHDATA 0 - 7.91 -
7 canplay ENOUGH_DATA 0 7.91 7.91 -
8 canplaythrough ENOUGH_DATA 0 7.91 7.91 可以流畅播放
9 playing ENOUGH_DATA 0 7.91 7.91 开始播放
10 progress ENOUGH_DATA 0 7.91 7.91 下载完毕
11 suspend ENOUGH_DATA 0 7.91 7.91 -
12 timeupdate ENOUGH_DATA 0.02 7.91 7.91 播放进度变化
43 timeupdate ENOUGH_DATA 7.8 7.91 7.91 -
44 timeupdate ENOUGH_DATA 0 7.91 7.91 -
45 seeked ENOUGH_DATA 0 7.91 7.91 播放完毕进度回到起点
46 timeupdate ENOUGH_DATA 0.22 7.91 7.91 循环播放

Android

# event readyState currentTime (s) buffered (s) duration (s) 视频状态
1 loadstart NOTHING 0 - - -
2 play NOTHING 0 - - -
3 waiting NOTHING 0 0 - -
4 durationchange ENOUGH_DATA 0 0 0 -
5 durationchange ENOUGH_DATA 0 0 7.91 获取到视频长度
6 loadedmetadata ENOUGH_DATA 0 0 7.91 获取到元数据
7 loadeddata ENOUGHDATA 0 0 7.91 -
8 canplay ENOUGH_DATA 0 0 7.91 -
9 canplaythrough ENOUGH_DATA 0 0 7.91 -
10 playing ENOUGH_DATA 0 0 7.91 -
11 timeupdate ENOUGH_DATA 0 0 7.91 -
12 progress ENOUGH_DATA 0 3.57 7.91 下载中
13 timeupdate ENOUGH_DATA 0.2 6.89 7.91 开始播放
14 progress ENOUGH_DATA 0 7.91 7.91 下载完毕
49 timeupdate ENOUGH_DATA 7.79 7.91 7.91 -
50 progress ENOUGH_DATA 7.87 7.91 7.91 -
51 timeupdate ENOUGH_DATA 0 7.91 7.91 -
52 seeking ENOUGH_DATA 0 7.91 7.91 播放完毕进度回到起点
53 timeupdate ENOUGH_DATA 0 7.91 7.91 -
54 seeked ENOUGH_DATA 0 7.91 7.91 循环播放失败卡住了
55 progress ENOUGH_DATA 0 7.91 7.91 -
56 stalled ENOUGH_DATA 0 7.91 7.91 -

一些常用且需要重点关注的<video>事件

event iOS Android
****************** *********************************************** ***********************************************
play 只是要播放视频,响应的是video.play()方法,并不代表已经开始播放 和iOS一样,仅是响应video.play()方法
durationchange 会执行一次,一定会获取到视频的duration 可能会执行多次,只有最后一次才能获取到真实的duration,前面的duration都是0;但低版本Android可能获取到的duration是0或1;(本文提到的低版本Android大部分是4.1以下)
canplay 可以认为是视频元素没有问题,可以运行,没有更多含义了,基本用不上 同iOS
canplaythrough 会有明确的缓冲,表示可以流畅播放了; 没有什么用,视频仍然会卡住,数据可能还没有开始加载;
playing 明确表示播放开始了; 依然没有用,视频可能并没有开始播放;
progress 有明确的下载,可以获取到当前的buffer,并且全部下载完毕后不在触发; 不一定有明确的数据下载,并且全部下载完毕后依然继续触发;
timeupdate 会有明确的进度变化,可以获取到currentTime; 进度不一定变化,currentTime可能总是0,但是第一次有currentTime变化的timeupdate事件一定代表了视频开始播放了;
error iOS中会有明确的错误抛出; Android中某些浏览器会莫名其妙的抛出error;
stalled 网络状况不佳,导致视频下载中断; 在没有play之前,也可能会抛出该事件。

属性差异

attributes iOS android
****************** *********************************************** ***********************************************
poster 封面图片 支持,但是加载速度明显比在<img>中要慢; 不一定支持(浏览器厂商的实现标准不统一);
preload 预加载 iPhone不支持; 可能支持;
autoplay 自动播放 iPhone Safari中不支持,但在webview中可能被开启;iOS开发文档明确说明蜂窝网络下不允许autoplay; 可能支持;
loop 循环播放 支持 可能支持;
controls 控制条 支持,但是需要开始播放了才显示 基本都支持显示或者不显示
width和height 一定给出明确的属性设置,切不能为0; 如果不设置,仅仅通过CSS样式去控制视频大小,可能会导致标签失效。

其他怪异bug和不友好表现

iOS android
********************************************************* *********************************************************
物理位置覆盖在<video>区域上的元素,click和touch等事件会失效,比如一个<a>链接如果覆盖在<video>上,那么点击后没有任何效果。 -
iOS8.0+中,单页面播放视频超过16个,再播放的视频全部MediaError解码异常无法播放。 -
iPhone的Safari会弹出一个全屏的播放器来播放视频,iPad则支持内联播放。iOS7+ 如果webview(比如微信)开启了webview.allowsInlineMediaPlayback = YES;,可以通过设置webkit-playsinline属性支持内联播放; 支持内联播放,但某些厂商会用自己的播放器劫持原生的视频播放;
下载视频时,会先发送一个2字节的请求来获取视频元数据(比如时长),然后再不断的发送分包续传(206)请求来下载视频,抓包显示请求数和请求量至少有一倍的冗余(x2),这个严重的bug在iOS8中有明显的修复,但是分包的206请求仍然会有冗余数据的下载,浪费了流量。 比iOS的处理方式好,没有第一个2字节请求,没有流量损耗;
- 低版本Android(<=4.0.4)中,<video>如果在有相对和决定定位的层中,可能会导致整个页面错位。
- 某些浏览器厂商会劫持<video>,用其“自己”的播放器来播放视频,“破坏”了产品本身的播放体验,那么只能case by case的解决了。
加载视频时没有进度提示,视觉上看不出是播放完了还是卡住了; 加载视频时,大都会显示一个自带的loading UI(菊花)。

最佳实践

视频初始化

如果将一个<video>直接显示在页面中,那么就会看到各种五花八门的播放器初始效果;

这显然不是一个好的视觉体验,那么通常的做法是制作一个模拟的视频播放视图,比如一个封面加一个播放按钮。

而真实的<video>视频元素要隐藏起来,如何隐藏呢?最好不要用{display: none}或者{width:0;height:0;}的方式,因为这样视频元素会处于未激活的状态,给后续的处理带来麻烦。最佳的方式是将视频设置成1×1像素大小,放在视觉边缘的位置。

1

2

3

4

5

<!--iOS-->

<video webkit-playsinline width="1" height="1" class="vplayinside notaplink" x-webkit-airplay controls loop="loop" src="<%=src%>"></video>

<!--Android-->

<video width="1" height="1" controls loop="loop" src="<%=src%>"></video>

自动播放

autoplay的支持依赖内核和网络状况,比如iPhone在蜂窝网络下明确禁用了autoplay;

经过试验,在没有明确的用户操作的情况下,直接通过video.play()也是无法激活播放的;

并且在产品设计上,自动播放也不是一个舒服的用户体验,所以产品设计上尽量避免使用自动播放。

点击播放

之前提到,视频最好通过1px大小隐藏起来,那么这时如何触发播放呢?

经过试验,当在明确的用户操作(touch、click)时,通过这些用户行为事件的回调函数,用video.play()是可以触发视频播放的,那么能否在用户操作后,再去同步的创建和播放视频呢?答案是肯定的,这无疑是一个视频元素初始化的最佳实践,但是有些差异需要注意。

iOS6+

可以在用户的touch时间中动态创建并播放视频。

iOS < 6

可以在用户的touch时间中动态创建视频,但不能播放;要再追加一个click事件来启动播放;也就是说,给伪造的视频播放按钮同时绑定tap和click事件,在tap的时候创建,在之后300毫秒的click中去播放。

Android

大部分高版本Android可以像iOS6+那样去处理,但是低版本的不行,必须要通过click事件去传递video.play(),为了保持兼容,最好是用帮tap和click两个事件来分别完成视频的初始化和播放。

我们还发现,有些低版本Android中,无法通过video.play()来播放视频,必须有真实的用户点击视频元素才能播放;这种情况,有一个技巧就是在tap的时候初始化并放大视频覆盖在播放视图中,让300毫秒后的真实点击行为穿透点击在视频元素上来实现播放。

循环播放

如果视频需要循环播放,那么就增加loop属性,是否能循环播放就看浏览器是否支持了,因为还没有找到hack技巧来强制循环播放;

即使,在不支持循环播放的Android中,通过监听seeked事件知道了播放进度到了终点或起点暂停了,此时也无法通过video.play()来让视频重新播放。

监控下载进度

如何获取视频时长和已经下载的时长?

1

2

3

4

5

6

7

8

9

10

11

12

13

// 视频时长

var duration = video.duration

// 获取视频已经下载的时长

function getEnd(video) {

var end = 0

try {

end = video.buffered.end(0) || 0

end = parseInt(end * 1000 + 1) / 1000

} catch(e) {

}

return end

}

progress事件表示视频在加载,但是它的触发频率和时机并不规律,最佳做法是通过一个定时器去实时获取end,当end >= duration时,表示已经下载完毕,再终止定时器。

1

2

3

4

5

6

7

8

9

10

var timer = setInterval(function() {

var end = getEnd(video),

duration = video.duration

if(end < duration) {

return

}

clearInterval(timer)

}, 1000)

全部下载后再播放

假设播放短视频,如果网络不佳,会造成播放断断续续,在iOS中这种停顿还没有一个明确的等待提示,这不是一个好的体验,那么是否可以将视频全部下载完毕再播放呢?

在iOS中,可以在视频刚开始下载的时候马上暂停,此时下载还将继续,可以做一个loading的菊花告知视频正在加载,然后等到视频全部下载完再开始播放。

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

$(video).one(‘loadeddata‘, function() {

// 暂停,但下载还在继续

video.pause()

// 启动定时器检测视频下载进度

var timer = setInterval(function() {

var end = getEnd(video),

duration = video.duration

if(end < duration) {

return

}

var width = $(video).parent().width()

// 下载完了,开始播放吧

$(video).attr{

width: width,

height: width

}

video.play()

clearInterval(timer)

}, 1000)

})

缓冲播放——边下边播时,选择开始播放的最佳时间点

当视频越来越长或者网络慢时,等待视频全部下载完再播放也不是好的体验,最好能边下边播,缓冲到流畅状态就开始播放,那什么时候播放才是最佳时间点呢?

在iOS中,canplaythrough事件就是这个最佳时间点,它是通过动态计算缓冲量和下载速度得出的视频可以流畅播放的状态反馈。

canplaythrough event: The user agent estimates that if playback were to be started now, the media resource could be rendered at the current playback rate all the way to its end without having to stop for further buffering.

注意:下载完再播放和缓冲播放只适用于iOS。

统计播放时间和播放次数

要统计实际的播放时间,要累加timeupdate事件变化的时间,再减去中间可能暂停的时间。

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

$video.on(‘playing‘, function() {

// 开始播放是打点

$video.attr(‘data-updateTime‘, +new Date())

})

$video.on(‘pause‘, function() {

// 暂停播放时清除打点

$video.removeAttr(‘data-updateTime‘)

})

// 累加播放时间

$video.on(‘timeupdate‘, function(event) {

var $video = $(event.target),

updateTime = parseInt($video.attr(‘data-updateTime‘) || 0),

playingTime = parseInt($video.attr(‘data-playingTime‘) || 0),

times = parseInt($video.attr(‘data-times‘) || 0),

newtimes = 0,

video = $video.get(0),

duration = parseFloat($video.attr(‘data-duration‘) || 0),

now = +new Date()

// 播放时间

playingTime = playingTime + now - updateTime

// 播放次数

newtimes = Math.ceil(playingTime / 1000 / duration)

$video.attr(‘data-playingTime‘, playingTime)

$video.attr(‘data-updateTime‘, now)

})

异常处理

对error事件做详细的上报;

对stalled事件做统计上报,并提示用户网络慢等。

参考数据

微视触屏版iOS视频测速

网络环境 视频码率 获取到视频时长 时间点(s) 开始流畅播放 时间点(s) 全部下载完毕 时间点(s) 视频长度(s)
wifi 1000kbps 2.86 3.97 5.85 8.69
非wifi 500kbps 4.56 8 10.62 8.67

参考资料

时间: 2024-08-27 14:33:44

移动端HTML5<video>视频播放优化实践[转]的相关文章

移动端HTML5&lt;video&gt;视频播放优化实践

转帖: http://www.xuanfengge.com/html5-video-play.html 如果侵权请告知删除 遇到的挑战 移动端HTML5使用原生<video>标签播放视频,要做到两个基本原则,速度快和体验佳,先来分析一下这两个问题. 下载速度 以一个8s短视频为例,wifi环境下提供的高清视频达到1000kbps,文件大小大约1MB:非wifi环境下提供的低码率视频是500kbps左右,文件大小大约500KB:参考QzoneTouch多普勒测速,2g网络的平均速度是14KB/s

HW Video Acceleration in Chrome/Chromium HTML5 video 视频播放硬件加速

Introduction Video decode (e.g. YouTube playback) and encode (e.g. video chat applications) are some of the most complex compute operations on the modern web.  Moving these operations from software running on general-purpose CPUs to dedicated hardwar

移动端HTML5性能优化

[导读] 得益于智能手机的普及和各行各业互联网+的运动,移动端的市场占比疯狂增长. 2016年1月发布的2015年电商数据显示,2015年中国移动端网购交易额同比暴涨123 2%,在网购总交易额中的占比首次超越PC端达到55%. 技术上,HTML5大行其道: 1:有数据显示,截至2015,有80%的App全部或部分基于HTML5. 2:谷歌浏览器于9月1日起不在支持自动播放Flash. 3:亚马逊旗下网站(包括Amazon.com门户在内)的所有广告将不再使用flash.在可预见的未来,flas

HTML5前端(移动端网站)性能优化指南

HTML5是一种最新发布网页构架的普遍模型,是构建对程序.对用户都更有价值的数据驱动的Web的前端技术框架,它的价值在于融合CSS/javaScript/flash等众多前端开发技术,更多的体现在对交互的理解和视觉设计的还原上. HTML5框架可以提升网站的访问速度,通过优化前端将响应时间加快,使用户的等待时间减少,所谓前端是指在客户端通过浏览器发送了一个请求,除去后台系 统用户请求.执行数据查询并对结果进行组织所需要处理消耗的时间,在涌现的新技术中,JavaScript和一套新的API纯脚本技

jqm视频播放器,html5视频播放器,html5音乐播放器,html5播放器,video开发demo,html5视频播放示例,html5手机视频播放器

最近在论坛中看到了很多实用html5开发视频播放,音乐播放的功能,大部分都在寻找答案.因此我就在这里做一个demo,供大家相互学习.html5开发越来越流行了,而对于视频这一块也是必不可少的一部分.如何让你的网站占据优势,就要看你的功能和用户体验了.html5对video还是做了很多优惠的东西,我们使用起来很得心应手. 在过去 flash 是网页上最好的解决视频的方法,截至到目前还算是主流,像那些优酷之类的视频网站.虾米那样的在线音乐网站,仍然使用 flash 来提供播放服务.但是这种状况将会随

HTML5视频播放器accessible html5 video player

accessible html5 video player 是一款开源的轻量级播放器,采用HTML5视频播放技术,支持字幕显示.视频自由跳播.重播等功能.该html5视频插件由paypal Accessibility 团队开发,兼容所有Firefox.chrome.以及ie10以上版本等浏览器.ie9仅支持内部视频调用. 简洁清新的视频播放界面可以让你在很短的时间内喜欢上它,至少我是真的被它的界面吸引到了,有一点遗憾的是无法全屏,如果有知道的朋友可以向大家分享! accessible html5

Web视频播放 之 【HTML5 Video标签】

一.说明 HTML5中引入了video标签用于方便的在浏览器中播放视频,不在需要对flashPlayer进行依赖,更加轻量级.但在浏览器兼容.视频协议支持方面还有一些需要注意的问题. 二.浏览器兼容 html5 Video标签目前IE9+ 及 其他主流浏览器都能够支持. 对于IE8及以下的IE浏览器,可考虑引入html5扩展支持js来尝试解决,未亲测. 三.视频协议支持 支 持:Ogg.MPEG4.WebM 不支持:rtmp.rtsp(如果进行转码,切成HLS可以播放,但是即使在局域网内也有3秒

技术干货:实时视频直播首屏耗时400ms内的优化实践

本文由"逆流的鱼yuiop"原创分享于"何俊林"公众号,感谢作者的无私分享. 1.引言 直播行业的竞争越来越激烈,进过2018年这波洗牌后,已经度过了蛮荒暴力期,剩下的都是在不断追求体验.最近正好在做直播首开优化工作,实践中通过多种方案并行,已经能把首开降到500ms以下,借此机会分享出来,希望能对大家有所启发. 本文内容的技术前提: 1)基于FFmpeg的ijkplayer,最新版本0.88版本: 2)拉流协议基于http-flv. http-flv更稳定些,国内

移动端WEB前端开发最佳实践

移动端WEB前端开发最佳实践 Safari,Android Browser,Chrome都是以WebKit为核心的 移动设备和PC之间的页面现实存在差异(Safari中定义了viewport) 在移动设备和桌面端WEB前端开发中,事件绑定存在差异(移动触点) 页面控件设计存差异(点触不灵敏,虚拟键盘弹出框) 移动设备的网络带宽普遍比PC慢,移动页面要设置更简洁 PC页面兼容移动设备 使用流式布局 借助CSS Media queries(媒体查询)技术 使用合适的图片显示兼容方案 保持页面简洁,不