html5用video标签流式加载的实现


Posted in HTML / CSS onMay 20, 2020

video标签

浏览器的video标签通常是接收一个src属性,然后浏览器就会根据这个src属性来自动加载视频。
这个过程是浏览器来加载video的。

这种方式有什么问题吗?

  • mp4文件不能流式加载
  • webm,flv,hls等格式兼容性问题
  • 播放器ui太丑,一些常用的功能都没有
  • 清晰度切换,等一些操作需要重载视频,比较慢而且还会黑屏
  • 无法对视频加密

请求video流视频

我们可以通过设置responseType为arraybuffer来获取视频流,也可以通过range字段来获取视频流片段。比如

let xhr = new window.XMLHttpRequest();
xhr.responseType = 'arraybuffer'
xhr.open('get', 'http://www.w3school.com.cn/i/movie.mp4')
xhr.responseType = 'arraybuffer';
// xhr.setRequestHeader('Range', `bytes=0-390625`)
xhr.onload = function () {
    if (xhr.status === 200 || xhr.status === 206) {
        console.log(xhr.response)
    }
}
xhr.send();

或者fetch的arrayBuffer方法返回视频流。

fetch(videoUrl).then(function(response) {
       return response.arrayBuffer();
 })

获取到的数据是什么呢?二进制的视频流。
获取这个有什么用呢?

video去播“流”

MediaSource

MediaSource简称mse,是h5的一个api,它允许通过js生成媒体流,让浏览器播放。

使用

我们通过 URL.createObjectURL来创建一个blob格式的视频文件,来给video标签播。
具体用法就是new MediaSource,然后根据这个MediaSource生成blob文件,然后向MediaSource中添加mime和视频流。

<div class="a">
        <video id="video" controls preload="auto"></video>
    </div>
    <script>
        $(function() {
            var video = document.querySelector('#video');
            var mediaSource = new MediaSource();
            video.src = URL.createObjectURL(mediaSource);
            mediaSource.addEventListener('sourceopen', sourceOpen);

            function sourceOpen(e) {
                URL.revokeObjectURL(video.src);
                // 设置 媒体的编码类型
                var mime = 'video/webm; codecs="vorbis,vp8"';
                var mediaSource = e.target;
                var sourceBuffer = mediaSource.addSourceBuffer(mime);
                var videoUrl = 'http://localhost:9090/examples/mp4/video.webm';
                fetch(videoUrl).then(function(response) {
                        console.log(response)
                        return response.arrayBuffer();
                    })
                    .then(function(arrayBuffer) {
                        sourceBuffer.addEventListener('updateend', function(e) {
                            if (!sourceBuffer.updating && mediaSource.readyState === 'open') {
                                mediaSource.endOfStream();
                                // 在数据请求完成后,我们需要调用 endOfStream()。它会改变 MediaSource.readyState 为 ended 并且触发 sourceended 事件。
                                video.play().then(function() {}).catch(function(err) {
                                    console.log(err)
                                });
                            }
                        });
                        sourceBuffer.appendBuffer(arrayBuffer);
                    });
            }
        })
</script>

我们的mine是什么呢?
video/webm是视频格式,codecs后面第一段是一些视频编解码的一些重要信息,诸如编码方式、分辨率、帧率、码率以及对解码器解码能力的要求。
第二段是关于音频部分的信息。

html5用video标签流式加载的实现
 

生成这样的一个video标签。我们现在绕过了浏览器直接去请求src这一步,ajax请求视频流,然后我们可以对视频流进行处理,直接操作视频流实现我们需要的各种功能。
但是对于mp4格式,是不支持流式加载的,所以只能通过我们自己操作流来实现流式播放。

播放器

公司同事研发了一款开源播放器,https://github.com/bytedance/xgplayer ,西瓜视频好几千万dau的产品实测。

播放器原理

它是利用了流式处理视频源,不仅仅是简单的请求流然后交给video标签播放,它是请求视频流然后用js解码然后进行一些需要的操作,交给video播放。

为什么要用js解码呢?

公司大部分视频是mp4,怎么让mp4支持流播放呢?我们把mp4的流拿过来,js解析出它的视频信息,然后js转换成支持视频流的fmp4格式的文件。
它的优势是

  1. 解决了chrome不支持hls格式的问题(还有各种不支持格式的问题),因为我们是直接操作二进制视频数据,所以不存在video标签不支持的情况。
  2. 解决了切换清晰度重新刷新视频的问题
  3. 对于mp4文件快进操作进行最小化的请求加载,让它支持流式加载。
  4. 支持直播和弹幕

我们直接操作的视频流,所以在对视频进行清晰度切换,或者快进的时候,我们后计算当前时间的流,然后用js加载视频的新的流,从而进行最快的加载和响应。

到此这篇关于html5用video标签流式加载的实现的文章就介绍到这了,更多相关html5用video标签流式加载内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章,希望大家以后多多支持三水点靠木!

HTML / CSS 相关文章推荐
css3实现背景颜色渐变让图片不再是唯一的实现方式
Dec 18 HTML / CSS
css3气泡 css3关键帧动画创建的动态通知气泡
Feb 26 HTML / CSS
6种非常炫酷的CSS3按钮边框动画特效
Mar 16 HTML / CSS
CSS3使用transition属性实现过渡效果
Apr 18 HTML / CSS
纯CSS3+DIV实现小三角形边框效果的示例代码
Aug 03 HTML / CSS
一篇文章带你学习CSS3图片边框
Nov 04 HTML / CSS
HTML5 贪吃蛇游戏实现思路及源代码
Sep 03 HTML / CSS
HTML5不支持标签和新增标签详解
Jun 27 HTML / CSS
HTML5响应式(自适应)网页设计的实现
Nov 17 HTML / CSS
iphoneX 适配客户端H5页面的方法教程
Dec 08 HTML / CSS
Html5适配iphoneX刘海屏的简单实现
Apr 09 HTML / CSS
为什么你写的height:100%不起作用
May 10 HTML / CSS
video.js支持m3u8格式直播的实现示例
May 20 #HTML / CSS
video实现有声音自动播放的实现方法
May 20 #HTML / CSS
基于html5 canvas做批改作业的小插件
May 20 #HTML / CSS
video下autoplay属性无效的解决方法(添加muted属性)
May 19 #HTML / CSS
html2canvas生成的图片偏移不完整的解决方法
May 19 #HTML / CSS
html5简介及新增功能介绍
May 18 #HTML / CSS
Html5让容器充满屏幕高度或自适应剩余高度的布局实现
May 14 #HTML / CSS
You might like
c#中的实现php中的preg_replace
2009/12/21 PHP
实用PHP会员权限控制实现原理分析
2011/05/29 PHP
深入理解PHP几个算法:PHP冒泡、PHP二分法、PHP求素数、PHP乘法表
2013/06/06 PHP
解析PHP生成静态html文件的三种方法
2013/06/18 PHP
百度ping方法使用示例 自动ping百度
2014/01/26 PHP
DWZ+ThinkPHP开发时遇到的问题分析
2016/12/12 PHP
关于使用runtimeStyle属性问题讨论文章
2007/03/08 Javascript
设置下载不需要倒计时cookie(倒计时代码)
2008/11/19 Javascript
Prototype 学习 工具函数学习($方法)
2009/07/12 Javascript
c#+jquery实现获取radio和checkbox的值
2020/09/12 Javascript
jquery 设置style:display的方法
2015/01/29 Javascript
深入浅析同源策略和跨域访问
2015/11/26 Javascript
Bootstrap按钮下拉菜单组件详解
2016/05/10 Javascript
浅谈js中的in-for循环
2016/06/28 Javascript
微信小程序 实现tabs选项卡效果实例代码
2016/10/31 Javascript
nodejs实现的简单web服务器功能示例
2018/03/15 NodeJs
jQuery+css last-child实现选择最后一个子元素操作示例
2018/12/10 jQuery
vue如何实现自定义底部菜单栏
2019/07/01 Javascript
JS Thunk 函数的含义和用法实例总结
2020/04/08 Javascript
python通过装饰器检查函数参数数据类型的方法
2015/03/13 Python
Python  pip安装lxml出错的问题解决办法
2017/02/10 Python
Python简单的制作图片验证码实例
2017/05/31 Python
详解python3中tkinter知识点
2018/06/21 Python
使用 pytorch 创建神经网络拟合sin函数的实现
2020/02/24 Python
如何使用localstorage代替cookie实现跨域共享数据问题
2018/04/18 HTML / CSS
ALDO美国官网:加拿大女鞋品牌
2018/12/28 全球购物
城市轨道专业个人求职信范文
2013/09/23 职场文书
大学毕业生通用求职信
2013/09/28 职场文书
实用的简历自我评价
2014/03/06 职场文书
警察群众路线整改措施
2014/09/26 职场文书
对党的十八届四中全会的期盼
2014/10/17 职场文书
加强作风建设演讲稿
2014/10/24 职场文书
银行自荐信范文
2015/03/25 职场文书
朋友聚会祝酒词
2015/08/10 职场文书
2019年入党思想汇报
2019/03/25 职场文书
ORACLE中dbms_output.put_line输出问题的解决过程
2022/06/28 Oracle