video標(biāo)簽
瀏覽器的video標(biāo)簽通常是接收一個(gè)src屬性,然后瀏覽器就會(huì)根據(jù)這個(gè)src屬性來(lái)自動(dòng)加載視頻。
這個(gè)過(guò)程是瀏覽器來(lái)加載video的。
這種方式有什么問(wèn)題嗎?
- mp4文件不能流式加載
- webm,flv,hls等格式兼容性問(wèn)題
- 播放器ui太丑,一些常用的功能都沒(méi)有
- 清晰度切換,等一些操作需要重載視頻,比較慢而且還會(huì)黑屏
- 無(wú)法對(duì)視頻加密
請(qǐng)求video流視頻
我們可以通過(guò)設(shè)置responseType為arraybuffer來(lái)獲取視頻流,也可以通過(guò)range字段來(lái)獲取視頻流片段。比如
let xhr = new window.XMLHttpRequest();
xhr.responseType = 'arraybuffer'
xhr.open('get', 'http://www.w3school.com.cn/i/movie.mp4')
xhr.responseType = 'arraybuffer';
// xhr.setRequestHeader('Range', `bytes=0-390625`)
xhr.onload = function () {
if (xhr.status === 200 || xhr.status === 206) {
console.log(xhr.response)
}
}
xhr.send();
或者fetch的arrayBuffer方法返回視頻流。
fetch(videoUrl).then(function(response) {
return response.arrayBuffer();
})
獲取到的數(shù)據(jù)是什么呢?二進(jìn)制的視頻流。
獲取這個(gè)有什么用呢?
video去播“流”
MediaSource
MediaSource簡(jiǎn)稱mse,是h5的一個(gè)api,它允許通過(guò)js生成媒體流,讓瀏覽器播放。
使用
我們通過(guò) URL.createObjectURL來(lái)創(chuàng)建一個(gè)blob格式的視頻文件,來(lái)給video標(biāo)簽播。
具體用法就是new MediaSource,然后根據(jù)這個(gè)MediaSource生成blob文件,然后向MediaSource中添加mime和視頻流。
<div class="a">
<video id="video" controls preload="auto"></video>
</div>
<script>
$(function() {
var video = document.querySelector('#video');
var mediaSource = new MediaSource();
video.src = URL.createObjectURL(mediaSource);
mediaSource.addEventListener('sourceopen', sourceOpen);
function sourceOpen(e) {
URL.revokeObjectURL(video.src);
// 設(shè)置 媒體的編碼類型
var mime = 'video/webm; codecs="vorbis,vp8"';
var mediaSource = e.target;
var sourceBuffer = mediaSource.addSourceBuffer(mime);
var videoUrl = 'http://localhost:9090/examples/mp4/video.webm';
fetch(videoUrl).then(function(response) {
console.log(response)
return response.arrayBuffer();
})
.then(function(arrayBuffer) {
sourceBuffer.addEventListener('updateend', function(e) {
if (!sourceBuffer.updating && mediaSource.readyState === 'open') {
mediaSource.endOfStream();
// 在數(shù)據(jù)請(qǐng)求完成后,我們需要調(diào)用 endOfStream()。它會(huì)改變 MediaSource.readyState 為 ended 并且觸發(fā) sourceended 事件。
video.play().then(function() {}).catch(function(err) {
console.log(err)
});
}
});
sourceBuffer.appendBuffer(arrayBuffer);
});
}
})
</script>
我們的mine是什么呢?
video/webm是視頻格式,codecs后面第一段是一些視頻編解碼的一些重要信息,諸如編碼方式、分辨率、幀率、碼率以及對(duì)解碼器解碼能力的要求。
第二段是關(guān)于音頻部分的信息。
生成這樣的一個(gè)video標(biāo)簽。我們現(xiàn)在繞過(guò)了瀏覽器直接去請(qǐng)求src這一步,ajax請(qǐng)求視頻流,然后我們可以對(duì)視頻流進(jìn)行處理,直接操作視頻流實(shí)現(xiàn)我們需要的各種功能。
但是對(duì)于mp4格式,是不支持流式加載的,所以只能通過(guò)我們自己操作流來(lái)實(shí)現(xiàn)流式播放。
播放器
公司同事研發(fā)了一款開(kāi)源播放器,https://github.com/bytedance/xgplayer ,西瓜視頻好幾千萬(wàn)dau的產(chǎn)品實(shí)測(cè)。
播放器原理
它是利用了流式處理視頻源,不僅僅是簡(jiǎn)單的請(qǐng)求流然后交給video標(biāo)簽播放,它是請(qǐng)求視頻流然后用js解碼然后進(jìn)行一些需要的操作,交給video播放。
為什么要用js解碼呢?
公司大部分視頻是mp4,怎么讓mp4支持流播放呢?我們把mp4的流拿過(guò)來(lái),js解析出它的視頻信息,然后js轉(zhuǎn)換成支持視頻流的fmp4格式的文件。
它的優(yōu)勢(shì)是
- 解決了chrome不支持hls格式的問(wèn)題(還有各種不支持格式的問(wèn)題),因?yàn)槲覀兪侵苯硬僮鞫M(jìn)制視頻數(shù)據(jù),所以不存在video標(biāo)簽不支持的情況。
- 解決了切換清晰度重新刷新視頻的問(wèn)題
- 對(duì)于mp4文件快進(jìn)操作進(jìn)行最小化的請(qǐng)求加載,讓它支持流式加載。
- 支持直播和彈幕
我們直接操作的視頻流,所以在對(duì)視頻進(jìn)行清晰度切換,或者快進(jìn)的時(shí)候,我們后計(jì)算當(dāng)前時(shí)間的流,然后用js加載視頻的新的流,從而進(jìn)行最快的加載和響應(yīng)。
到此這篇關(guān)于html5用video標(biāo)簽流式加載的實(shí)現(xiàn)的文章就介紹到這了,更多相關(guān)html5用video標(biāo)簽流式加載內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持腳本之家!