video標(biāo)簽
瀏覽器的video標(biāo)簽通常是接收一個src屬性,然后瀏覽器就會根據(jù)這個src屬性來自動加載視頻。
這個過程是瀏覽器來加載video的。
這種方式有什么問題嗎?
- mp4文件不能流式加載
- webm,flv,hls等格式兼容性問題
- 播放器ui太丑,一些常用的功能都沒有
- 清晰度切換,等一些操作需要重載視頻,比較慢而且還會黑屏
- 無法對視頻加密
請求video流視頻
我們可以通過設(shè)置responseType為arraybuffer來獲取視頻流,也可以通過range字段來獲取視頻流片段。比如
let xhr = new window.XMLHttpRequest();
xhr.responseType = 'arraybuffer'
xhr.open('get', 'http://www.w3school.com.cn/i/movie.mp4')
xhr.responseType = 'arraybuffer';
// xhr.setRequestHeader('Range', `bytes=0-390625`)
xhr.onload = function () {
if (xhr.status === 200 || xhr.status === 206) {
console.log(xhr.response)
}
}
xhr.send();
或者fetch的arrayBuffer方法返回視頻流。
fetch(videoUrl).then(function(response) {
return response.arrayBuffer();
})
獲取到的數(shù)據(jù)是什么呢?二進制的視頻流。
獲取這個有什么用呢?
video去播“流”
MediaSource
MediaSource簡稱mse,是h5的一個api,它允許通過js生成媒體流,讓瀏覽器播放。
使用
我們通過 URL.createObjectURL來創(chuàng)建一個blob格式的視頻文件,來給video標(biāo)簽播。
具體用法就是new MediaSource,然后根據(jù)這個MediaSource生成blob文件,然后向MediaSource中添加mime和視頻流。
<div class="a">
<video id="video" controls preload="auto"></video>
</div>
<script>
$(function() {
var video = document.querySelector('#video');
var mediaSource = new MediaSource();
video.src = URL.createObjectURL(mediaSource);
mediaSource.addEventListener('sourceopen', sourceOpen);
function sourceOpen(e) {
URL.revokeObjectURL(video.src);
// 設(shè)置 媒體的編碼類型
var mime = 'video/webm; codecs="vorbis,vp8"';
var mediaSource = e.target;
var sourceBuffer = mediaSource.addSourceBuffer(mime);
var videoUrl = 'http://localhost:9090/examples/mp4/video.webm';
fetch(videoUrl).then(function(response) {
console.log(response)
return response.arrayBuffer();
})
.then(function(arrayBuffer) {
sourceBuffer.addEventListener('updateend', function(e) {
if (!sourceBuffer.updating && mediaSource.readyState === 'open') {
mediaSource.endOfStream();
// 在數(shù)據(jù)請求完成后,我們需要調(diào)用 endOfStream()。它會改變 MediaSource.readyState 為 ended 并且觸發(fā) sourceended 事件。
video.play().then(function() {}).catch(function(err) {
console.log(err)
});
}
});
sourceBuffer.appendBuffer(arrayBuffer);
});
}
})
</script>
我們的mine是什么呢?
video/webm是視頻格式,codecs后面第一段是一些視頻編解碼的一些重要信息,諸如編碼方式、分辨率、幀率、碼率以及對解碼器解碼能力的要求。
第二段是關(guān)于音頻部分的信息。
![](/d/20211016/bc0f9f857f7f2b62af373805604d0a13.gif)
生成這樣的一個video標(biāo)簽。我們現(xiàn)在繞過了瀏覽器直接去請求src這一步,ajax請求視頻流,然后我們可以對視頻流進行處理,直接操作視頻流實現(xiàn)我們需要的各種功能。
但是對于mp4格式,是不支持流式加載的,所以只能通過我們自己操作流來實現(xiàn)流式播放。
播放器
公司同事研發(fā)了一款開源播放器,https://github.com/bytedance/xgplayer ,西瓜視頻好幾千萬dau的產(chǎn)品實測。
播放器原理
它是利用了流式處理視頻源,不僅僅是簡單的請求流然后交給video標(biāo)簽播放,它是請求視頻流然后用js解碼然后進行一些需要的操作,交給video播放。
為什么要用js解碼呢?
公司大部分視頻是mp4,怎么讓mp4支持流播放呢?我們把mp4的流拿過來,js解析出它的視頻信息,然后js轉(zhuǎn)換成支持視頻流的fmp4格式的文件。
它的優(yōu)勢是
- 解決了chrome不支持hls格式的問題(還有各種不支持格式的問題),因為我們是直接操作二進制視頻數(shù)據(jù),所以不存在video標(biāo)簽不支持的情況。
- 解決了切換清晰度重新刷新視頻的問題
- 對于mp4文件快進操作進行最小化的請求加載,讓它支持流式加載。
- 支持直播和彈幕
我們直接操作的視頻流,所以在對視頻進行清晰度切換,或者快進的時候,我們后計算當(dāng)前時間的流,然后用js加載視頻的新的流,從而進行最快的加載和響應(yīng)。
到此這篇關(guān)于html5用video標(biāo)簽流式加載的實現(xiàn)的文章就介紹到這了,更多相關(guān)html5用video標(biāo)簽流式加載內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持腳本之家!