長久以來,在 Web 應用中捕捉影音訊息一直是開發的難題,過去我們多半得依賴瀏覽器插件。HTML5 帶來了許多能存取硬體裝置的 API,例如存取 GPS 的 Geolocation API、存取重力感測的 Orientation API、存取 GPU 的 WebGL API、處理音訊的 Web Audio API 等。這些 API 讓開發者能直接以 JavaScript 存取底層硬體。本文聚焦於能讓網頁應用存取使用者攝影機與麥克風的 navigator.getUserMedia() 方法。
為滿足在 Web 應用中存取本機裝置的需求,W3C 成立了 DAP(Device APIs Policy)工作小組來制定統一標準。最早的方案是擴充 type 為 file 的 input 元素,為 accept 屬性加入新值:
<input type="file" accept="image/*;capture=camera">
<input type="file" accept="video/*;capture=camcorder">
<input type="file" accept="audio/*;capture=microphone">
這種做法雖能完成拍照或錄影,卻難以進一步把捕捉到的畫面渲染到 canvas 或套用 WebGL 濾鏡,因此未獲廣泛採用。後來出現了 device 元素,以及最終被 WHATWG 採用的 navigator.getUserMedia() 方法,並隨著 WebRTC 的發展逐漸成熟。
function hasGetUserMedia() {
// 請注意:Opera 不使用前綴
return !!(navigator.getUserMedia || navigator.webkitGetUserMedia ||
navigator.mozGetUserMedia || navigator.msGetUserMedia);
}
getUserMedia 的第一個參數用來指定媒體類型:只要攝影機用 {video:true},同時要攝影機與麥克風則用 {video:true, audio:true}。
<video autoplay id="video"></video>
<script>
var onFailSoHard = function () { alert('設備拒絕訪問'); };
navigator.getUserMedia({video: true, audio: true}, function (localMediaStream) {
var video = document.getElementById('video');
video.src = window.URL.createObjectURL(localMediaStream);
// 注意:使用 getUserMedia 時,Chrome 不觸發 onloadedmetadata 事件
video.onloadedmetadata = function (e) { /* 後續代碼略 */ };
}, onFailSoHard);
</script>
這裡沒有直接使用 video 的 src 屬性,而是把代表攝影機影像的 LocalMediaStream 物件轉成 Blob URL 再指定給 video,並搭配 autoplay 讓畫面即時播放;若不加 autoplay,畫面會停在第一幀。
若要相容多個瀏覽器,可先統一函式與 URL 介面:
window.URL = window.URL || window.webkitURL;
navigator.getUserMedia = navigator.getUserMedia || navigator.webkitGetUserMedia ||
navigator.mozGetUserMedia || navigator.msGetUserMedia;
在部分瀏覽器中,呼叫 getUserMedia 時會跳出提示視窗,詢問使用者是否允許存取攝影機或麥克風,這是為了保護使用者隱私而設計的機制。
利用 Canvas 的 ctx.drawImage(video, 0, 0),就能把 video 目前的畫面輸出到 canvas,進而透過 canvas.toDataURL('image/png') 存成圖片,實現即時拍照:
function snapshot() {
if (localMediaStream) {
ctx.drawImage(video, 0, 0);
document.getElementById('img').src = canvas.toDataURL('image/png');
}
}
video.addEventListener('click', snapshot, false);
在支援的瀏覽器中,還能對 video 套用 CSS 濾鏡,為擷取的影像加上灰階、復古、模糊等效果:
.grayscale { -webkit-filter: grayscale(1); }
.sepia { -webkit-filter: sepia(1); }
.blur { -webkit-filter: blur(3px); }
再搭配 JavaScript 於點擊時切換 class,即可在 grayscale、sepia、blur、brightness、contrast、hue-rotate、saturate、invert 等多種效果間循環切換,讓即時影像多了許多有趣的玩法。