Mengontrol geser, kemiringan, dan zoom kamera

Fitur geser, miring, dan zoom pada kamera pada akhirnya dapat dikontrol di web.

François Beaufort

Solusi konferensi video skala ruangan men-deploy kamera dengan kemampuan geser, miring, dan zoom (PTZ) sehingga software dapat mengarahkan kamera ke peserta rapat. Mulai Chrome 87, fitur geser, miring, dan zoom di kamera tersedia untuk situs yang menggunakan batasan jalur media di MediaDevices.getUserMedia() dan MediaStreamTrack.applyConstraints().

Menggunakan API

Deteksi fitur

Deteksi fitur untuk hardware berbeda dengan yang mungkin Anda gunakan. Kehadiran nama batasan "pan", "tilt", dan "zoom" di navigator.mediaDevices.getSupportedConstraints() memberi tahu Anda bahwa browser mendukung API untuk mengontrol PTZ kamera, tetapi tidak memberitahukan apakah hardware kamera mendukungnya. Mulai Chrome 87, kontrol PTZ kamera didukung di desktop, sedangkan Android masih hanya mendukung zoom.

const supports = navigator.mediaDevices.getSupportedConstraints();
if (supports.pan && supports.tilt && supports.zoom) {
  // Browser supports camera PTZ.
}

Minta akses PTZ kamera

Situs hanya diizinkan untuk mengontrol PTZ kamera jika pengguna secara eksplisit memberikan izin PTZ ke kamera melalui perintah.

Untuk meminta akses PTZ kamera, panggil navigator.mediaDevices.getUserMedia() dengan batasan PTZ seperti yang ditunjukkan di bawah ini. Tindakan ini akan meminta pengguna untuk memberikan izin kamera biasa dan kamera dengan PTZ.

Perintah pengguna PTZ kamera.

Promise yang ditampilkan akan diselesaikan dengan objek MediaStream yang digunakan untuk menampilkan streaming video kamera kepada pengguna. Jika kamera tidak mendukung PTZ, pengguna akan mendapatkan perintah kamera reguler.

try {
  // User is prompted to grant both camera and PTZ access in a single call.
  // If camera doesn't support PTZ, it falls back to a regular camera prompt.
  const stream = await navigator.mediaDevices.getUserMedia({
    // Website asks to control camera PTZ as well without altering the
    // current pan, tilt, and zoom settings.
    video: { pan: true, tilt: true, zoom: true }
  });

  // Show camera video stream to user.
  document.querySelector("video").srcObject = stream;
} catch (error) {
  // User denies prompt or matching media is not available.
  console.log(error);
}

Izin kamera yang sebelumnya diberikan, khususnya izin tanpa akses PTZ, tidak otomatis mendapatkan akses PTZ jika tersedia. Hal ini berlaku meskipun kamera itu sendiri mendukung PTZ. Izin harus diminta lagi. Untungnya, Anda dapat menggunakan Permissions API untuk membuat kueri dan memantau status izin PTZ.

try {
  const panTiltZoomPermissionStatus = await navigator.permissions.query({
    name: "camera",
    panTiltZoom: true
  });

  if (panTiltZoomPermissionStatus.state == "granted") {
    // User has granted access to the website to control camera PTZ.
  }

  panTiltZoomPermissionStatus.addEventListener("change", () => {
    // User has changed PTZ permission status.
  });
} catch (error) {
  console.log(error);
}

Untuk mengetahui apakah browser berbasis Chromium mendukung PTZ untuk kamera, buka halaman about://media-internals internal dan lihat kolom "Pan-Tilt-Zoom" di tab "Video Capture". "pan tilt" dan "zoom" masing-masing berarti kamera mendukung "PanTilt (Absolut)" dan "Zoom (Absolut)" kontrol UVC. Kontrol UVC "PanTilt (Relative)" dan "Zoom (Relative)" tidak didukung di browser berbasis Chromium.

Halaman internal untuk men-debug dukungan kamera PTZ.

Kontrol PTZ kamera

Manipulasi kemampuan dan setelan PTZ kamera menggunakan pratinjau MediaStreamTrack dari objek stream yang diperoleh sebelumnya. MediaStreamTrack.getCapabilities() menampilkan kamus dengan kemampuan yang didukung dan rentang atau nilai yang diizinkan. Demikian pula, MediaStreamTrack.getSettings() menampilkan setelan saat ini.

Kemampuan dan setelan geser, miring, dan zoom hanya tersedia jika didukung oleh kamera dan pengguna telah memberikan izin PTZ ke kamera.

Mengontrol PTZ Kamera.

Panggil videoTrack.applyConstraints() dengan batasan lanjutan PTZ yang sesuai untuk mengontrol fungsi geser, miringkan, dan zoom kamera seperti yang ditunjukkan dalam contoh di bawah. Promise yang ditampilkan akan di-resolve jika berhasil. Jika tidak, permintaan akan ditolak jika :

• kamera dengan izin PTZ tidak diberikan.
• hardware kamera tidak mendukung batasan PTZ.
• halaman tidak terlihat oleh pengguna. Gunakan Page Visibility API untuk mendeteksi perubahan visibilitas halaman.

// Get video track capabilities and settings.
const [videoTrack] = stream.getVideoTracks();
const capabilities = videoTrack.getCapabilities();
const settings = videoTrack.getSettings();

// Let the user control the camera pan motion if the camera supports it
// and PTZ access is granted.
if ("pan" in settings) {
  const input = document.querySelector("input[type=range]");
  input.min = capabilities.pan.min;
  input.max = capabilities.pan.max;
  input.step = capabilities.pan.step;
  input.value = settings.pan;

  input.addEventListener("input", async () => {
    await videoTrack.applyConstraints({ advanced: [{ pan: input.value }] });
  });
}

if ("tilt" in settings) {
  // similar for tilt...
}
if ("zoom" in settings) {
  // similar for zoom...
}

Anda juga dapat mengonfigurasi penggeseran, kemiringan, dan zoom kamera dengan memanggil navigator.mediaDevices.getUserMedia() dengan beberapa nilai batasan ideal PTZ kamera. Hal ini berguna jika kemampuan PTZ kamera diketahui sebelumnya. Perhatikan bahwa batasan wajib (min, maks, persis) tidak diizinkan di sini.

const stream = await navigator.mediaDevices.getUserMedia({
  // Website asks to reset known camera pan.
  video: { pan: 0, deviceId: { exact: "myCameraDeviceId" } }
});

Taman bermain

Anda dapat mencoba API tersebut dengan menjalankan demo di Glitch. Pastikan untuk memeriksa kode sumbernya.

Tips: Jika tidak memiliki kamera yang mendukung PTZ, Anda dapat menjalankan Chrome dengan tombol --use-fake-device-for-media-stream untuk menyimulasikan PTZ di komputer. Selamat menikmati!

Pertimbangan Keamanan

Penulis spesifikasi telah mendesain dan menerapkan API ini menggunakan inti termasuk kontrol pengguna, transparansi, dan ergonomi. Kemampuan untuk menggunakan API ini terutama dibatasi oleh model izin yang sama dengan Media Capture dan Streams API. Sebagai respons terhadap perintah pengguna, situs diizinkan untuk mengontrol PTZ kamera hanya saat halaman terlihat oleh pengguna.

Kompatibilitas browser

MediaStream API

Dukungan Browser

• 55
• 12
• 15
• 11

Sumber

Permissions API

Dukungan Browser

• 43
• 79
• 46
• 16

Sumber

Page Visibility API

Dukungan Browser

• 33
• 12
• 18
• 7

Sumber

MediaDevices.getUserMedia()

Dukungan Browser

• 53
• 12
• 36
• 11

Sumber

MediaDevices.getSupportedConstraints()

Dukungan Browser

• 53
• 12
• 44
• 11

Sumber

MediaStreamTrack.applyConstraints()

Dukungan Browser

• 59
• 12
• 43
• 11

Sumber

MediaStreamTrack.getCapabilities()

Dukungan Browser

• 59
• 12
• 132
• 11

Sumber

MediaStreamTrack.getSettings()

Dukungan Browser

• 59
• 12
• 50
• 11

Sumber

Link bermanfaat

• Penjelasan PTZ
• Draf spesifikasi
• Repositori GitHub
• Entri ChromeStatus
• Bug pelacakan Chrome

Ucapan terima kasih

Artikel ini ditinjau oleh Joe Medley dan Thomas Steiner. Terima kasih kepada Rijubrata Bhaumik dan Eero Häkkinen di Intel atas karya mereka terkait spesifikasi dan implementasi. Gambar hero oleh Christina @ wocintechchat.com di Unsplash.