desktopCapturer
navigator.mediaDevices.getUserMediaAPIを使用して、デスクトップからの音声と映像のキャプチャに利用できるメディアソース関連の情報にアクセスします。
プロセス: メイン
以下の例では、タイトルが Electron であるデスクトップウインドウからビデオをキャプチャする方法を示します。
// main.js
const { app, BrowserWindow, desktopCapturer, session } = require('electron')
app.whenReady().then(() => {
const mainWindow = new BrowserWindow()
session.defaultSession.setDisplayMediaRequestHandler((request, callback) => {
desktopCapturer.getSources({ types: ['screen'] }).then((sources) => {
// 最初に見つけた画面へのアクセスを認可します。
callback({ video: sources[0], audio: 'loopback' })
})
// true ならば、利用可能な場合にシステムのピッカーを使用します。
// 注: 現在これは実験的なものです。 システムピッカーが
// 利用可能な場合はそれが使用され、メディアのリクエストハンドラ
// は呼び出されません。
}, { useSystemPicker: true })
mainWindow.loadFile('index.html')
})
// renderer.js
const startButton = document.getElementById('startButton')
const stopButton = document.getElementById('stopButton')
const video = document.querySelector('video')
startButton.addEventListener('click', () => {
navigator.mediaDevices.getDisplayMedia({
audio: true,
video: {
width: 320,
height: 240,
frameRate: 30
}
}).then(stream => {
video.srcObject = stream
video.onloadedmetadata = (e) => video.play()
}).catch(e => console.log(e))
})
stopButton.addEventListener('click', () => {
video.pause()
})
<!-- index.html -->
<html>
<meta http-equiv="content-security-policy" content="script-src 'self' 'unsafe-inline'" />
<body>
<button id="startButton" class="button">Start</button>
<button id="stopButton" class="button">Stop</button>
<video width="320" height="240" autoplay></video>
<script src="renderer.js"></script>
</body>
</html>
詳しくは navigator.mediaDevices.getDisplayMedia を参照してください。
navigator.mediaDevices.getDisplayMedia はソースの選択に deviceId を使用できません。このことについては 仕様 を参照してください。
メソッド
desktopCapturer モジュールには以下のメソッドがあります。
desktopCapturer.getSources(options)
戻り値 Promise<DesktopCapturerSource[]> - DesktopCapturerSource オブジェクトの配列で解決します。各 DesktopCapturerSource は、キャプチャできる画面または個々のウィンドウを表します。
[!NOTE] 画面コンテンツをキャプチャするには、macOS 10.15 Catalina 以降でのユーザーの同意が必要です。同意しているかどうかは
systemPreferences.getMediaAccessStatusで検知できます。
Caveats
Linux では、Pipewire を使用する場合 desktopCapturer.getSources(options) は単一のソースのみを返します。
PipeWire は、スクリーンとウインドウの両方に対して一つのキャプチャをサポートしています。 ウインドウとスクリーンのタイプを要求すると、選択したソースがウインドウキャプチャとして返されます。
macOS ではシステムオーディオへアクセスするアプリに 署名付きカーネル拡張機能 が必要であるという根本的な制限があるため、オーディオキャプチャのための navigator.mediaDevices.getUserMedia は機能しません。 Chrome、ひいては Electron はこれを提供していません。
Soundflower のような他の macOS アプリでシステムオーディオをキャプチャし、それを仮想オーディオ入力デバイスに渡すことでこの制限を回避することが可能です。 この仮想デバイスは、 navigator.mediaDevices.getUserMedia.を使用して照会できます。