RTCEncodedAudioFrame: getMetadata() Methode

Keine.

Ein Objekt mit den folgenden Eigenschaften:

synchronizationSource

Ein positiver Ganzzahlenwert, der die Synchronquelle ("ssrc") des Streams von RTP-Paketen angibt, die durch diesen Frame beschrieben werden. Eine Quelle könnte z. B. ein Mikrofon oder eine Mixer-Anwendung sein, die mehrere Quellen kombiniert. Alle Pakete von derselben Quelle teilen sich denselben Zeit- und Sequenzraum und können daher relativ zueinander geordnet werden. Beachten Sie, dass zwei Frames mit demselben Wert auf dieselbe Quelle verweisen.

payloadType

Ein positiver Ganzzahlenwert im Bereich von 0 bis 127, der das Format der RTP-Nutzlast beschreibt. Die Zuordnungen von Werten zu Formaten sind in RFC3550 definiert, insbesondere Abschnitt 6: Nutzlasttyp-Definitionen von RFC3551.

contributingSources

Ein Array von Quellen (ssrc), die zum Frame beigetragen haben. Betrachten Sie den Fall einer Konferenzanwendung, die Audio von mehreren Benutzern kombiniert. Die synchronizationSource würde das ssrc der Anwendung enthalten, während contributingSources die ssrc-Werte aller einzelnen Audioquellen enthalten würde.

sequenceNumber

Die Sequenznummer eines eingehenden Audioframes (nicht für ausgehende Frames verwendet), die zur Rekonstruktion der ursprünglichen Sendereihenfolge von Frames verwendet werden kann. Dies ist eine Zahl zwischen 0 und 32767. Beachten Sie, dass, obwohl die Nummern bei der Sendung sequentiell zugeordnet werden, sie bei 32767 überlaufen und wieder bei 0 beginnen. Um zwei Frame-Sequenznummern zu vergleichen, um festzustellen, ob eine nach der anderen angenommen wird, müssen Sie Seriennummern-Arithmetik verwenden.

Dieses Beispiel einer WebRTC-kodierten Transformation zeigt, wie Sie Metadaten eines Frames in einer transform()-Funktion abrufen und protokollieren könnten.

addEventListener("rtctransform", (event) => {
  const transform = new TransformStream({
    async transform(encodedFrame, controller) {
      // Get the metadata and log
      const frameMetaData = encodedFrame.getMetadata();
      console.log(frameMetaData);

      // Enqueue the frame without modifying
      controller.enqueue(encodedFrame);
    },
  });
  event.transformer.readable
    .pipeThrough(transform)
    .pipeTo(event.transformer.writable);
});

Das resultierende Objekt von einem lokalen Mikrofon könnte wie das unten gezeigte aussehen. Beachten Sie, dass es keine beitragenden Quellen gibt, da nur eine Quelle vorhanden ist, und keine sequenceNumber, da dies ein ausgehender Frame ist.

{
  "payloadType": 109,
  "synchronizationSource": 1876443470
}

• Verwendung von WebRTC-kodierten Transformationen