RTCPeerConnection.addTrack() - Web API 接口参考 编辑

RTCPeerConnection 对象的addTrack()方法将一个新的媒体音轨添加到一组音轨中,这些音轨将被传输给另一个对等点。

注意:通过触发一个negotiationneeded事件,向连接添加一个跟踪将触发重新协商。详情请参见Starting negotiation in Signaling and video calling

语法

rtpSender = rtcPeerConnection.addTrack(track, stream...);

参数

track
一个MediaStreamTrack对象,表示要添加到对等连接的媒体轨道。
stream... 可选
一个或多个本地的MediaStream对象,该轨迹应添加到其中。

指定的track不一定已经是任何指定streams的一部分。相反,streams只是在连接的接收端将轨迹分组在一起的一种方式,以确保它们是同步的。在连接的本地端添加到相同流的任何轨道都将位于远程端相同的流上。

返回值

将用于传输媒体数据的RTCRtpSender对象。

注意:每个RTCRtpSender都与RTCRtpReceiver配对,组成RTCRtpTransceiver。关联的接收方处于静默状态(指示它不能发送数据包),直到或除非远程对等方向接收方添加一个或多个流。

异常

InvalidAccessError
指定的轨道(或它的所有底层流)已经是RTCPeerConnection的一部分。
InvalidStateError
RTCPeerConnection被关闭。

使用笔记

向多个流添加轨道

track参数之后,您可以选择指定一个或多个MediaStream对象来添加track。只有轨道从一个点发送到另一个点,而不是一个媒体流。由于流是特定于每个对等点的,因此指定一个或多个流意味着另一个对等点将在连接的另一端自动创建一个相应的流(或多个流),然后自动将接收到的轨道添加到这些流中。

无流承载的轨道

如果没有指定媒体流,则轨道是无流的。这是完全可以接受的,尽管要由远程对等点决定将轨道插入到哪个流(如果有的话)。当构建一个多类型的简单应用只有一个媒体流时,使用addTrack()是一个非常常用的办法。例如,如果您与远程对等点共享的只是带有音频轨道和视频轨道的单个流,那么您不需要管理流中的哪个轨道,所以您不妨让transceriver为您处理它。

下面是一个使用getUserMedia()从用户的摄像机和麦克风获取一个流,然后将流中的每条轨迹添加到对等连接,而不为每条轨迹指定一个流:

async openCall(pc) {
  const gumStream = await navigator.mediaDevices.getUserMedia(
                          {video: true, audio: true});
  for (const track of gumStream.getTracks()) {
    pc.addTrack(track);
  }
}

结果是一组没有流关联的跟踪被发送到远程对等点。远程对等点上的track事件的处理程序将负责决定将每个跟踪添加到哪个流中,即使这意味着只是将它们全部添加到同一个流中。ontrack方法如下:

let inboundStream = null;

pc.ontrack = ev => {
  if (ev.streams && ev.streams[0]) {
    videoElem.srcObject = ev.streams[0];
  } else {
    if (!inboundStream) {
      inboundStream = new MediaStream();
      videoElem.srcObject = inboundStream;
    }
    inboundStream.addTrack(ev.track);
  }
}

在这里,如果指定了流,则track事件处理程序将跟踪添加到事件指定的第一个流。否则,在第一次调用ontrack时,将创建一个新流并附加到视频元素,然后将音轨添加到新流中。从那时起,新的堆track被添加到这个流中。

你也可以为每个接收到的track创建一个新的流:

pc.ontrack = ev => {
  if (ev.streams && ev.streams[0]) {
    videoElem.srcObject = ev.streams[0];
  } else {
    let inboundStream = new MediaStream(ev.track);
    videoElem.srcObject = inboundStream;
  }
}

track与特定的stream相关联

通过指定一个流并允许RTCPeerConnection为您创建流,流的跟踪关联将由WebRTC基础设施自动为您管理。这包括对收发器的direction 的更改和被停止使用removeTrack()

例如,考虑应用程序可能使用的这个函数,通过RTCPeerConnection将设备的摄像头和麦克风输入流化为远程对等点:

async openCall(pc) {
  const gumStream = await navigator.mediaDevices.getUserMedia(
                          {video: true, audio: true});
  for (const track of gumStream.getTracks()) {
    pc.addTrack(track, gumStream);
  }
}

远程对等点然后可以使用一个看起来像这样的track事件处理程序:

pc.ontrack = ({streams: [stream]} => videoElem.srcObject = stream;

这将把视频元素的当前流设置为包含已添加到连接中的音轨的流。

重用发送方

这种方法可以返回一个新的RTCRtpSender,或者在非常特殊的情况下,返回一个尚未用于传输数据的现有的兼容发送方。兼容的可重用RTCRtpSender实例满足以下条件:

  • 没有与发送方关联的跟踪。
  • 与发送方关联的{domxref("RTCRtpTransceiver")}}有一个{domxref("RTCRtpReceiver")}},它的track属性指定了一个MediaStreamTrack它的kind与调用RTCPeerConnection.addTrack()时指定的track参数的kind相同。这确保了收发器只能处理音频或视频,而不能同时处理二者。
  • RTCRtpTransceiverstopped属性为false
  • 正在考虑的RTCRtpSender从未被用于发送数据。如果收发器的currentDirection 曾经是“sendrecv”或“sendonly”,发送方不能被重用。

如果所有这些条件都满足,发送方会被重用,这将导致现有RTCRtpSender和它的RTCRtpTransceiver发生这些变化:

  • RTCRtpSendertrack被设置为指定的track。
  • 发送方的相关流集被设置为传递到这个方法的流列表,stream…
  • 关联的RTCRtpTransceiver更新了它的当前方向,包括发送;如果它的当前值是“recvonly”,它就变成“sendrecv”,如果它的当前值是“inactive”,它就变成“sendonly”。

新发送方

如果现有的发送方不存在可重用,则创建一个新的发送方。这也会导致必须存在的关联对象的创建。创建新发送方的过程会导致以下更改:

  • 使用指定的trackstreams集创建新的RTCRtpSender
  • RTCRtpReceiver被创建,新MediaStreamTrack作为它的track 属性(不是调用addTrack()时指定作为参数的track)。这跟踪的kind设置为与作为输入参数提供的音轨类型匹配。
  • 将创建一个新的RTCRtpTransceiver,并与新的发送方和接收方关联。
  • 新的transceiverdirection设置为"sendrecv"。
  • 新的transceiver被添加到RTCPeerConnection的收发器集合中。

实例

这个例子是从文章中给出的Signaling and video calling及其相应的示例代码中提取的。它来自那里的handleVideoOfferMsg()方法,该方法在从远程对等方接收到报价消息时被调用。

var mediaConstraints = {
  audio: true,            // We want an audio track
  video: true             // ...and we want a video track
};

var desc = new RTCSessionDescription(sdp);

pc.setRemoteDescription(desc).then(function () {
  return navigator.mediaDevices.getUserMedia(mediaConstraints);
})
.then(function(stream) {
  previewElement.srcObject = stream;

  stream.getTracks().forEach(track => pc.addTrack(track, stream));
})

这段代码获取从远程对等方接收到的SDP,并构造一个新的RTCSessionDescription传递到setRemoteDescription()。成功之后,它使用mediadevic. getusermedia()获得对本地摄像头和麦克风的访问。

如果成功,结果流将被分配为变量previewElement引用的<video>元素的源。

最后一步是开始通过对等连接向调用者发送本地视频。通过遍历MediaStream.getTracks()返回的列表,并将它们与作为其组件的流一起传递给addTrack(),从而在流中添加每条跟踪。

技术规范

SpecificationStatusComment
WebRTC 1.0: Real-time Communication Between Browsers
RTCPeerConnection.addTrack()
Candidate RecommendationInitial specification.

浏览器支持

BCD tables only load in the browser

The compatibility table on this page is generated from structured data. If you'd like to contribute to the data, please check out https://github.com/mdn/browser-compat-data and send us a pull request.

参考

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。
列表为空,暂无数据

词条统计

浏览:111 次

字数:15832

最后编辑:7年前

编辑次数:0 次

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文