Kurento 简介

WebRTC 媒体服务器

WebRTC 是一种开放源码技术，可以通过 JavaScript APIs 使web浏览器具有实时通信(Real-Time Communications, RTC)功能。它被认为是一种点对点技术，在这种技术中，浏览器可以直接通信，而不需要任何基础设施中介。这个模型足以创建基本的应用程序，但在它上面很难实现像组通信、媒体流录制、媒体广播或媒体转换等功能。出于这个原因，许多应用程序需要使用媒体服务器。

Peer-to-peer WebRTC approach vs. WebRTC through a media server

点对点WebRTC方法 vs. WebRTC通过媒体服务器

从概念上讲，WebRTC媒体服务器只是一种“多媒体中间件”（它位于通信节点的中间），媒体流量通过它从源移动到目的地。媒体服务器能够处理媒体流和提供不同类型包括组通信(分发媒体流从一个生产者到多个接收器，例如充当Multi-Conference Unit, MCU)、混合(将几个输入流转换为一个复合流)、转码(在不兼容的客户端之间适配编解码器和格式)、记录(节点间交换的媒体进行持久化存储)等等。

Typical WebRTC Media Server capabilities

典型的WebRTC媒体服务器功能

Kurento 媒体服务器

在Kurento架构的核心是一个名为 Kurento Media Server (KMS) 的媒体服务器。Kurento媒体服务器基于可插入的媒体处理功能，这意味着它所提供的任何功能都是可以被激活或停用的可插入模块。此外，开发人员可以无缝地创建额外的模块，可以动态扩展Kurento媒体服务器的新功能。

Kurento媒体服务器提供开箱即用的组通信、混合、转码、录音和播放功能。此外，它还为媒体处理提供了高级模块，包括计算机视觉、增强现实、alpha混合等。

Kurento Media Server capabilities

Kurento媒体服务器功能

Kurento API、客户端和协议

Kurento媒体服务器的功能由 Kurento API 公开给应用程序开发者。这个API是通过称为 Kurento Clients 的库实现的。Kurento为 Java 和 JavaScript 提供了两个客户端。如果你喜欢其他语言，你仍然可以直接使用 Kurento协议。该协议允许控制Kurento媒体服务器，它基于互联网标准，如 WebSocket 和 JSON-RPC。下图显示了如何在三种情况下使用Kurento客户端：

  • 直接在兼容 WebRTC 的浏览器中使用Kurento JavaScript客户端
  • 在Java EE应用服务器中使用Kurento Java客户端
  • 在Node.js服务器中使用Kurento JavaScript客户端
Connection of Kurento Clients (Java and JavaScript) to Kuento Media Server

将Kurento客户端（Java和JavaScript）连接到Kuento媒体服务器

这三种技术的完整示例在 教程 部分中有描述。

Kurento客户端的API基于 Media Element 的概念。媒体元素拥有特定的媒体功能。例如，称为 WebRtcEndpoint 的媒体元素具有发送和接收WebRTC媒体流的能力，称为 RecorderEndpoint 的媒体元素具有将其接收的任何媒体流录入文件系统的能力，FaceOverlayFilter 会检测交换的视频流上的人脸，并添加一个特定的覆盖图像在其上，等等。Kurento公开了一个丰富的媒体元素工具箱作为其API的一部分。

Some Media Elements provided out of the box by Kurento

Kurento提供的一些媒体元素

为了更好地理解这些概念，建议您查看 Kurento API 和 Kurento Protocol 部分。您还可以查看JavaDoc和JsDoc：

使用Kurento创建应用程序

从应用程序开发人员的角度来看，Media Elements 就像 Lego 一样：您只需要使用应用程序所需的元素，并按照所需的拓扑结构连接它们。在 Kurento 术语中，连接的媒体元素的图形称为 媒体管道(Media Pipeline)。 因此，在创建管道时，开发人员需要确定他们想要使用的功能（媒体元素）和拓扑结构，来确定哪些媒体元素向另外一些媒体元素提供媒体（连接性）。连接性是通过 connect 原语进行控制，暴露在所有 Kurento 客户端API 上。 这个原语总是在作为源的元素中调用，汇点元素作为下面模式的参数：

sourceMediaElement.connect(sinkMediaElement)

例如：如果要创建将 WebRTC流 录入文件系统的应用程序，则需要两个媒体元素： WebRtcEndpoint 和 RecorderEndpoint。 当客户端连接到应用程序时，您将需要实例化这些媒体元素，使得 WebRtcEndpoint （能够接收WebRTC流）接收到的流被馈送到 RecorderEndpoint （能够将媒体流记录到文件系统中）。 最后，您需要连接它们，以便前者接收到的流进入后者：

WebRtcEndpoint.connect(RecorderEndpoint)

为了简化WebRTC流在客户端的处理，Kurento 提供了一个名为 WebRtcPeer 的实用程序。 然而，标准的WebRTC API（getUserMedia 、 RTCPeerConnection 等）也可以用于连接到 WebRtcEndpoints。有关更多信息，请访问 教程 部分。

Simple Example of a Media Pipeline

媒体管道的简单示例