分类：协议

OpenVidu：快速集成视频通话的利器
在当今数字化时代，实时视频通话已经成为许多应用的核心功能之一。无论是远程医疗、在线教育、客户服务，还是虚拟会议，视频通话的需求都在不断增加。今天，我要向大家介绍的是一款强大的开源平台——OpenVidu，它能帮助开发者快速且低成本地将视频通话功能集成到他们的应用中。

什么是 OpenVidu？

OpenVidu 是一个旨在简化视频通话集成的开源平台。它提供了一整套技术栈，方便开发者快速将实时通讯功能添加到他们的应用中。无论你是开发网页应用还是移动应用，OpenVidu 都能满足你的需求。

主要特性
1. WebRTC 视频会议：支持一对一、一对多以及多对多的各种组合，几乎可以实现你能想到的任何场景。
2. 开源：OpenVidu 是一个开源项目，使用 Apache License v2 许可证，完全免费。
3. 多平台兼容：支持 Chrome、Firefox、Safari、Opera、Edge、Android、iOS 以及桌面应用，所有这些平台都能相互兼容。
4. 易于使用：提供即用型组件，只需简单地粘贴代码即可快速实现视频通话。如果你需要更多的自定义，OpenVidu 的 API 也是非常简单且强大的。
5. 易于部署：支持在最流行的云服务提供商上进行快速部署，或是通过 Docker 进行本地部署，过程非常简便。
快速入门

开始使用 OpenVidu 非常简单。你可以参考 OpenVidu 文档中的“Getting started”部分，了解如何安装和配置 OpenVidu。以下是一些关键步骤：
1. 安装 OpenVidu Server：你可以选择在 AWS 上一键部署 OpenVidu，也可以使用 Docker 在本地部署。
2. 集成前端和后端：OpenVidu 提供了多种前端技术的示例，如 JavaScript、Angular、React、Vue.js 等。后端技术则包括 Java、Node.js 以及 REST API，方便你选择适合的技术栈。
开发你的视频应用

OpenVidu 提供了丰富的教程和示例，帮助你快速上手。以下是一些推荐的步骤：
1. 学习基础知识：文档中提供了“Hello World”示例，帮助你快速了解基本的 API 调用和使用方法。
2. 探索高级功能：你可以查看“Advanced features”部分，了解如何实现录制视频、屏幕共享、音视频滤镜等高级功能。
3. 使用现成组件：如果你希望快速实现某些功能，可以使用 OpenVidu 提供的即用型组件，如自定义 UI、自定义工具栏等。
安全性和隐私保护

OpenVidu 非常重视用户的隐私和安全。它通过 WebRTC 加密、服务器 API 和客户端基于角色的系统，确保所有通话内容都是完全私密的。此外，OpenVidu 还允许你限制客户端的能力，通过预定义角色来决定用户是否可以订阅、发布或管理视频流。

适用场景

OpenVidu 的应用场景非常广泛，包括但不限于以下几种：
- 客户服务：集成一对一视频通话中心，提供面对面的客户服务。
- 远程医疗：医生可以通过视频通话直接与患者进行交流，确保私密和安全。
- 在线教育：教师可以通过视频通话向学生讲解课程，支持多名学生同时在线。
- 会议服务：支持演讲者实时应用音视频滤镜，提高会议质量。
- 安防系统：接收来自安防摄像头的视频流，实现监控功能。
结语

无论你是想开发一个简单的视频聊天应用，还是一个复杂的视频会议系统，OpenVidu 都能提供强大的支持。它不仅简化了开发过程，还提供了丰富的功能和高水平的安全性，是你开发视频通话应用的不二选择。

更多详细信息和教程，请访问 OpenVidu 文档。

参考文献：
- OpenVidu 官方文档：https://docs.openvidu.io/en/stable/
2024 年 5 月 31 日

Adobe RTMP 规范：实时消息传递协议详解

Adobe 的实时消息传递协议（RTMP），是一种应用层协议，旨在通过适当的传输协议（如 TCP）多路复用和打包多媒体传输流（如音频、视频和交互内容）。以下是对 RTMP 规范的详细解析。

文档概述

文件状态

本文档是 2012 年 12 月 21 日发布的 “Adobe 的实时消息传递协议” 规范的机器可读版本。自 2012 年 PDF 版本以来，规范内容并未发生实质性变化，仅在格式和文字编辑上有所调整。

引言

RTMP 提供了在可靠的流传输（如 TCP）上的双向消息多路复用服务，旨在携带视频、音频和数据消息的并行流，并附带相关的时间信息。实现通常会为不同类别的消息分配不同的优先级，这会影响在传输容量受限时消息入队到底层流传输的顺序。

术语

MUST: 必须
REQUIRED: 必需
SHALL: 应该
SHOULD: 建议
MAY: 可以

贡献者

Rajesh Mallipeddi：原 Adobe Systems 编辑，提供了大部分原始文本。
Mohit Srivastava：Adobe Systems 贡献者。

定义

Payload: 包含在数据包中的数据，如音频样本或压缩视频数据。
Packet: 由固定头和负载数据组成的数据包。
Port: 传输协议用来区分主机内多个目的地的抽象。
Transport address: 用于识别传输层端点的网络地址和端口的组合。

字节顺序、对齐和时间格式

所有整数字段按网络字节顺序（大端序）传输。
时间戳以毫秒为单位，相对于一个未指定的纪元。

RTMP 块流

消息格式

消息格式应包含以下必要字段：

Timestamp: 消息的时间戳（4 字节）。
Length: 消息负载的长度（3 字节）。
Type ID: 消息类型 ID（1 字节）。
Message Stream ID: 消息流 ID（4 字节，小端序）。

握手

RTMP 连接从握手开始，客户端和服务器各发送相同的三个块（C0、C1、C2 和 S0、S1、S2）。

块化

在握手后，连接多路复用一个或多个块流。每个块流携带一种类型的消息。每个块都有唯一的块流 ID。块的传输顺序必须完整发送。接收端根据块流 ID 重新组装消息。

块格式

每个块由一个头和数据组成。头有三个部分：

Basic Header: 编码块流 ID 和块类型（1-3 字节）。
Message Header: 编码关于消息的信息（0、3、7 或 11 字节）。
Extended Timestamp: 编码完整的 32 位时间戳（0 或 4 字节）。

RTMP 消息格式

消息头

消息头包含以下字段：

Message Type: 消息类型（1 字节）。
Length: 负载大小（3 字节）。
Timestamp: 消息的时间戳（4 字节）。
Message Stream ID: 消息流 ID（3 字节）。

用户控制消息

RTMP 使用消息类型 ID 4 进行用户控制消息。这些消息包含 RTMP 流层使用的信息。

RTMP 消息类型

命令消息

携带客户端和服务器之间的 AMF 编码命令。命令消息有两个类型值：20 表示 AMF0 编码，17 表示 AMF3 编码。

数据消息

用于发送元数据或用户数据。类型值为 18（AMF0）和 15（AMF3）。

共享对象消息

用于管理多个客户端和服务器之间的分布式数据。类型值为 19（AMF0）和 16（AMF3）。

音频消息

用于发送音频数据，类型值为 8。

视频消息

用于发送视频数据，类型值为 9。

聚合消息

包含一系列RTMP 子消息的单一消息。类型值为 22。

消息交换示例

发布录制视频

此示例说明发布者如何发布流并将视频流发送到服务器。其他客户端可以订阅此发布的流并播放视频。

+--------------------+                     +-----------+
|  Publisher Client  |        |            |   Server  |
+----------+---------+        |            +-----+-----+
          |           Handshaking Done           |
          |                  |                  |
          |                  |                  |
---+---- |----- Command Message(connect) ----->|
   |     |                                     |
   |     |<----- Window Acknowledge Size ------|
Connect |     |                                     |
   |     |<------ Set Peer BandWidth ----------|
   |     |                                     |
   |     |------ Window Acknowledge Size ----->|
   |     |                                     |
   |     |<----- User Control(StreamBegin) ----|
   |     |                                     |
---+---- |<-------- Command Message -----------|
          |   (_result- connect response)       |
          |                                     |
---+---- |--- Command Message(createStream) -->|
Create |     |                                     |
Stream |     |                                     |
---+---- |<------- Command Message ------------|
          | (_result- createStream response)    |
          |                                     |
---+---- |---- Command Message(publish) ------>|
   |     |                                     |
   |     |<----- User Control(StreamBegin) ----|
   |     |                                     |
   |     |---- Data Message (Metadata) ------->|
Publishing|     |                                     |
Content   |     |------------ Audio Data ------------>|
   |     |                                     |
   |     |------------ SetChunkSize ---------->|
   |     |                                     |
   |     |<--------- Command Message ----------|
   |     |      (_result- publish result)      |
   |     |                                     |
   |     |------------- Video Data ----------->|
   |     |                  |                  |
   |     |                  |                  |
          |    Until the stream is complete     |
          |                  |                  |

广播共享对象消息

此示例说明在创建和更改共享对象期间交换的消息。它还说明了共享对象消息广播的过程。

+----------+                       +----------+
|  Client  |           |           |  Server  |
+-----+----+           |           +-----+----+
       |   Handshaking and Application    |
       |          connect done            |
       |                |                 |
       |                |                 |
       |                |                 |
       |                |                 |
Create and ---+---- |---- Shared Object Event(Use)---->|
connect       |     |                                  |
Shared Object |     |                                  |
---+---- |<---- Shared Object Event --------|
       |       (UseSuccess,Clear)         |
       |                                  |
---+---- |------ Shared Object Event ------>|
Shared object |     |         (RequestChange)          |
Set Property  |     |                                  |
---+---- |<------ Shared Object Event ------|
       |            (Success)             |
       |                                  |
---+---- |------- Shared Object Event ----->|
Shared object|     |           (SendMessage)          |
Message      |     |                                  |
Broadcast ---+---- |<------- Shared Object Event -----|
       |           (SendMessage)          |
                          |                 |
                          |                 |

从录制流发布元数据

此示例描述了发布元数据的消息交换。

+------------------+                       +---------+
| Publisher Client |         |             |   FMS   |
+---------+--------+         |             +----+----+
       |     Handshaking and Application     |
       |            connect done             |
       |                  |                  |
       |                  |                  |
---+--- |-- Command Messsage (createStream) ->|
Create |    |                                     |
Stream |    |                                     |
---+--- |<-------- Command Message -----------|
       |   (_result - command response)      |
       |                                     |
---+--- |---- Command Message (publish) ----->|
Publishing |    |                                     |
metadata |    |<----- UserControl (StreamBegin) ----|
from file |    |                                     |
          |    |---- Data Message (Metadata) ------->|
       |                                     |

参考文献

RFC0791: Postel, J., “Internet Protocol”, STD 5, RFC 791, September 1981.
RFC0793: Postel, J., “Transmission Control Protocol”, STD 7, RFC 793, September 1981.
RFC1982: Elz, R. and R. Bush, “Serial Number Arithmetic”, RFC 1982, August 199

2024 年 5 月 31 日

分类： 协议

OpenVidu：快速集成视频通话的利器

什么是 OpenVidu？

主要特性

快速入门

开发你的视频应用

安全性和隐私保护

适用场景

结语