## 一、监控设备的国标GB28181协议直播流程

### 1.1 fastbee平台监控设备交互流程

```mermaid
%%{init: {"theme": "base", "themeVariables": {"background": "transparent", "primaryColor": "#edf4ff", "primaryTextColor": "#1f2937", "primaryBorderColor": "#536dfe", "lineColor": "#334155", "textColor": "#1f2937", "actorBkg": "#edf4ff", "actorBorder": "#536dfe", "actorTextColor": "#1f2937", "signalColor": "#334155", "signalTextColor": "#1f2937", "sequenceNumberColor": "#1f2937", "activationBkgColor": "#dbeafe", "activationBorderColor": "#536dfe", "noteBkgColor": "#fff7ed", "noteTextColor": "#1f2937", "noteBorderColor": "#f59e0b"}}}%%
sequenceDiagram
  autonumber
  participant D as 设备
  participant F as FastBee
  participant Z as ZLMediaKit
  participant P as 播放器
  F->>Z: 调用 openRtpServer 创建 RTP 服务
  Z-->>F: 返回 RTP 推流端口
  F->>D: INVITE（携带 SDP）
  D-->>F: 100 Trying
  D-->>F: 200 OK（携带 SDP）
  F->>D: ACK
  D->>Z: 推送 RTP 流
  Z-->>F: onPublish / onStreamChanged Hook
  P->>Z: 拉取 FLV 直播流
  Z-->>F: onPlay Hook
```

#### 1.流程描述如下

a. fastbee平台调用zlmediakit的接口 /index/api/openRtpServer，创建rtp服务器，并将rtp推流端口返回，填入Invite消息中的sdp信息

b. fastbee平台(SIP服务器)向设备发送Invite消息，消息头域中携带 Subject 字段，表明点播的视频源ID、发送方媒体流序列号、媒体流接收者ID、接收端媒体流序列号等参数，SDP消息体中s字段为“Play”代表实时点播

c. 设备收到fastbee平台(SIP服务器)的Invite请求后，先回复 100 Trying 响应，再回复 200 OK 响应,携带SDP消息体，消息体中描述了设备发送媒体流的IP、端口、媒体格式、SSRC字段等内容

d. fastbee平台(SIP服务器)收到设备返回的 200 OK 响应后，向设备发送 ACK 请求，请求中不携带消息体，完成与设备的 Invite 会话建立过程。

e. 设备向zlmediakit创建的rtp服务器推流

f. zlmediakit通过onPublish hook api 通知fastbee平台流已经发布和推流鉴权，fastbee平台响应需要开启拉流协议和流配置等信息。zlmediakit通过onStreamChanged hook api 通知fastbee平台不同协议推流器流注册状态

g. 播放器根据设置的默认播放地址拉取flv直播流

h. zlmediakit通过onPlay hook api 通知fastbee平台播放器开始播放和播放鉴权

### 1.2 主要问题出现的步骤

· 步骤b,c,d中数据包没有按照标准协议格式，导致直播会话建立出问题\
· zlmediakit配置有问题，检查api http/https端口（8082,8443）,rtp收流端口（udp 30000-30100），https证书等\
· 设备和服务器连通性是否正常，设备的sip包->服务器java 5061，设备rtp推流->zlmediakit 30000-30100,不通将导致步骤e设备推流失败\
· hook api配置是否正确，java应用部署在容器中，hook api为：java:8080, java应用在idea中启动，zlmediakit服务器在本机docker中启动，hook api为：host.docker.internal:8080 配置不正确将导致步骤f，h中回调接口出问题

### 1.3 抓包截图

<img alt="1.3 抓包截图" src="./images/video/video40.png" style="border:1px solid #ccc;border-radius:6px;margin:8px 0;" loading="lazy" />

### 1.4 GB28181标准直播协议流程

```mermaid
%%{init: {"theme": "base", "themeVariables": {"background": "transparent", "primaryColor": "#edf4ff", "primaryTextColor": "#1f2937", "primaryBorderColor": "#536dfe", "lineColor": "#334155", "textColor": "#1f2937", "actorBkg": "#edf4ff", "actorBorder": "#536dfe", "actorTextColor": "#1f2937", "signalColor": "#334155", "signalTextColor": "#1f2937", "sequenceNumberColor": "#1f2937", "activationBkgColor": "#dbeafe", "activationBorderColor": "#536dfe", "noteBkgColor": "#fff7ed", "noteTextColor": "#1f2937", "noteBorderColor": "#f59e0b"}}}%%
sequenceDiagram
  autonumber
  participant R as 媒体流接收者
  participant S as SIP 服务器
  participant M as 媒体服务器
  participant T as 媒体流发送者
  R->>S: INVITE（携带 SDP）
  S->>M: INVITE
  M-->>S: 200 OK（携带 SDP）
  S->>T: INVITE（携带 SDP）
  T-->>S: 200 OK（携带 SDP）
  S->>M: ACK（携带 SDP）
  S->>T: ACK
  T-->>M: 实时媒体流
  S->>M: INVITE（携带 SDP）
  M-->>S: 200 OK（携带 SDP）
  S-->>R: 200 OK（携带 SDP）
  R->>S: ACK
  S->>M: ACK
  M-->>R: 实时媒体流
  R->>S: BYE
  S-->>R: 200 OK
  S->>M: BYE（关闭收流会话）
  M-->>S: 200 OK
  S->>M: BYE（关闭转发会话）
  M-->>S: 200 OK
  S->>T: BYE
  T-->>S: 200 OK
```

### 1.5 播放器url示例

#### 1.http 和 https

http协议下，server为：http://ip:port 例如：http://192.168.1.66:8082

https协议下，server为：`https://域名:port`，示例：`https://fastbee.cn:8443`（仅为格式示例，非在线服务地址）

#### 2.flv协议

播放url格式：server/rtp/流ID.live.flv\
示例：http://192.168.1.66:8082/rtp/gb\_play\_11010100001320000001\_11010100001320000001.live.flv

`https://fastbee.cn:8443/rtp/gb_play_11010100001320000001_11010100001320000001.live.flv`（仅为格式示例）

#### 3.fmp4协议

播放url格式：server/rtp/流ID.live.mp4\
示例：http://192.168.1.66:8082/rtp/gb\_play\_11010100001320000001\_11010100001320000001.live.mp4

`https://fastbee.cn:8443/rtp/gb_play_11010100001320000001_11010100001320000001.live.mp4`（仅为格式示例）

#### 4.rtmp协议

播放url格式：rtmp://ip:port/rtp/流ID

示例：rtmp://192.168.1.66:1935/rtp/gb\_play\_11010100001320000001\_11010100001320000001

#### 5.rtsp协议

播放url格式：rtsp://ip:port/rtp/流ID

示例：rtsp://192.168.1.66:554/rtp/gb\_play\_11010100001320000001\_11010100001320000001
