第8章：多媒体网络（Multimedia Networking）
一、导读
8.1 本章学习目标
多媒体应用（音频、视频）对网络提出了特殊要求：低延迟、低抖动、高带宽。本章讲解多媒体网络的关键技术：RTP 协议、流媒体服务、QoS 机制、以及 CDN 内容分发网络。
本章的核心学习目标包括：
- 理解多媒体网络的挑战：延迟、抖动、丢包
- 掌握 RTP 协议：实时传输协议
- 理解流媒体：DASH、HLS
- 掌握 QoS 机制：IntServ、DiffServ
- 理解 CDN：内容分发网络
8.2 为什么多媒体网络如此重要
视频和音频已经成为互联网流量的主体。理解多媒体网络的工作原理，对于开发音视频应用、优化用户体验至关重要。
二、核心概念详解
2.1 多媒体网络的挑战
2.1.1 延迟（Latency）
从发送方到接收方的总时间。对于实时应用（如语音通话），延迟应小于 150ms。
2.1.2 抖动（Jitter）
分组到达时间的变化。抖动会导致音频卡顿、视频花屏。
2.1.3 丢包（Packet Loss）
分组在网络中丢失。丢包会导致音频中断、视频马赛克。
2.2 RTP（实时传输协议）
RTP 为实时应用提供端到端的传输服务：
- 时间戳：用于恢复时钟
- 序列号：用于检测丢包和重排序
- 负载类型：标识编码格式
RTP 报文段格式：
+--------+--------+--------+--------+
| V=2 | P | X | CC | M | PT |
+--------+--------+--------+--------+
| 序列号 |
+--------+--------+--------+--------+
| 时间戳 |
+--------+--------+--------+--------+
| SSRC 标识符 |
+--------+--------+--------+--------+
| 载荷 |
+-----------------------------------+2.3 流媒体
2.3.1 DASH（动态自适应流）
DASH 将视频分成多个片段，每个片段有多个码率版本。客户端根据网络状况动态选择码率。
视频：
片段1：低码率、中码率、高码率
片段2：低码率、中码率、高码率
...2.3.2 HLS（HTTP Live Streaming）
Apple 推出的流媒体协议，原理与 DASH 类似。
2.4 VoIP（Voice over IP）
VoIP 将语音数字化并通过 IP 网络传输。
2.4.1 语音编码
- PCM：脉冲编码调制，64 kbps
- G.711：电话质量，64 kbps
- G.729：压缩语音，8 kbps
2.4.2 抖动缓冲
接收方使用抖动缓冲来平滑分组到达时间的变化。
2.5 QoS（服务质量）
QoS 机制保证网络应用的服务质量。
2.5.1 IntServ（集成服务）
端到端预留资源，保证服务质量。使用 RSVP 协议。
2.5.2 DiffServ（区分服务）
在分组头部标记 DSCP（区分服务码点），路由器根据标记进行优先级调度。
2.6 CDN（内容分发网络）
CDN 将内容缓存到边缘服务器，用户从最近的服务器获取内容。
2.6.1 CDN 架构
- 源服务器：存储原始内容
- 边缘服务器：缓存内容，服务用户
- 重定向服务器：将用户重定向到最近的边缘服务器
2.6.2 CDN 的优势
- 减少延迟
- 降低源服务器负载
- 提高可用性
三、重要知识点
3.1 音频质量指标
| 指标 | 含义 | 要求 |
|---|---|---|
| 采样率 | 每秒采样次数 | 8kHz（电话）、44.1kHz（CD） |
| 量化位数 | 每个采样的精度 | 8bit、16bit |
| 比特率 | 每秒数据量 | 64kbps、128kbps、320kbps |
3.2 视频质量指标
| 指标 | 含义 | 要求 |
|---|---|---|
| 分辨率 | 像素数量 | 720p、1080p、4K |
| 帧率 | 每秒帧数 | 24fps、30fps、60fps |
| 比特率 | 每秒数据量 | 1Mbps、5Mbps、20Mbps |
3.3 网络性能对多媒体的影响
| 应用 | 延迟要求 | 丢包容忍 | 带宽需求 |
|---|---|---|---|
| 语音通话 | <150ms | <5% | 64-128 kbps |
| 视频会议 | <200ms | <5% | 1-5 Mbps |
| 直播 | <2s | <1% | 2-10 Mbps |
| 点播 | 无要求 | <0.1% | 5-50 Mbps |
四、常见误区与难点
4.1 误区一："带宽越大，视频越清晰"
带宽只是因素之一，编码质量、分辨率、帧率等都影响视频质量。
4.2 误区二："丢包率 1% 不影响体验"
对于实时应用，1% 的丢包率可能导致明显的音频中断和视频花屏。
4.3 难点：理解自适应码率算法
自适应码率算法需要根据带宽、缓冲区、丢包率等多个因素动态调整码率，算法设计复杂。
五、实践应用
5.1 使用 ffmpeg 处理音视频
bash
# 转换格式
ffmpeg -i input.mp4 output.avi
# 调整码率
ffmpeg -i input.mp4 -b:v 2M output.mp4
# 提取音频
ffmpeg -i input.mp4 -vn output.mp35.2 使用 Wireshark 分析 RTP
启动 Wireshark，过滤 rtp
观察 RTP 报文段的格式
分析时间戳和序列号
5.3 使用 iperf 测试网络性能
bash
# 服务器端
iperf -s
# 客户端
iperf -c server_ip六、本章小结
第8章讲解了多媒体网络：
多媒体网络 面临延迟、抖动、丢包的挑战
RTP 为实时应用提供传输服务
流媒体 使用 DASH/HLS 实现自适应码率
QoS 机制保证服务质量
CDN 将内容缓存到边缘，减少延迟
后续章节将讲解网络安全。