3.2. H.263视频信源编码算法
H.263 的视频信源编码框图与 H.261 相同，信源编码方法也类似，不同的是 H.263 输入有多种格式，输出为 H.263 码流。
为了适应低码率传输要求，并进一步提高图像质量， H.263+、 H.263++做了不少改进，增加了若干选项，现选择主要技术介绍如下：
（1）运动矢量， H.263 中 1 个 MB 可以使用 1 个运动矢量表示，也可以 4 个 8×8 块各使用 1 个运动矢量表示，提高运动估计精确性和压缩比。（H.261 规定每个 MB 使用 1 个运动矢量。）
（2）半像素预测， H.263 为进一步提高压缩比，采用半像素预测，而 H.261 采用整像素预测，预测精度明显低于 H.263。
（3）二维预测， H.263 采用二维预测， H.261 采用一维预测。
（4）非限制的运动矢量模式（选项）， H.263 的运动矢量范围允许指向图像帧之外。
（5）基于句法的算术编码（选项），显著降低码率，但复杂度比哈夫曼编码高。
（6）高级预测模式（选项）， H.263 除可以采用每个 8×8 块 1 个运动矢量，每个 16×16宏块 4 个运动矢量外，还采用 OBMC 运动补偿方式，以减少方块效应。
（7） PB 帧模式（选项）， PB 帧由 1 个 P 帧和 1 个 B 帧组成。 P 帧由前一帧预测而得。B 帧由双向（前向和后向）预测而得，分别用前向 MV、后向 MV、前后向 MV 平均进行运动补偿得 3 个预测误差，取其最小者作为 B 帧的预测误差进行编码。
4.MPEG-1标准
MPEG-1标准有如下功能：
（1） 视频压缩编码，压缩后码率在 1.5Mbps，可用于视频传输和视频存储；编码前必须将视频图像转换成逐行扫描图像。
（2）录像机的正放、图像冻结快进、快退和慢放功能以及随机存储功能。
4.1.图像格式
MPEG-1 定义了三种图像类型： I、 P、 B 图像。 I 图像即帧内（Intra）图像，采用帧内编码，不参考其它图像，但可作为其它类型图像的参考帧。 P 图像即预测（Predicted）图像，采用帧间编码，参考前一幅 I 或 P 图像，用作运动补偿。 B 图像即双向预测（Bi- predicted）图像，参考前后两个方向图像。 I、 P、 B 图像之间的显示顺序如下图所示
双向预测编码可解决“暴露”问题， 即某物体在前一帧未显示出来，但在后一帧却“暴露”出来，双向预测能更准确地找出运动矢量，并只有在视频存储、 VOD 等非实时通信及数字广播电视中应用。 会议电视、可视电话等实时通信中不宜应用 B 图像，因为实时通信后一帧处在当前帧之后，当前帧编码时它尚未出现。
4.2.编码结构
MPEG-1 编码结构类似 H.261，也采用分层结构，但有所不同，MPEG-1 多出片层（切片或 slice 层），用于防止误码在一帧内地扩散。
MPEG-1编码器和 H.261 并无多大区别，但需考虑双向预测编码和解码。解码时先将恢复图像存在缓存中，以显示顺序显示。
5.MPEG-2标准
MPEG-2 标准包括系统、视频、音频及符合性（检验和测试视音频及系统码流） 4 个文件。
5.1.MPEG-2编码复用系统
MPEG-2 码流分为三层，即基本流（ES， elementary bit stream）、包基本码流（PES， packetelementary stream）和复用后的传送码流（TS， transport stream）、节目码流（PS， programstream）。其编码复用系统结构如下图所示。
ES：由视频压缩编码后的视频基本码流（Video ES）和音频压缩编码后的音频基本码流（Audio ES）组成。
PES：把视音频 ES 分别打包，长度可变，最长为 216 字节。
TS、 PS：若干个节目的 PES 复用后输出为传输流 TS 和节目流 PS，分别用于传输和存储。
5.2.档次和级别
MPEG-2 按不同的压缩比分成五个档次，按视频清晰度分为四个级别
5.3.MPEG-2视频编解码器
MPEG-2 编解码器结构与 H.261 区别不大
5.4.ES码流结构
ES 码流采用图像序列（PS）、图像组（GOP）、图像（P）、片（slice）、宏块（MB）、块（B）六层结构。
（1）图像序列层，图像序列包括若干 GOP，序列头包含起始码和序列参数，如档次、级别、彩色图像格式、帧场选择等等；
（2）图像组层，图像组包含若干幅图像，组头包含起始码、 GOP 标志等，如视频磁带记录器时间、控制码、 B 帧处理码等；
（3）图像层，一幅图像包含若干片，头信息中有起始码、 P 标志，如时间、参考帧号、图像类型、 MV、分级等；
（4）片层，片是最小的同步单位，包含若干宏块，片头中有起始码、片地址、量化步长等；
（5）宏块层，宏块由 4 个 8×8 亮度块和 2 个色度块组成，宏块头包括宏块地址、宏块类型、运动矢量等。
5.5.基于帧或场的DCT变换
MPEG-2 可用于逐行扫描图像也可用于隔行扫描图像。对逐行扫描图像，可按行分割成块，基于块进行 DCT 变换。对逐行扫描图像，一帧由两场组成，于是就有基于帧的分割和基于场的分割两种宏块结构
同一帧内的各邻近行之间空间相关性比同一场内各邻近行之间的相关性要强。因此基于帧的 DCT 编码适用于相对静止或慢运动的景物。
同一场内各邻近行之间时间相关性比同一帧内各邻近行之间的时间相关性要强（因为同一帧内当前行的下一行要等到一场扫描完后才出现在当前行之下，时间相关性弱），基于场的 DCT 编码适用于运动大的景物。
根据帧的行间相关系数和场的行间相关系数可判定采用帧分割还是场分割进行编码。
6.JPEG标准
1991 年 3 月 ISO/IEC 正式通过了静止图像压缩编码标准，称为 JPEG 建议。 JPEG 标准分为基本系统、扩展系统和信息保持系统三个部分。基本系统提供对顺序扫描静止图像的高效有损编码，输入图像精度为 8bit/像素。
6.1.编码框图
6.2.数据交换格式
熵编码后得到变长度的码流。为便于数据的交换， JPEG 规定了统一的压缩后数据交换格式
第一行： SOI 表示图像数据开始； EOI 为一帧图像结束，各占两个字节。
第二行：表/杂项中放置量化表、哈夫曼表；帧首包括编码方法、取样精度、量化系数、源图像行数、每行取样数等； DNL 重新定义帧内的行数。
第三行：扫描首说明扫描起始信息、分量图像号码、参数、熵编码表选择（ECS）； RST为重新开始标志。
第四行：为熵编码区， MCV 为最小编码单元，包括 4 个亮度块， 1 个 Cr 块和 1 个 Cb块。