新媒体流媒体压缩编码技术思维导图

在传输前必须先有效地压缩成码流,以减少对网络资源的占用率

并将文件分成压缩包,形成数据流,成为具有流格式的流媒体

在选择视频编码算法时,视音频质量和带宽通常是两个最重要的考虑因素

需要平衡网络吞吐量与视音频感觉质量间的关系

此外,编码视音频流在网络上传输,易受到信道差错和信息损失对服务质量的影响

所以需要考虑视音频编码算法对差错的鲁棒性,以保证接收端有可接受的业务质量

是面向存储的,传输的目标也是将数据压缩成为特定速率的码流

由于实际的网络带宽是动态变化的,固定速率编码不太适合网络传输

解决方法是采用可伸缩性的视音频编码技术

把同一段视频内容编码生成多个具有不同码率和图像尺寸的码流

然后自适应选择一个最合适的码流进行传输,以适应网络带宽的动态变化

主要采用分层编码和多描述编码等可伸缩视音频编码技术

分层编码就是将媒体数据压缩编码成多个流,其中一个可以独立解码

产生粗糙质量的视频序列,适应最低的网络带宽,称为基本层码流

其他的码流按层为单位可以在任何地点截断,称为增强层

用来覆盖网络带宽变化的动态范围,不能单独解码,只能与基本层及前一些增强层联合解码

以提高观看效果，分层编码主要分为时域分层编码、空域分层编码和质量分层编码

多描述编码(MDC)也将一个视频源编码成多个子流(称为描述)

区别在于产生的描述是相关的,有着同样的重要性

任何一个单独的描述必须提供一个基本级别的质量,多个描述一起提供改善的质量

不需要网络提供可靠的子信道,是一个可用于解决尽力而为的网络所引发的一些问题

结合多种视频编码技术来适应网络上的 QoS 波动是今后可伸缩视频编码的发展方向

如可分级视频编码可以适应网络带宽的变化、错误弹性编码可以适应丢包、延时认识编码可以适应网络时延

这三种技术的结合可以更好地提供一种应对网络 QoS 波动的解决方案

MPEG 2、MPEG 4、H． 263、H． 264、WindowMedia 和 Real System 视频编码器等

音频编码器有 MP3、MPEG AAC、WindowMedia 音频编码器和 AMR 等

图像编码器有 JPEG 和 JPEG2000 等，编码器所生成的码流只包含了该码流解码所必需的信息

不包含媒体间的同步、随机访问等系统信息,因此编码后的媒体数据还要被组织

成为具有特定系统格式的媒体文件用于流媒体传输或者是存入磁盘中

目前常用的文件格式有 MPEG 2 系统、MP4、微软公司的 ASF、Real 的文件格式

QuickTime 的文件格式以及用于 3G 无线服务的 3GPP 和 3GPP2 等

分别是 Real Networks 公司的 RealMedia,Microsoft 公司的 Windows Media 和 Apple 公司的 QuickTime

这三家的技术都有自己的专利算法、专利文件格式甚至专利传输控制协议

另外,在多媒体课件和动画方面的流媒体技术

还有 Macromedia 的 Shockwave 技术和 MetaCreation 公司的 Meta Stream 技术等

顺序流式传输和实时流式传输两种方式

顺序流媒体传输是顺序下载,在给定的时刻,用户只能观看已下载的那部分

顺序流媒体传输不能根据用户连接的速率做调整

顺序流式传输不支持随机访问(快进、后退、暂停等)控制

实时流媒体传输技术可保证媒体信号带宽与网络连接匹配

可实现媒体的实时观看,特别适合现场事件,也支持随机访问

实时流媒体传输有速率控制机制,可调整媒体传输速率与网络带宽匹配

当网络拥塞或出现问题时,出错丢失的信息会被忽略掉,对视频质量会造成很大影响

如果想保证视频观看质量,顺序流媒体传输也许更好