RTP中H264封装NALU(SPS,PPS等)

news/2024/11/28 7:46:08/

NAL的英文全称为Network  Abstract Layer,即网络抽象层,在H264/AVC视频编解码标准中,整个系统框架分为两个层面,视频编解码层面(VCL)和网络抽象层面(NAL)。VCL负责有效表示视频数据内容,NAL负责格式化数据并加上相应的头信息,以保证数据适合各种信道和存储介质上的传输。NAL单元NALU是NAL的基本语法结构,它包含一个字节的头信息和一系列来自VCL的原始字节载序列载荷(RBSP)的字节流。

H264使用RTP传输时,以SPS和PPS开头,如下图:

H264帧由NALU头和NALU载荷构成,以SPS为例如下图:

NALU头有一个字节组成,其中Type有5 bits组成,其中几个比较常用的值如下(其他的请查阅相关文档):

 5     IDR图像中的片
 6     补充增强信息单元(SEI)
 7     SPS
 8     PPS
 9     序列结束
 10    序列结束

上图中SPS的NALU头中的Type值为7,表示SPS(Sequence parameter set),SPS还包含一些图像编码的一些重要配置信息,比如profile_id,level_id,图像的宽高信息等,具体如下图:

上图中图像的宽高为:1920*1088

如果一帧数据过大,将被分为多个片,即有多个slice组成,如下图:

AUD

 一般文档没有对AUD进行描叙,其实这是一个帧开始的标志,字节顺序为:00 00 00 01 09 f1,从结构上看,有start code, 所以确实是一个NALU,类型09在H264定义里就是AUD(分割器)。大部分播放器可以在没有AUD的情况下正常播放。紧随AUD,一般是SPS/PPS/SEI/IDR的组合或者简单就是一个SLICE,也就是一个帧的开始。像Flash这样的播放器,每次需要一个完整的帧数据,那么把2个AUD之间的数据按照格式打包给播放器就可以了。

H.264编码时,在每个NAL前添加起始码 0x000001,解码器在码流中检测到起始码,当前NAL结束。为了防止NAL内部出现0x000001的数据,h.264又提出'防止竞争 emulation prevention"机制,在编码完一个NAL时,如果检测出有连续两个0x00字节,就在后面插入一个0x03。当解码器在NAL内部检测到0x000003的数据,就把0x03抛弃,恢复原始数据。
   0x000000  ----------->  0x00000300
   0x000001  ----------->  0x00000301
   0x000002  ----------->  0x00000302
   0x000003  ----------->  0x00000303

 总的来说,H264的码流的打包方式有两种,一种为annex-b byte stream format 的格式,这个是绝大部分编码器的默认输出格式,就是每个帧的开头的3~4个字节是H264的start_code,0x00000001或者0x000001;另一种是原始的NAL打包格式,就是开始的若干字节(1,2,4字节)是NAL的长度,而不是start_code,此时必须借助某个全局的数据来获得编 码器的profile,level,PPS,SPS等信息才可以解码。


http://www.ppmy.cn/news/358144.html

相关文章

H264参数SPS(序列参数集)和PPS(图像参数集)说明

H264参数SPS(序列参数集)和PPS(图像参数集)说明 https://blog.csdn.net/heanyu/article/details/6191576 https://blog.csdn.net/H514434485/article/details/51063069 H.264码流第一个 NALU是 SPS(序列参数集Sequen…

SPS/PPS/NALU细解

在H.264/AVC视频编码标准中,整个系统框架被分为了两个层面:视频编码层面(VCL)和网络抽象层面(NAL)。其中,前者负责有效表示视频数据的内容,而后者则负责格式化数据并提供头信息,以保证数据适合各种信道和存储介质上的传输。NAL占一个字节。 H264在网络传输的是NALU,N…

h264、sps、pps详解

1、学习路线 step1、初步了解h264,了解h264数据帧分类和识别 step2、h264语法相关算法解析,这里对理解h264的视频帧很重要。通俗的说h264数据定义是由一组Bit组成,但是某个字段不是固定专有几个bit,它是根据其值通过算法转义保存…

sps忘记保存文档怎么恢复_忘记了iPhone密码,怎么办?

世界那么大,谢谢你来看我!!关注我你就是个网络、电脑、手机小达人 iPhone的密码功能是一种重要的方法,可以防止您的个人数据被窥探,但如果您忘记了iPhone密码怎么办? 如果您忘记了密码并输入了错误密码六次…

hp服务器通过ilo5安装系统,HPE ProLiant Gen10 通过iLO 5(v1.15) web界面多种方式更新服务器固件,包含升级系统恢复集方法...

一、iLO web界面固件&操作系统软件界面简单介绍 1、固件 这个界面可以查看服务器安装的固件版本,可以查看以下类型的固件: u电源管理控制器Power Management Controller Firmware u服务器平台服务固件 Server Platform Services (SPS) Firmware uSmart Array u智能平台提…

sps忘记保存文档怎么恢复_路由器管理员密码忘了怎么办【解决方法】

路由器管理员密码忘记了怎么办?最近有朋友问小编这样的问题,小编总结了一些解决的方法,今天和大家分享一下,欢迎收藏。 方式一:尝试用默认密码登录 比较旧款的路由器的默认用户名和管理员密码一般为admin,这些在路由器…

U盘介质修复

在烧录光盘镜像时,出现了意外,导致U盘的介质被烧掉了,这时可以通过量产的方式来修复首先要确定U盘主控芯片类型,但是我的U盘不方便拆开,所以下载了芯片精灵辅助查看在上述官网下载相应的量产工具并配置好VID、PID等参数…

用 DiskGenius 修复 U 盘

最近,为了检测U盘是否为扩容盘,不小心把U盘弄坏,不能格式化,windows系统不能识别U盘. 怀疑是引导区坏了;找了很多工具,试了很多方法,在 win7 下均失败。 所幸,找到 DiskGenius 将问题…