H.264视频数据封装成TS解决思路

H.264视频数据封装成TS
目标：输入为H.264 ES流，输出为TS流，暂不考虑音频。
问题：按照iso-13818协议介绍的格式和ffmpeg的mpegtsenc.c的代码封装出来的TS包无法使用VLC播放。通过VLC播放器的debug信息，可以看到PAT、PMT成功解析，也找到了视频流（H.264 ES）对应的PES包。
  mpegtsenc.c将PES头信息写入了一些固定的值，比方PTS_DTS=10，即只有PTS没有DTS，要想正确解码是否每个PES header必须要DTS和PTS？无法解码是不是因为没有DTS导致的？
  此外，因为ffmpeg的TS封装都是针对MPEG-2的，例如PMT中的视频stream_type都是0x2。除此以外，还有哪些字段的值对于MPEG-2和H.264是不同的？

  请做过TS封装的各位大侠给予解答，十分感谢！

[解决办法]
应该可以吧，stream_type=0x1b，编码器自己会去填啊，不用自己管，关键是你送进来的数据对不对，H264数据流格式有两种，一种是带NAL的，前几个字节是长度，通常这种格式叫AVC，第二种是像MPEG Video，每帧是一0x00 0x00 0x00 0x01开始的。TS只接受第二种。要是第一种的话要转换一下。
[解决办法]

探讨

感谢tufaqing！

编码之后的H.264码流开始的几bit是0x00 00 00 01 67 42 00 28 E9 01 68 24 C8 00 00 00 01 68 CE 38 80 ......，应该是你所说的“第二种像MPEG Video”，那就不需要转换了。
请问如果TS流中没有PCR、ESCR、PTS、DTS信息是不是视频解码器就无法获得正确的输入码流？

[解决办法]
楼主的这种是第二种格式，应该是正确的，你的几个字节正好也是h264的sps和pps头。
时间戳只会影响播放，不会导致解码器解码失败。我没调试过VLC，不知道TS流时间戳不对时送进解码器会不会丢数据，但通常丢帧处理应该是在显示模块里面做的，应该不影响解码过程。
h264能照常播放是因为播放器按照帧率理论值来播放的，显示顺序是解码器解码出来就已经调整好了，然后打上时间戳给显示模块处理。
建议先用其他播放器播放看看，可能是VLC的问题，也可能是你打包时丢掉了数据。因为TS是将每一帧拆分打包的，一个TS包数据大概就184字节，肯定不是一个完整帧的，一般h264的解码器都需要一帧一帧的给，ffmpeg需要调用h264 parser来查找每一帧才行，不知道你送到解码器是不是一个完整帧，每一帧开头应该是0x00 00 00 01。
[解决办法]
h264封装到TS中，stream_type和stream_id的值跟mpeg2有所不同，另外还需要把sps+pps的信息写到PMT的decoder_specific_info当中。

查看更多 下一篇