带时间戳的音频和视频同步

Question

我从网络接收音频数据包（每秒 4 个数据包，每个数据包 250 毫秒）和视频 - 15fps。一切都按照我自己的时间戳进行。我应该如何同步它们？我看过我们一位开发人员的源代码，但他确实根据音频同步视频。即，音频总是立即播放，视频可以被丢弃或缓冲。我认为这是不正确的，因为音频可能会超出视频一两秒 - 在这种情况下，我们根本不会有实际的视频帧。

我想了解一些同步方面的基础知识。应该缓冲什么？同步模式下的音频和视频是否应该在单独的线程中播放？任何线索都会受到重视！

多谢！

Answer 1

我需要这样的东西 - http://www.freepatentsonline.com/7680153.html

漂亮很难理解，但我认为该专利解释了同步的基础知识。