视频录制逻辑问题；填充空框架和同步FPS

Question

我的视频录制逻辑有一些问题。 我的录音算法以伪代码为下面。

fps = 30
msPerFrame = 1000 / fps
videoRecorder = VideoRecorder(fps)
timer.start()
while (true) {
  if ((timer.elapsed() >= msPerFrame) && (newFrame.isReady() == true)) {
    videoRecorder.push(newFrame)
    timer.restart()
  }
}

请注意，videorecorder在创建视频文件并开始录制时确定视频文件的fps。
问题在下面：

1. （timer.elapsed（）＆gt; = msperFrame）＆amp; amp; （newframe.isready（）== false）？如果我只等待帧准备就绪，尽管fps记录了此差距，尽管大于实际msperframe。
2. 如何校准记录FPS错误？如果fps = 30，msperframe = 33.3333 ...。但是，timer.elapsed（）返回毫秒值so timer.elapsed（）＆gt; = msperframe当msperframe＆gt; = 34时可能是正确的。因此，将1020毫秒的30 newFrame s推到1000毫秒的结果视频。

Answer 1

我简单地使用包含newFrame作为FIFO订单的框架缓冲区解决了问题（1）。录音机现在在需要将框架推向记录缓冲区时引用框架缓冲区的最后帧。因此，如果newFrame在timer.elapsed（）＆gt; = msperframe时还没有准备好，则录音机再按下最后一个帧。

bufferMaxSize = MAX_BUF_SIZE
frameBuffer
isRecording = false

// This callback is called when newFrame is ready.
callbackFunction(newFrame) {
  frameBuffer.push(newFrame) // Push to the back of the buffer
  while (frameBuffer.size() > MAX_BUF_SIZE)
    frameBuffer.pop() // Remove front of the buffer
}

startRecordingFunction() {
  fps = 30
  msPerFrame = 1000 / fps
  videoRecorder = VideoRecorder(fps)
  timer.start()

  while (isRecording) {
    if (timer.elapsed() >= msPerFrame) {
      videoRecorder.push(frameBuffer.back())
      timer.restart()
    }
  }

  videoRecorder.save("video.mp4")
}

另外，运行StarTrecordingFunction（）的线程对时间至关重要，因此给出更高的工作优先级，这给了我更稳定的结果。