OpenCV C++ 多线程提高帧率

Question

我有一个 opencv 程序，其中图像处理对在视频捕获中具有稳定且相对较高的帧速率很敏感。不幸的是，我所做的所有图像处理都会显着降低帧速率，从而导致我的程序出现错误行为。我相信将相机放在单独的线程上并在自己的线程上进行图像处理会提高帧率，但我不确定如何做到这一点。谁能指导我完成整个过程？

更新：在对线程进行了一些研究之后，我设法将线程实现到显示最终视频源后处理的位置。但是，不知何故，我的实现导致图像处理方法失败（例如，在我成功跟踪移动对象之前，现在无论是否跟踪它都是错误的）。我怀疑这与图像处理算法在读入新帧时无法足够快地处理每一帧有关。如何改进此实现，以便我的处理方法在没有多线程的情况下工作？

void CaptureFrames() {
  VideoCapture capture(0);
  if (!capture.isOpened()) {
      cout << "cannot open camera" << endl;
  }

  while (true) {
      //CAMERAFRAME is a global Mat defined at the top of my program
      capture.read(CAMERAFRAME);
      if (waitKey(30) >= 0) { break; }
  }
}

void ProcessFrames() {

  while (true) {



    Mat hsvFrame;
    Mat binMat;
    Mat grayFrame;
    Mat grayBinMat;

    if (!CAMERAFRAME.empty()) {
        //do image processing functions (these worked before implementing threads and are not causing errors)

        imshow("gray binary", grayBinMat);
        imshow("multithread test", CAMERAFRAME);
    }



    if (waitKey(30) >= 0) { break; }
   }
}

int main(int argc, char** argv[]) {
  thread t1(CaptureFrames);
  thread t2(ProcessFrames);

  while(true) {
    if(waitKey(30) >= 0) {break;}
  }

  return 0;
}

Answer 1

再次尝试旧版本，但从 ProcessFrames 函数中删除最后一行。

if (waitKey(30) >= 0) { break; }

在显示图像时不要让它再次等待 30 毫秒，while 循环就足够了