如何确保使用 OpenCV 读取和处理所有帧

Question

我正在尝试使用 OpenCV 加载视频文件或从网络摄像头访问视频流，但我无法访问所有帧。

视频文件是以 60 的 FPS 捕获的，但在我的代码中，我每秒只能访问几帧。我尝试使用 OpenCV 的线程版本，imutils。它效果更好，但我仍然无法访问全帧。

在下面的代码中，我使用线程版本的视频阅读器来加载视频文件并将其调整为更小的尺寸以降低所需的处理能力。

抓帧成功后，我会做一些图像处理工作（以后）。但是现在即使有了这个样板，我最多只能读取几（10+）帧，结果也很卡。有没有办法解决这个问题？

import cv2
from imutils import resize
from imutils.video import VideoStream

vs = VideoStream(src="./video.MOV").start()

while True:
    frame = vs.read()
    if frame is not None:
        frame = resize(frame, 800)

        # some heavy analytics work

        cv2.imshow("Frame", frame)

        if cv2.waitKey(1) & 0xFF == ord("q"):
            break

cv2.destroyAllWindows()
vs.stop()

实验

我在 iMac 和一台配备 1080p 显示器、运行 Intel Core i5-7400 @ 3.00Ghz 的 Ubuntu 机器上进行了一项实验，计算每个 imshow 函数加载的帧数和平均时间。

视频 (h264) 的时长为 1:03 分钟，大小为 185.7MB。

iMac 总共只能加载 414 帧，而 Ubuntu 机器总共可以加载 2826 帧。

两台机器的imshow函数的平均耗时是0.0003s

Answer 1

基本上，您只需加载视频和显示，因此除了您使用的是配备 Retina 屏幕的 Macbook 外，没有任何理由会导致这样的低 fps。也许这是导致视频显示缓慢的原因，因为 Retina 屏幕有更多的像素，并且合成引擎可能需要一些时间才能在屏幕上渲染您的图像。我建议使用外接屏幕。