OpenCV KCF 跟踪预选对象

Question

寻找有关如何实施 KCF 跟踪以及它是否适合我正在创建的项目的一些指导。在 Python 上使用最新版本的 OpenCV 来创建一个程序，该程序可以在特定对象在相机前四处移动时对其进行跟踪。最终目标只是计算该特定对象在帧的下半部分中有多少。目前有一个构建我自己的级联的工作版本，但在尝试实现我自己的跟踪时度过了一段糟糕的时光。

从那以后，我发现了内置的跟踪功能，并且一直在研究 Opencv 和 Learnopencv 网站上的一些示例代码，重点是 KCF。此代码如下。

import cv2
import sys

(major_ver, minor_ver, subminor_ver) = (cv2.__version__).split('.')

img = cv2.imread('OXO200Front.jpg')

if __name__ == '__main__' :

# Set up tracker.
# Instead of MIL, you can also use

tracker_types = ['BOOSTING', 'MIL','KCF', 'TLD', 'MEDIANFLOW', 'GOTURN']
tracker_type = tracker_types[2]

if int(minor_ver) < 3:
    tracker = cv2.Tracker_create(tracker_type)
else:
    if tracker_type == 'BOOSTING':
        tracker = cv2.TrackerBoosting_create()
    if tracker_type == 'MIL':
        tracker = cv2.TrackerMIL_create()
    if tracker_type == 'KCF':
        tracker = cv2.TrackerKCF_create()
    if tracker_type == 'TLD':
        tracker = cv2.TrackerTLD_create()
    if tracker_type == 'MEDIANFLOW':
        tracker = cv2.TrackerMedianFlow_create()
    if tracker_type == 'GOTURN':
        tracker = cv2.TrackerGOTURN_create()

cap = cv2.VideoCapture(0)
ok, frame = cap.read()

#Initializing a bounding box 
bbox = img

bbox = cv2.selectROI(frame, False)
ok = tracker.init(frame, bbox)

while(1):
    ok, frame = cap.read()
    timer = cv2.getTickCount()
    ok, bbox = tracker.update(frame)
    fps = cv2.getTickFrequency() / (cv2.getTickCount() - timer);
if ok:
    p1 = (int(bbox[0]), int(bbox[1]))
    p2 = (int(bbox[0] + bbox[2]), int(bbox[1] + bbox[3]))
    cv2.rectangle(frame, p1, p2, (255,0,0), 2, 1)
else :
    # Tracking failure
    cv2.putText(frame, "Tracking failure detected", (100,80), 
    cv2.FONT_HERSHEY_SIMPLEX, 0.75,(0,0,255),2)
    cv2.putText(frame, tracker_type + " Tracker", (100,20), 
    cv2.FONT_HERSHEY_SIMPLEX, 0.75, (50,170,50),2);

# Display FPS on frame
cv2.putText(frame, "FPS : " + str(int(fps)), (100,50), 
cv2.FONT_HERSHEY_SIMPLEX, 0.75, (50,170,50), 2);

# Display result
cv2.imshow("Tracking", frame)

K = cv2.waitKey(1)
if (K==27):
    break
cap.release()
cv2.destroyAllWindows()

这是解决此问题的正确方法吗？如何使用要跟踪的对象的图像？而不是一开始的边界框选择。任何建议或帮助都会很棒！谢谢

Answer 1

KCF 是一款体面且快速的单对象跟踪器。当帧中有多个相似类型的对象时，它可能无法跟踪对象。例如，如果您正在跟踪一只鸡，它进入了同一品种的其他鸡群中，那么跟踪器很可能会漂移到另一只鸡身上。

这里有两个任务：对象检测和对象跟踪。但也许你真正需要的只是对象类和位置。为此，我建议查找 YOLO 对象检测和定位器。它可能会直接完成这项工作。

话虽如此，如果您仍想使用 KCF，首先您需要确定要跟踪的对象。如果您的级联可以识别对象，您可以简单地在第一帧中获取小（多尺度）图像块，记下它们的坐标并将它们传递给您的级联以查看它们是否包含对象。如果它们包含对象，则使用图像补丁坐标来初始化 KCF（而不是手动绘制它们）并让它跟踪。它会在某个时间点漂移，因此请使用您的级联检测器以某个定义的时间间隔重新检测和重新初始化。