相对于任意点旋转的 OpenCV warpAffine

Question

我在 C++ 中使用 OpenCV。我有两张面孔图像，我正在尝试将面孔彼此对齐。我有表示眼睛、鼻子和面部其他兴趣点的特征。我使用 Arun 的方法来提取旋转、平移和缩放，将一个图像中的特征集的质心转换到另一个图像。然后，它旋转并缩放它。我正在尝试使用这种转换来扭曲一个图像，以便图像中的人脸与另一张图像中的人脸对齐。至少这是想法，但我遇到了问题。似乎旋转和平移的执行顺序与我在 warpAffine 中的预期不同。行/列排序与 x/y 坐标似乎也存在问题。此外，正如标题所示，我认为 warpAffine 正在对图像中的 0,0 进行操作，而我希望它们围绕面部点的质心进行。我应该怎么做才能正确对齐这两组点？这是我的代码：

// R is the rotation as computed by Arun's method
// centered_moving is the moving points with the centroid subtracted from them
// same with centered_base
for (int i = 0; i < base.cols; i++)
{
    a = centered_base.col(i);
    b = centered_moving.col(i).t();
    H += a*b;
}
SVD sv;
Mat W, U, Vt;
sv.compute(H, W, U, Vt);
Mat R = (Vt.t())*(U.t());
// centroid_moving and centroid_base are the centroids of the two point clouds, moving is the cloud that will be translated
Mat trans = -centroid_moving + centroid_base;
Mat Afmat = Mat::zeros(2, 3, ddepth);
Mat tmpmat = Afmat(Rect(0, 0, 2, 2));
R = Mat::eye(2, 2, ddepth);
R.copyTo(tmpmat);
Afmat.at<double>(1, 2) = trans.at<double>(0);
Afmat.at<double>(0, 2) = trans.at<double>(1);
warpAffine(image_moving, affine_result, Afmat, image_moving.size());

Answer 1

问题是我使用的是行、列顺序的点，而 warpAffine 想要一个从 x、y 顺序（又名列、行）的点派生的矩阵。翻转点并使用 getAffineTransform 解决了这个问题。