使用相机会话捕获的裁剪图像

Question

我正在尝试裁剪具有特定兴趣区域的相机会话捕获的图像。为了找到比例裁剪矩形，我使用previewLayer.metadataOutputRectConverted 方法。但裁剪后我得到了错误的比例。

调试示例：

(lldb) po rectOfInterest.width / rectOfInterest.height
0.7941176470588235

(lldb) po image.size.width / image.size.height
0.75

(lldb) po outputRect.width / outputRect.height
0.9444444444444444

(lldb) po Double(cropped.width) / Double(cropped.height)
0.7080152671755725

如您所见，我预计裁剪后的图像比例将是 ~0.79 和我用于裁剪的 rectOfInterest。

方法：

private func makeImageCroppedToRectOfInterest(from image: UIImage) -> UIImage {
    let previewLayer = cameraController.previewLayer
    let rectOfInterest = layoutLayer.layoutRect

    let outputRect = previewLayer.metadataOutputRectConverted(fromLayerRect: rectOfInterest)

    guard let cgImage = image.cgImage else {
        return image
    }

    let width = CGFloat(cgImage.width)
    let height = CGFloat(cgImage.height)

    let cropRect = CGRect(x: outputRect.origin.x * width,
                          y: outputRect.origin.y * height ,
                          width: outputRect.size.width * width,
                          height: outputRect.size.height * height)

    guard let cropped = cgImage.cropping(to: cropRect) else {
        return image
    }

    return UIImage(cgImage: cropped, scale: image.scale, orientation: image.imageOrientation)
}

目标矩形：

Answer 1

感谢@Enricoza，我知道如何解决我的问题。这是代码：

private func makeImageCroppedToRectOfInterest(from image: UIImage) -> UIImage {
        let previewLayer = cameraController.previewLayer
        let rectOfInterest = layoutLayer.layoutRect

        let metadataOutputRect = CGRect(x: 0, y: 0, width: 1, height: 1)
        let outputRect = previewLayer.layerRectConverted(fromMetadataOutputRect: metadataOutputRect)

        guard let cgImage = image.cgImage else {
            return image
        }

        let width = image.size.width
        let height = image.size.height

        let factorX = width / outputRect.width
        let factorY = height / outputRect.height
        let factor = max(factorX, factorY)

        let cropRect = CGRect(x: (rectOfInterest.origin.x - outputRect.origin.x) * factor,
                              y: (rectOfInterest.origin.y - outputRect.origin.y) * factor,
                              width: rectOfInterest.size.width * factor,
                              height: rectOfInterest.size.height * factor)

        guard let cropped = cgImage.cropping(to: cropRect) else {
            return image
        }

        return UIImage(cgImage: cropped, scale: image.scale, orientation: image.imageOrientation)
    }

Answer 2

我不是专家，但我认为您误解了 metadataOutputRectConverted 方法的用法。 您的代码无法返回具有相同纵横比的裁剪图像，因为您将（我认为是）实际上不相关的数字彼此相乘。

你可以试试这个方法

previewLayer.layerRectConverted(fromMetadataOutputRect: CGRect(x: 0, y: 0, width: 1, height: 1))

了解从metadataOututRectConverted 进行的实际计算是什么。

我认为您可以更好地解释您想要实现的目标，并且可以提供一个示例项目（或者至少提供更多关于您正在使用的实际图像/矩形的上下文）来帮助我们调试，如果您愿意的话在这方面获得更多帮助。