使用 DOD 的 Metal Core Image Kernel

Question

我编写了以下 Metal Core Image Kernel 来产生恒定的红色。

extern "C" float4 redKernel(coreimage::sampler inputImage, coreimage::destination dest)
{
  return float4(1.0, 0.0, 0.0, 1.0);
}

然后我在 Swift 代码中有这个：

class CIMetalRedColorKernel: CIFilter {
  var inputImage:CIImage?
  
  static var kernel:CIKernel = { () -> CIKernel in
     let bundle = Bundle.main
     let url = bundle.url(forResource: "Kernels", withExtension: "ci.metallib")!
     let data = try! Data(contentsOf: url)
     return try! CIKernel(functionName: "redKernel", fromMetalLibraryData: data)
  }()

 override var outputImage: CIImage? {
    guard let inputImage = inputImage else {
        return nil
    }

    let dod = inputImage.extent
    return CIMetalRedColorKernel.kernel.apply(extent: dod, roiCallback: { index, rect in
        return rect
    }, arguments: [inputImage])
 }
}

如您所见，dod 是输入图像的范围。但是当我运行过滤器时，我得到一个超出输入图像范围（DOD）的整个红色图像，为什么？我有多个过滤器链接在一起，整体尺寸为 1920x1080。红色滤镜不应该只对传入的 DOD 矩形运行，并为 DOD 之外的任何内容生成清晰的像素吗？

Answer 1

通过内核调用的extent 参数，您可以向内核产生有意义结果的区域发出信号，或者，正如您正确命名的那样，定义域。 然而，这也意味着它在这个区域之外产生的任何东西基本上是未定义的，由你作为内核开发者来决定。

像您编写的那样的生成器内核通常具有无限 定义域，因为无论输入如何，它都会产生红色。要将输出限制在特定区域，您可以对其应用裁剪：

let dod = inputImage.extent
let result = CIMetalTestRenderer.kernel.apply(extent: .infinite, roiCallback: { index, rect in
    return rect
}, arguments: [inputImage])
return result.cropped(to: dod)

裁剪后，dod 之外的所有内容都将是透明的。

---

更新：

事实证明，您必须将内核调用的extent 参数设置为.infinite 才能使其工作。我怀疑cropped(to:) 检查图像是否已经具有给定的范围，并且在这种情况下不会执行任何操作。因此，要使 CI 真正应用裁剪，您必须指定内核实际生成的定义域。

我认为这里违反直觉的事情是 CI 不会将您的内核应用于只是您指定的 extent 的像素。当结果没有正确裁剪时，似乎有一些自动钳制到范围，但老实说，我也对此感到困惑......