CIImage像素的RGB值

Question

CIImage像素的RGB值

swiftarkitcore-imageciimagecvpixelbuffer

4

我想访问从实时ARFrame获取的CVPixelBuffer特定区域的平均颜色值。我设法裁剪图像，使用滤镜计算平均颜色，并在转换为CGImage后从像素中获取值，但不幸的是，这影响了我的应用程序性能（FPS降至30fps以下）。我认为造成这种情况的原因是使用CGContext。是否有一种方法可以在不将CIImage转换为CGImage的情况下访问颜色？这是我目前正在使用的代码：

func fun() {
  let croppVector = CIVector(cgRect: inputImageRect)

  guard let filter = CIFilter(
    name: "CIAreaAverage",
    parameters: [kCIInputImageKey: image, kCIInputExtentKey: croppVector]
  ),
    let outputImage = filter.outputImage,
    let cgImage = context.createCGImage(
      outputImage,
      from: CGRect(x: 0, y: 0, width: 1, height: 1)
    ),
    let dataProvider = cgImage.dataProvider,
    let data = CFDataGetBytePtr(dataProvider.data) else { return nil }

  let color = UIColor(
    red: CGFloat(data[0]) / 255,
    green: CGFloat(data[1]) / 255,
    blue: CGFloat(data[2]) / 255,
    alpha: CGFloat(data[3]) / 255
  )
}

- RealUglyDuck

1个回答

网页内容由stack overflow 提供, 点击上面的

可以查看英文原文，
原文链接

- Frank Rupprecht · Accepted Answer

我认为在这里你能做的不多——像这样的缩减操作是昂贵的。

你可以尝试一些方法：

通过将.workingColorSpace和.outputColorSpace选项设置为NSNull()，设置你的CIContext不执行任何颜色管理。
直接渲染到内存而不是通过CGImage。上下文有一个方法render(_ image: CIImage, toBitmap data: UnsafeMutableRawPointer, rowBytes: Int, bounds: CGRect, format: CIFormat, colorSpace: CGColorSpace?)可以用于此操作。在此处也将颜色空间传递为nil。你应该能够只将指向simd_uchar4变量的“指针”作为data传递过去。在这种情况下，rowBytes将为4，格式将为.BGRA8。
在计算平均值之前，你也可以尝试缩小图像（这已经是一个缩减操作）。虽然不会得到完全相同的值，但是可以得到一个公平的近似值——而且可能更快。