安卓相机，同时进行RAW预览和RAW拍照

Question

我正在开发类似相机应用的东西。它可以在一个原生OpenGL纹理上绘制实时摄像头预览。如果按下按钮，则以其原始形式捕获静态图像（可能比实时预览更高分辨率）。

这里是我的代码概述。为了清晰起见，我没有展示不太相关的部分。这是一个简化的情况，其中预览和仍然捕获的分辨率是相同的。

void Setup(Activity a) {

  // .. snip ..

  mSurfaceView = new SurfaceView(a);
  mSurfaceView.getHolder().addCallback(this);
  //put the surface off-screen
  AbsoluteLayout.LayoutParams alp = new AbsoluteLayout.LayoutParams(8, 8, -8, -8); 
  a.addContentView(mSurfaceView, alp); //need this, otherwise surface is not created

  mCamera = Camera.open(miCameraId);
  mCamera.setPreviewCallbackWithBuffer(this);

  ConfigureCameraDefaults(640,480);
}

// -------------------------------------------------------------------- //

void ConfigureCameraDefaults(int iX, int iY) {
  Camera.Parameters oParameters=mCamera.getParameters();

  oParameters.setPreviewFormat(ImageFormat.NV21);
  oParameters.setPictureFormat(ImageFormat.NV21);
  oParameters.setPreviewSize(iX, iY); // for live preview
  oParameters.setPictureSize(iX, iY); // for still capture

  int bpp = ImageFormat.getBitsPerPixel(ImageFormat.NV21);
  int iBufSize = (int) (iX*iY*((float)bpp/8));
  mBuffer = new byte[iBufSize];
  mCamera.addCallbackBuffer(mBuffer);

  try {
      mCamera.setParameters(oParameters);
  } catch (Exception e) {
      // .. snip ..
  }
}

void startPreview() {
  mCamera.startPreview();
}

void stopPreview() {
  mCamera.stopPreview();
}

void takePicture() {
  mCamera.takePicture(null, this, null, null); //2nd is the raw callback
}

// -------------------------------------------------------------------- //

@Override
public void onPreviewFrame(byte[] data, Camera camera) {
  // -- at this point the buffer is in a safe state, until it is added again
  onPreviewFrame_native(data);

  // -- make buffer writable again
  mCamera.addCallbackBuffer(mBuffer);
}

@Override
public void onPictureTaken(byte[] data, Camera camera) {
  onStillCapture_native(data);
  mCamera.startPreview(); //otherwise preview will stop
}

好的，现在是问题时间。当没有调用takePicture()时，一切都按计划进行。预览帧到达，它们被处理，缓冲区重新排队。然而，如果我先调用startPreview()再调用takePicture()，那么每次拍照回调都会得到一个空的数据数组。谷歌文档对takePicture()有以下说明: 原始回调发生在原始图像数据可用时(注意:如果没有可用的原始图像回调缓冲区或原始图像回调缓冲区不足以容纳原始图像，则数据将为空)。 这对我来说并不完全清楚，因为:

1. 没有函数设置静态捕获的缓冲区，只有用于预览帧的缓冲区
2. 即使相同的缓冲区用于静态捕获和预览帧，我也有一个排队的缓冲区。
3. 添加第二个缓冲区(与预览缓冲区相同)专门用于静态捕获没有任何效果
4. 必须启动预览才能使takePicture()成为有效调用。

我是否漏掉了明显的东西？或者我们不允许同时从视频和静态图像获取原始帧？文档中完全没有关于这方面的内容。我也看了相机源码，但没有找到答案。

非常感谢任何帮助。

PS. 我已经尝试使用不同的颜色格式进行静态捕获、在拍照之前取消预览回调、添加第二个缓冲区、重新排队第二个缓冲区、将表面持有者设置为推送类型以及其他一些我此刻无法回忆起来的事情。但都没有任何影响。

- gadget

---

你找到解决方案了吗？ - Dmitriy Puchkov

Answer 1

似乎没有办法获取原始图像。方法addCallbackBuffer仅由预览回调使用。还有另一种方法addRawImageCallbackBuffer，它应该可以实现您想要的功能。它是公共的但未导出，因此您无法直接调用它。您可以这样调用它：

    try {
        final Method addRawImageCallbackBuffer =
                camera0.getClass()
                       .getDeclaredMethod("addRawImageCallbackBuffer",
                                          byte[].class);
        addRawImageCallbackBuffer.invoke(camera0, new byte[100000000]);
    } catch (Exception e) {
        Log.e("RNG", "Error", e);
    }

但在我的Nexus 5上，回调函数仍然返回null，所以我认为它根本不受支持。

- Kurt Huwig