我已经创建了一个ARCore Session,并通过Session#setCameraTextureName方法附加了一个OpenGL纹理ID以显示我的相机数据。 我想要访问显示在纹理上的相机图像数据字节。
ARKit和Tango为每个帧提供了访问图像字节的功能,但在ARCore API中似乎没有任何东西可以轻松地提供这些功能。
在使用ARCore时,是否有其他方法可以访问图像字节?
在使用ARCore时,是否有其他方法可以访问图像字节?
int w=1080;
int h = 2220;
int b[]=new int[w*(0+h)];
int bt[]=new int[w*h];
IntBuffer ib = IntBuffer.wrap(b);
ib.position(0);
GLES20.glReadPixels(0, 0, w, h, GLES20.GL_RGBA, GLES20.GL_UNSIGNED_BYTE, ib);
for(int i=0, k=0; i<h; i++, k++)
{//remember, that OpenGL bitmap is incompatible with Android bitmap
//and so, some correction need.
for(int j=0; j<w; j++)
{
int pix=b[i*w+j];
int pb=(pix>>16)&0xff;
int pr=(pix<<16)&0x00ff0000;
int pix1=(pix&0xff00ff00) | pr | pb;
bt[(h-k-1)*w+j]=pix1;
}
}
sb=Bitmap.createBitmap(bt, w, h, Bitmap.Config.ARGB_8888);
目前,访问图像数据的最佳方法可能是将纹理绘制到渲染缓冲区中,并使用glReadPixels读取到一个持久映射的像素解包缓冲区中。使用同步栅来检测glReadPixels何时完成。
另一种选择是使用计算着色器直接写入到一个SSBO中。后者可能会少一些复制(即使在glReadPixels之后使其无效,渲染缓冲区像素仍可能命中DRAM),但这也是一条较少使用的代码路径并且需要进行渲染/计算切换,因此我对哪种方法更有效没有直觉。
https://developers.google.com/ar/reference/java/com/google/ar/core/Frame.html#acquireCameraImage()
请注意,保留html标签。
glGetTexLevelParameteriv
查询它。我已经测试了计算着色器方法,它似乎足够高效,至少可以用于概念验证工作。 - Ian M