安卓camera2 api。设置多个 ImageReader 表面会产生空白输出

Question

我有一个 camera2 实现。当前的设置是，它使用纹理视图表面来显示实际的相机视图，并使用ImageReader 表面来捕获图像。

现在我也想捕捉预览帧。所以我尝试添加一个新的ImageReader 表面来捕获帧。但是当我将该表面添加到createCaptureSession 请求时，屏幕变为空白。什么可能是错的？下面是我用来向createCaptureSession添加表面的代码

val surface = preview.surface
            ?: throw CameraAccessException(CameraAccessException.CAMERA_ERROR)

val previewIRSurface = previewImageReader?.surface
            ?: throw CameraAccessException(CameraAccessException.CAMERA_ERROR)

val captureSurface = captureImageReader?.surface
            ?: throw CameraAccessException(CameraAccessException.CAMERA_ERROR)

try {
    val template = if (zsl) CameraDevice.TEMPLATE_ZERO_SHUTTER_LAG else CameraDevice.TEMPLATE_PREVIEW

    previewRequestBuilder = camera?.createCaptureRequest(template)
            ?.apply { addTarget(surface) }
            ?: throw CameraAccessException(CameraAccessException.CAMERA_ERROR)

    val surfaces: ArrayList<Surface> = arrayListOf(surface, previewIRSurface, captureSurface)

    camera?.createCaptureSession(surfaces, sessionCallback, backgroundHandler)

} catch (e: CameraAccessException) {
    throw RuntimeException("Failed to start camera session")
}

ImageReaders的初始化是这样的。

private fun prepareImageReaders() {

    val largestPreview = previewSizes.sizes(aspectRatio).last()

    previewImageReader?.close()

    previewImageReader = ImageReader.newInstance(
            largestPreview.width,
            largestPreview.height,
            internalOutputFormat,
            4 // maxImages
    ).apply { setOnImageAvailableListener(onPreviewImageAvailableListener, backgroundHandler) }

    val largestPicture = pictureSizes.sizes(aspectRatio).last()

    captureImageReader?.close()

    captureImageReader = ImageReader.newInstance(
            largestPicture.width,
            largestPicture.height,
            internalOutputFormat,
            2 // maxImages
    ).apply { setOnImageAvailableListener(onCaptureImageAvailableListener, backgroundHandler) }
}

关于上面使用的参数的更多说明：

• internalOutput 格式为 ImageFormat.JPEG 或 ImageFormat.YUV_420_888。
• 图片尺寸基于最佳尺寸
• 它可以单独与任何一个图像阅读器配合使用，但一旦我将两者加在一起，就会出现空白屏幕！
• 在装有 Android Oreo (8.0) 的三星 Galaxy S8 上进行测试

原代码在这里https://github.com/pvasa/cameraview-ex/blob/development/cameraViewEx/src/main/api21/com/priyankvasa/android/cameraviewex/Camera2.kt

Answer 1

ma​​xImages == 4 可能太多并耗尽您的 RAM。另外，不清楚您使用的是什么internalOutputFormat，以及它是否与largestPreview 尺寸兼容。

底线是，研究createCaptureSession() 支持的表面列表参数的长列表。根据您的相机功能，您使用的三个表面可能太多了。

从下面的 cmets 中，一个可行的解决方案：“错误本身并没有说太多 [...] 但是在搜索时，发现 JPEG 格式不支持多个表面。将其更改为YUV_420_888 完美运行。”