为什么我总是得到一张由 GLSurfaceView 截屏的全黑图片？

Question

我使用GLSurfaceView 作为视图来显示相机预览数据。我用createBitmapFromGLSurface瞄准grabPixels并保存到Bitmap。

但是，将位图保存到文件后，我总是得到一张全黑的图片。我哪里错了？

以下是我的代码 sn-p。

@Override
public void onDrawFrame(GL10 gl) {
    if (mIsNeedCaptureFrame) {
        mIsNeedCaptureFrame = false;
        createBitmapFromGLSurface(width, height);
    }
}

private void createBitmapFromGLSurface(int w, int h) {
    ByteBuffer buf = ByteBuffer.allocateDirect(w * h * 4);
    buf.position(0);
    buf.order(ByteOrder.LITTLE_ENDIAN);
    GLES20.glReadPixels(0, 0, w, h,
            GLES20.GL_RGBA, GLES20.GL_UNSIGNED_BYTE, buf);
    buf.rewind();

    Bitmap bmp = Bitmap.createBitmap(w, h, Bitmap.Config.ARGB_8888);
    bmp.copyPixelsFromBuffer(buf);

    Log.i(TAG, "createBitmapFromGLSurface w:" + w + ",h:" + h);
    mFrameCapturedCallback.onFrameCaptured(bmp);
}

更新：

public void captureFrame(FrameCapturedCallback callback) {
    mIsNeedCaptureFrame = true;
    mCallback = callback;
}

public void takeScreenshot() {
    final int width = mIncomingWidth;
    final int height = mIncomingHeight;
    EglCore eglCore = new EglCore(EGL14.eglGetCurrentContext(), EglCore.FLAG_RECORDABLE);
    OffscreenSurface surface = new OffscreenSurface(eglCore, width, height);
    surface.makeCurrent();
    Bitmap bitmap = surface.captureFrame();

    for (int x = 0, y = 0; x < 100; x++, y++) {
        Log.i(TAG, "getPixel:" + bitmap.getPixel(x, y));
    }
    surface.release();
    eglCore.release();
    mCallback.onFrameCaptured(bitmap);
}

@Override
public void onDrawFrame(GL10 gl) {

    mSurfaceTexture.updateTexImage();

    if (mIsNeedCaptureFrame) {
        mIsNeedCaptureFrame = false;
        takeScreenshot();
        return;
    }
    ....
 }

日志如下：

getPixel:0
getPixel:0
getPixel:0
getPixel:0
getPixel:0
getPixel:0
getPixel:0
getPixel:0
getPixel:0
getPixel:0
getPixel:0
...

Answer 1

这行不通。

要了解原因，请记住 SurfaceView Surface 是具有生产者-消费者关系的缓冲区队列。显示相机预览数据时，Camera 为生产者，系统合成器（SurfaceFlinger）为消费者。只有生产者可以向 Surface 发送数据——一次只能有一个生产者——并且只有消费者可以检查来自 Surface 的缓冲区。

如果您自己在 Surface 上绘图，那么您的应用将成为生产者，您将能够看到您所绘制的内容，但仅限于在onDrawFrame() 中。当它返回时，GLSurfaceView 会调用eglSwapBuffers()，并将您绘制的帧发送给消费者。 （从技术上讲，由于缓冲区位于池中并被重复使用，您 可以 读取 onDrawFrame() 之外的帧；但您正在读取的将是 1-2 帧之前的陈旧数据，而不是你刚刚画的那个。）

您在这里所做的是从从未绘制过且未连接到 SurfaceView 的 EGLSurface 读取数据。这就是为什么它总是读取黑色。 Camera 不会“绘制”预览，它只是获取 YUV 数据的缓冲区并将其推入 BufferQueue。

如果您想使用 GLSurfaceView 显示预览和捕获帧，请参阅 Grafika 中的“显示 + 捕获相机”示例。您可以将 MediaCodec 代码替换为 glReadPixels()（请参阅 EglSurfaceBase.saveFrame()，它看起来非常像您所拥有的）。