3

我正在使用依赖于 Google 的 Grafika 存储库的实时流 API。我正在使用 Grafika EGLSurfaceBase 的 saveFrame 方法来允许用户在流式传输时捕获他的视频的静止图像。

https://github.com/google/grafika/blob/master/src/com/android/grafika/gles/EglSurfaceBase.java

实际捕获工作但显然在某些相机方向上图像被翻转。

我发现了很多与取自 OpenGL 纹理的倒置位图相关的问题——但大多数问题似乎是指绘制的图像并依赖于其中一个:

a) 在 OpenG 中翻转纹理。但就我而言,我正在使用实时流 API,因此翻转纹理以捕获图像实际上可能也会翻转视频流上的图像捕获。

或者

b) 在基于资源生成位图之后翻转位图。就我而言,我没有资源,我正在从字节缓冲区创建位图,并且不想复制它来翻转它。

这是 API 具有的基本 EGLSurfaceBase 方法 - 我会将相机方向传递给它,但我的问题是:

        String filename = file.toString();

    int width = getWidth();
    int height = getHeight();
    ByteBuffer buf = ByteBuffer.allocateDirect(width * height * 4);
    buf.order(ByteOrder.LITTLE_ENDIAN);
    GLES20.glReadPixels(0, 0, width, height,
            GLES20.GL_RGBA, GLES20.GL_UNSIGNED_BYTE, buf);
    GlUtil.checkGlError("glReadPixels");
    buf.rewind();

    BufferedOutputStream bos = null;
    try {
        bos = new BufferedOutputStream(new FileOutputStream(filename));
        Bitmap bmp = Bitmap.createBitmap(width, height, Bitmap.Config.ARGB_8888);
        bmp.copyPixelsFromBuffer(buf);
        bmp.compress(Bitmap.CompressFormat.PNG, 90, bos);
        bmp.recycle();
    } finally {
        if (bos != null) bos.close();
    }
    Log.d(TAG, "Saved " + width + "x" + height + " frame as '" + filename + "'");
}

我首选的解决方案是找到一种在 BMP.createbitmap 之前(或同时)翻转图像的方法。例如,我可以使用矩阵来翻转 glReadPixels 对像素的读取吗?

另一个注意事项/想法:也许在创建后翻转位图的成本是微不足道的,因为这依赖于用户交互,它不会经常发生而导致内存错误?

4

2 回答 2

7

您可以在 glReadPixels 之后反转 ByteBuffer。它非常快,因为它只是内存复制。我的测试表明,反向操作用时不到 10 毫秒。

这是一个可以的实现:

    private void reverseBuf(ByteBuffer buf, int width, int height)
{
    long ts = System.currentTimeMillis();
    int i = 0;
    byte[] tmp = new byte[width * 4];
    while (i++ < height / 2)
    {
        buf.get(tmp);
        System.arraycopy(buf.array(), buf.limit() - buf.position(), buf.array(), buf.position() - width * 4, width * 4);
        System.arraycopy(tmp, 0, buf.array(), buf.limit() - buf.position(), width * 4);
    }
    buf.rewind();
    Log.d(TAG, "reverseBuf took " + (System.currentTimeMillis() - ts) + "ms");
}
于 2015-07-10T08:02:30.000 回答
3

使用读取像素时,图像似乎总是翻转,因为 openGL 呈现缓冲区中的第一个像素位于左下角。有两种方法可以获得正确的顺序。

一种是将其倒置到缓冲区中,这可以在单独的缓冲区上完成,并且根本不会干扰您当前的绘图管道。如果您想在单独的线程上执行此操作或调整图像大小,这实际上可能是一个非常好的主意。这一切都可以在一个绘图调用中完成。

另一种是手动翻转数据,这并不像看起来那么糟糕,因为您只需要翻转行(列会很糟糕)。无论如何,您实际上可以在同一个缓冲区上执行此操作,您不需要缓冲区的副本。只需按顺序交换行,例如:保存第一行,用最后一行替换,用保存的行替换最后一行...然后继续第二行。

于 2015-02-06T12:41:20.667 回答