【问题标题】:CVPixelBufferLockBaseAddress why? Capture still image using AVFoundationCVPixelBufferLockBaseAddress 为什么?使用 AVFoundation 捕获静止图像
【发布时间】:2013-10-21 17:18:23
【问题描述】:


我正在编写一个 iPhone 应用程序,它使用 AVFoundation 从相机创建静止图像。 阅读编程指南,我发现了几乎我需要做的代码,所以我正在尝试“逆向工程”并理解它。
我在理解将 CMSampleBuffer 转换为图像的部分时遇到了一些困难。
所以这是我所理解的,后来是代码。
CMSampleBuffer 表示内存中的一个缓冲区,其中存储了带有附加数据的图像。稍后我调用函数 CMSampleBufferGetImageBuffer() 来接收仅包含图像数据的 CVImageBuffer。
现在有一个函数我没看懂只能想象它的作用:CVPixelBufferLockBaseAddress(imageBuffer, 0);我不明白它是“线程锁”以避免对其进行多次操作还是锁定缓冲区地址以避免操作期间的更改(为什么要更改?..另一个帧,不是数据复制在另一个位置?)。其余的代码对我来说很清楚。
尝试在谷歌上搜索,但仍然没有找到任何有用的东西。
有人可以带点光吗?

-(UIImage*) getUIImageFromBuffer:(CMSampleBufferRef) sampleBuffer{

// Get a CMSampleBuffer's Core Video image buffer for the media data
CVImageBufferRef imageBuffer = CMSampleBufferGetImageBuffer(sampleBuffer); 

// Lock the base address of the pixel buffer 
CVPixelBufferLockBaseAddress(imageBuffer, 0); 

void *baseAddress = CVPixelBufferGetBaseAddress(imageBuffer); 

// Get the number of bytes per row for the pixel buffer
size_t bytesPerRow = CVPixelBufferGetBytesPerRow(imageBuffer); 
// Get the pixel buffer width and height
size_t width = CVPixelBufferGetWidth(imageBuffer); 
size_t height = CVPixelBufferGetHeight(imageBuffer); 

// Create a device-dependent RGB color space
CGColorSpaceRef colorSpace = CGColorSpaceCreateDeviceRGB(); 

// Create a bitmap graphics context with the sample buffer data
CGContextRef context = CGBitmapContextCreate(baseAddress, width, height, 8, 
bytesPerRow, colorSpace, kCGBitmapByteOrder32Little | kCGImageAlphaPremultipliedFirst); 
// Create a Quartz image from the pixel data in the bitmap graphics context
CGImageRef quartzImage = CGBitmapContextCreateImage(context); 
// Unlock the pixel buffer
CVPixelBufferUnlockBaseAddress(imageBuffer,0);

// Free up the context and color space
CGContextRelease(context); 
CGColorSpaceRelease(colorSpace);

// Create an image object from the Quartz image
UIImage *image = [UIImage imageWithCGImage:quartzImage];

// Release the Quartz image
CGImageRelease(quartzImage);

return (image);
}

谢谢, 安德烈亚

【问题讨论】:

    标签: iphone image ios4 avfoundation capture


    【解决方案1】:

    头文件说 CVPixelBufferLockBaseAddress 使内存“可访问”。我不确定这到底是什么意思,但如果你不这样做,CVPixelBufferGetBaseAddress 会失败,所以你最好这样做。

    编辑

    只要做就是简短的回答。为什么要考虑该图像可能不存在于主内存中,它可能存在于某个 GPU 上的某个纹理中(CoreVideo 也适用于 Mac),甚至与您期望的格式不同,因此您获得的像素实际上是复制。如果没有 Lock/Unlock 或某种 Begin/End 对,实现将无法知道您何时完成了重复像素,因此它们会被有效地泄漏。 CVPixelBufferLockBaseAddress 只是简单地提供 CoreVideo 范围信息,我不会太在意它。

    是的,他们可以简单地从 CVPixelBufferGetBaseAddress 返回像素并完全消除 CVPixelBufferLockBaseAddress。我不知道他们为什么不这样做。

    【讨论】:

    • 谢谢,这是一个线索。由于在被调用的函数中没有关于复制或创建的痕迹,我开始认为缓冲区是通过引用传递的,所以是一种冻结内存缓冲区。
    • 我添加了一些可能的原因。
    • 是的,我想主要原因是您的答案与我在 github 上找到的答案之间的中点。 “Image.lock(),它推迟所有缓冲区更新,直到再次调用 Image.unlock()”语言不是 ObjC,但含义应该是相同的。
    【解决方案2】:

    我想提供更多关于这个函数的提示,到目前为止我已经做了一些测试,我可以告诉你。
    当你得到基地址时,你可能得到了一些共享内存资源的地址。如果您打印基地址的地址,这一点就会变得清晰,这样做您可以看到在获取视频帧时基地址重复。
    在我的应用程序中,我以特定间隔拍摄帧并将CVImageBufferRef 传递给@987654322 @子类将图像中的缓冲区转换并保存在手机上。在操作开始转换CVImageBufferRef 之前,我不会锁定像素缓冲区,即使以更高的帧速率推送像素的基地址和CVImageBufferRef 缓冲区地址在创建NSOperation 之前和在它里面是相等的.我只保留CVImageBufferRef。我期待看到不匹配的引用,即使我没有看到它,我猜最好的描述是CVPixelBufferLockBaseAddress 锁定了缓冲区所在的内存部分,使其无法从其他资源访问,因此它将保留相同的数据, 直到你解锁它。

    【讨论】:

    • 你能提供一些示例代码来看看你在说什么吗?我在 CVPixelBufferGetBaseAddress 时对 CMSampleBufferRef 和随机 EXC_BAD_ACCESS 进行特定处理时遇到了一些问题。
    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2010-10-29
    • 1970-01-01
    • 2014-06-23
    • 1970-01-01
    相关资源
    最近更新 更多