如何从相机读取缓冲区信息？

Question

我有一个 Qt 应用程序的特定部分，它应该从相机拍摄照片并使用 qzxing 库解码 QR 码。但是，我无法从缓冲区中取出照片！我知道解码运行良好，因为如果我将照片保存到文件中，然后立即将其作为 QImage 重新加载，一切正常（当然，除非程序在图像完全保存之前不会阻塞，所以它'将尝试解码半张图像，然后在第二次尝试解码第一张图像。）！

有很多人问这个问题，但似乎没有人有完整的答案。在过去的六个小时里，我一直在研究、猜测和测试。 QCameraImageCapture 的 Qt 文档存在，但根本没有讨论在 QImage 中传递缓冲区或强制转换。关于 SO 有一些答案有几个猜测将图像转换为 QImage，还有一些关于寻找缓冲区的猜测，但没有人有完整的答案。 Qt 示例文档甚至不完整，而且他们的示例项目（整个网络上的断开链接比比皆是）没有讨论它在做什么。

下面是一些测试代码的示例，这些代码使用 mainwindow.ui 运行和编译，该 UI 带有一个名为“pushButton”的按钮和一个名为“verticalLayout”的垂直布局。我做错了什么？

ma​​in.cpp

#include "mainwindow.h"
#include <QApplication>

int main(int argc, char *argv[])
{
    QApplication a(argc, argv);
    MainWindow w;
    w.show();

    return a.exec();
}

ma​​inwindow.h

#ifndef MAINWINDOW_H
#define MAINWINDOW_H

#include <QMainWindow>
#include <QImage>
#include <QCamera>
#include <QCameraInfo>
#include <QCameraViewfinder>
#include <QCameraImageCapture>
#include <qzxing/QZXing.h>

namespace Ui {
class MainWindow;
}

class MainWindow : public QMainWindow
{
    Q_OBJECT

public:
    explicit MainWindow(QWidget *parent = 0);
    ~MainWindow();

private slots:
    void cameraReceiver(int f,QVideoFrame u);
    void on_pushButton_clicked();

private:
    Ui::MainWindow *ui;
    QCameraViewfinder   *viewfinder;
    QCamera             *invCam;
    QCameraImageCapture *rawImage;
    QZXing              *decoder;
};

#endif // MAINWINDOW_H

ma​​inwindow.cpp

#include "mainwindow.h"
#include "ui_mainwindow.h"

MainWindow::MainWindow(QWidget *parent) :
    QMainWindow(parent),
    ui(new Ui::MainWindow)
{
    ui->setupUi(this);

    //build camera
    QList<QCameraInfo> cameras = QCameraInfo::availableCameras();
    foreach (const QCameraInfo &cameraInfo, cameras) {
        if (cameraInfo.deviceName() == "/dev/video0")
            invCam = new QCamera(cameraInfo);

    }

    //build decoder
    decoder = new QZXing;
    decoder->setDecoder(QZXing::DecoderFormat_QR_CODE);

    //build viewfinder and link to camera
    viewfinder = new QCameraViewfinder(this);
    viewfinder->setSizePolicy(QSizePolicy::Expanding,QSizePolicy::Expanding);
    ui->verticalLayout->addWidget(viewfinder);
    invCam->setViewfinder(viewfinder);

    //build image buffer, set camera mode to capture
    rawImage = new QCameraImageCapture(invCam);
    invCam->setCaptureMode(QCamera::CaptureStillImage);
    invCam->start();
    viewfinder->show();

    connect(rawImage,SIGNAL(imageAvailable(int,QVideoFrame)),this,SLOT(cameraReceiver(int,QVideoFrame)));
}

MainWindow::~MainWindow()
{
    delete ui;
}

void MainWindow::cameraReceiver(int f,QVideoFrame u) {

    QImage currentImage(u.bits(), u.width(), u.height(), u.bytesPerLine(), QVideoFrame::imageFormatFromPixelFormat(u.pixelFormat()));
    QString output = decoder->decodeImage(currentImage);
    qDebug() << output;

}

void MainWindow::on_pushButton_clicked()
{
    rawImage->setCaptureDestination(QCameraImageCapture::CaptureToBuffer);
    rawImage->capture();
}

编辑：目前在 Linux 环境中，相机是嵌入式的。取景器显示很好，就像我说的，我可以将图像捕获到 FILE 没有问题 - 相机工作得很好

编辑 2：我一在 SO 上发帖，就找到了答案：

“connect”调用应该使用“imageCaptured”信号：

connect(rawImage,SIGNAL(imageCaptured(int,QImage)),this,SLOT(cameraReceiver(int,QImage)));

然后，缓冲区中有一个 QImage。

void MainWindow::cameraReceiver(int f,QImage u) {

    QString output = decoder->decodeImage(u);
    qDebug() << output;
}

Answer 1

我看到你已经找到了自己的解决方案，但如果有人被它卡住了，这里有一个重要提示，如果有人需要使用QVideoFrame：

问题在于QVideoFrame 的错误用法。必须先映射框架，然后才能访问它：

void MainWindow::cameraReceiver(int f,QVideoFrame u) {
    if (u.isValid()) {
        if(u.map(QAbstractVideoBuffer::ReadOnly)) {//map the frame
            uchar * data = new uchar[u.mappedBytes()];//copy the buffer for QImage
            memcpy(data, u.bits(), u.mappedBytes());
            QImage image(data,
                         u.width(),
                         u.height(),
                         u.bytesPerLine(),
                         QVideoFrame::imageFormatFromPixelFormat(u.pixelFormat()),
                         simpleCleanupHandler,//handles the buffer cleanup
                         data);//required for the cleanup
            u.unmap();//unmap the frame

            QString output = decoder->decodeImage(currentImage);
            qDebug() << output;
        }
    }
}

由于QImage 不会复制缓冲区，您必须自己完成。 simpleImageCleanupHandler 看起来像这样：

static void simpleCleanupHandler(void *info)
{
    delete[] (uchar*)info;
}