我在 Windows 下使用 openCV 1.1pre1。 我有一个网络摄像机，我需要从 openCV 抓取帧。该摄像机可以通过 RTSP 流式传输标准 mpeg4 流或通过 http 传输 mjpeg。 我看到很多线程都在谈论将 ffmpeg 与 openCV 一起使用，但我无法使其工作。
如何使用 openCV 从 IP 摄像机中抓取帧？
谢谢
安德烈亚
【问题讨论】：
标签： c++ windows networking opencv ffmpeg
使用 ffmpeglib 连接流。
这些功能可能很有用。但是请查看文档
av_open_input_stream(...);
av_find_stream_info(...);
avcodec_find_decoder(...);
avcodec_open(...);
avcodec_alloc_frame(...);
你需要一点算法来获得一个完整的框架， 可以在这里找到
http://www.dranger.com/ffmpeg/tutorial01.html
获得一帧后，您可以将视频数据（如果需要，针对每个平面）复制到 IplImage 是一个 OpenCV 图像对象。
您可以使用类似...的方式创建 IplImage
IplImage *p_gray_image = cvCreateImage(size, IPL_DEPTH_8U, 1);
一旦有了 IplImage，就可以执行 OpenCV 库中可用的各种图像操作
【讨论】：
OpenCV 可以在 FFMPEG 支持下编译。来自./configure --help：
--with-ffmpeg use ffmpeg libraries (see LICENSE) [automatic]
然后您可以使用 cvCreateFileCapture_FFMPEG 创建一个 CvCapture，例如相机的 MJPG 流的 URL。
我用它从 AXIS 相机中抓取帧：
CvCapture *capture =
cvCreateFileCapture_FFMPEG("http://axis-cam/mjpg/video.mjpg?resolution=640x480&req_fps=10&.mjpg");
【讨论】：
我只是这样做：
CvCapture *capture = cvCreateFileCapture("rtsp://camera-address");
还要确保这个 dll 在运行时可用，否则 cvCreateFileCapture 将返回 NULL
opencv_ffmpeg200d.dll
相机也需要允许未经身份验证的访问，通常通过其网络界面设置。 MJPEG 格式可以通过 rtsp 工作，但 MPEG4 不能。
第
硅
【讨论】：
opencv_ffmpeg200d.dll中的200部分
opencv_ffmpeg300.dll 复制到我的项目文件夹中。要打开我正在使用的流VideoCapture cap("rtsp://abc:123@192.168.178.101/live0.264");
#include <stdio.h>
#include "opencv.hpp"
int main(){
CvCapture *camera=cvCaptureFromFile("http://username:pass@cam_address/axis-cgi/mjpg/video.cgi?resolution=640x480&req_fps=30&.mjpg");
if (camera==NULL)
printf("camera is null\n");
else
printf("camera is not null");
cvNamedWindow("img");
while (cvWaitKey(10)!=atoi("q")){
double t1=(double)cvGetTickCount();
IplImage *img=cvQueryFrame(camera);
double t2=(double)cvGetTickCount();
printf("time: %gms fps: %.2g\n",(t2-t1)/(cvGetTickFrequency()*1000.), 1000./((t2-t1)/(cvGetTickFrequency()*1000.)));
cvShowImage("img",img);
}
cvReleaseCapture(&camera);
}
【讨论】：
我附上了用于抓取帧的 C++ 代码。它需要 OpenCV 2.0 或更高版本。该代码使用 cv::mat 结构，该结构优于旧的 IplImage 结构。
#include "cv.h"
#include "highgui.h"
#include <iostream>
int main(int, char**) {
cv::VideoCapture vcap;
cv::Mat image;
const std::string videoStreamAddress = "rtsp://cam_address:554/live.sdp";
/* it may be an address of an mjpeg stream,
e.g. "http://user:pass@cam_address:8081/cgi/mjpg/mjpg.cgi?.mjpg" */
//open the video stream and make sure it's opened
if(!vcap.open(videoStreamAddress)) {
std::cout << "Error opening video stream or file" << std::endl;
return -1;
}
//Create output window for displaying frames.
//It's important to create this window outside of the `for` loop
//Otherwise this window will be created automatically each time you call
//`imshow(...)`, which is very inefficient.
cv::namedWindow("Output Window");
for(;;) {
if(!vcap.read(image)) {
std::cout << "No frame" << std::endl;
cv::waitKey();
}
cv::imshow("Output Window", image);
if(cv::waitKey(1) >= 0) break;
}
}
更新您可以从 H.264 RTSP 流中抓取帧。查找您的相机 API 以获取详细信息以获取 URL 命令。例如，对于 Axis 网络摄像机，URL 地址可能是：
// H.264 stream RTSP address, where 10.10.10.10 is an IP address
// and 554 is the port number
rtsp://10.10.10.10:554/axis-media/media.amp
// if the camera is password protected
rtsp://username:password@10.10.10.10:554/axis-media/media.amp
【讨论】：
counter++; 和 if (counter % 10 != 0) continue;，以便仅显示每 10 帧。这是因为帧的接收速度非常快，以至于 imshow(...) 将显示损坏/扭曲的图像。如果您只向 imshow(...) 提供每 10 帧，结果就可以了。如果 IP 摄像机以 30fps 提供 1080p，我只需要每 30 帧或 40 帧显示一次。
rtsp 协议对我不起作用。 mjpeg 第一次尝试。我假设它内置在我的相机中（Dlink DCS 900）。
在这里找到的语法： http://answers.opencv.org/question/133/how-do-i-access-an-ip-camera/
我不需要编译支持 ffmpg 的 OpenCV。
【讨论】：