在本教程中，我将展示如何使用OpenCV从文件或摄像头/摄像头捕获和播放视频。虽然OpenCV没有针对视频处理进行优化，但它提供了一个简单的API来播放视频。在我们的OpenCV程序中，我们所要做的就是从视频文件或摄像机中提取帧（图像）并以连续循环的形式显示它。

OpenCV的一个限制是它无法捕获视频中的任何声音。因此，必须使用另一个像FFmpeg这样的库来捕获视频文件或麦克风中的声音。

播放视频文件

在本节中，我将展示如何播放视频文件。首先，应通过将有效位置传递给视频文件来构造VideoCapture对象。然后应逐帧读取VideoCapture对象。最后，这些帧应按顺序显示在窗口中。以下是执行上述任务的示例OpenCV代码。

#include <opencv2/opencv.hpp>
#include <iostream>

using namespace cv;
using namespace std;

int main(int argc, char* argv[])
{
	//从路径读取视频
	VideoCapture cap("/My OpenCV Website/A Herd of Deer Running.mp4"); 
	
	//读取出错
	if (!cap.isOpened())  
	{
		cout << "Cannot open the video file" << endl;
		cin.get(); //等待键盘
		return -1;
	}
	
	//取消注释以下行以从视频的中间开始播放
 	//cap.set(CAP_PROP_POS_MSEC, 300); 
	
	//获取FPS
	double fps = cap.get(CAP_PROP_FPS); 
	cout << "Frames per seconds : " << fps << endl;
	
	namedWindow("Video", WINDOW_NORMAL); //创建窗口
	
	while (true)
	{
		Mat frame;
		bool status = cap.read(frame); //读取帧 

		//如果视频结束，退出循环
		if (!status) 
		{
			cout << "End of the video" << endl;
			break;
		}

		//在窗口中显示帧
		imshow("Video", frame);

		//等待1毫秒或用户按下ESC
		if (waitKey(1) == 27)
		{
			cout << "Stopped the video" << endl;
			break;
		}
	}
	return 0;
}

将上面的简单代码段复制并粘贴到IDE中并运行它。请注意，须在代码中将"/My OpenCV Website/A Herd of Deer Running.mp4"替换为计算机中视频的有效位置。

解说

让我们逐行解释上面的代码。

#include <opencv2/opencv.hpp>
#include <iostream> 

using namespace cv;
using namespace std;

这些是我们程序中使用的包含文件和命名空间。如需更多说明，请参阅载入并显示图像。

VideoCapture cap("/My OpenCV Website/A Herd of Deer Running.mp4"); 

这是VideoCapture类中可用的少数构造函数之一。此构造函数将打开视频文件并初始化VideoCapture对象，以便从指定文件中读取视频流。 此类的析构函数将使用打开的视频文件取消分配任何关联的内存。因此，你无需在程序中显式取消分配内存。

if (!cap.isOpened())  
{
	cout << "Cannot open the video file" >> endl;
	cin.get(); //等待键盘
	return -1;
}

如果之前对VideoCapture构造函数的调用成功，则cap.isOpened()函数将返回true。否则它将返回false。如果函数返回false，程序将向控制台输出一条消息，等待任何按键并退出程序，退出代码为-1。
在播放视频之前，必须检查VideoCapture对象是否已成功初始化以避免可能的崩溃。

//cap.set(CAP_PROP_POS_MSEC, 300); 

如果你想在中间开始播放视频，可以取消注释此行。你也可以在while循环中调用这个函数。

double fps = cap.get(CAP_PROP_FPS); 
cout << "Frames per seconds : " << fps << endl;

这两行将获得视频的帧速率并在控制台中打印。 你也可以在while循环中调用这个函数。

摘要

在上一节中，你学到了：

• 如何从文件加载视频
• 如何逐个读取视频的每个帧并将其显示在while循环的窗口中
• 如何在视频结尾处打破while循环
• 如果在视频结束前按下特定键，如何中断while循环

从摄像头获取视频

在本节中，你将学习如何从连接到个人计算机的摄像头获取视频。
该程序与上述程序的主要区别在于使用VideoCapture构造函数。在此程序中，你只需将摄像机的索引提供给VideoCapture对象的构造函数而不是视频文件名。以下是OpenCV示例代码。

#include <opencv2/opencv.hpp>
#include <iostream>

using namespace cv;
using namespace std;

int main(int argc, char* argv[])
{
	//打开默认摄像头
	VideoCapture cap(0);

	//如果不成功退出程序
	if (!cap.isOpened())  
	{
		cout << "Cannot open the video camera" << endl;
	cin.get(); //等待键盘
	return -1;
	} 

	double dWidth = cap.get(CAP_PROP_FRAME_WIDTH); //获取视频帧宽度
	double dHeight = cap.get(CAP_PROP_FRAME_HEIGHT); //获取视频帧高度

	cout << "Resolution of the video : " << dWidth << " x " << dHeight << endl;
 
	namedWindow("Camera"); //创建窗口
 
	while (true)
	{
		Mat frame;
		bool status = cap.read(frame); //读取图帧

		//如果失败跳出循环
		if (!status) 
			break;

		//显示图帧
		imshow("Camera", frame);
		
		//等待1毫秒或用户按下ESC键
		if (waitKey(1) == 27)
		{
			cout << "Stopped the video" << endl;
			break;
		}
	}

return 0;

}

将上面的简单代码段复制并粘贴到IDE中并运行它。 然后你应该在打开的窗口中看到相机输出。

解说

VideoCapture cap(0);

此行将使用默认摄像头和默认后端初始化VideoCapture对象。

VideoCapture::VideoCapture(int index) 
			
这是VideoCapture类中可用的少数构造函数之一。此构造函数初始化并打开由参数索引指定的摄像头。
您可以为参数索引传递0以使用连接到计算机的默认摄像头。如果您的计算机连接到多个摄像机，则可以使用正整数作为索引。
此类的析构函数将使用此对象取消分配任何关联的内存。因此，您无需在程序中显式取消分配内存。

	double dWidth = cap.get(CAP_PROP_FRAME_WIDTH); //获取视频帧宽度
	double dHeight = cap.get(CAP_PROP_FRAME_HEIGHT); //获取视频帧高度

	cout << "Resolution of the video : " << dWidth << " x " << dHeight << endl;

第一行将获得相机输出的帧的宽度（以像素为单位）。下一行将获得摄像机输出帧的高度。然后打印相机输出的分辨率（宽x高）。

所有其他代码行与第一个播放视频文件的程序相同。