Opencv读取摄像头卡顿

开发环境:Win10系统,罗技HD1080p高清摄像头,UE4_21,VS2017

开发原理:多线程中通过OpenCV对摄像头进行高清采集(1920*1080),然后显示到UMG中。

遇到问题:在2k采集模式下,画面卡顿厉害。

 

猜想1:是不是卡在采集后的图像cv::Mat往UTexture2D*填入时的问题,毕竟1920*1080个像素的拷贝。

实践:减小采集分辨率(640*480),然后cv::resize到1920*1080,再拷贝到1920*1080的UTexture2D* 中

结果:视频非常流畅,那么可以断言,跟图像据拷贝到UTexture2D*中这一步,就没关系了

 

猜想2:是不是摄像头采集的问题。有大佬说了,很多摄像头,在高分辨率的情况下都不到15帧,以MJPG格式解码能达到30帧。

实践:这一步当然去网上搜刮了。

         原理篇参阅Jetson TX1开发笔记(六):V4L2+OpenCV3.1以MJPG格式读取USB摄像头图像并实时显示

        

大致意思是这样的,该摄像头的YUV2输出格式只有一种640 x 480分辨率,而输出格式为MJPG有多种分辨率,如果想实现高清采集,需要通过MJPG格式进行采集。

那么,怎么设置采集模式呢?

毫无疑问,肯定在设置里面。看看网上大佬是怎么表演的吧。

     Python opencv 调用摄像头时设置以MJPG等编码格式获取视频

    


使用opencv读取和设置摄像头或视频属性代码如下。 

cv::VideoCapture cap;
cap.set(proID, value)
cap.get(proID)

其中,propId 的值为 0 - 18,19个值并不是每个都可以进行修改,每个值对应的属性以及功能如下如下: 

参数


功能/意义

CV_CAP_PROP_POS_MSEC

0

视频文件的当前位置(以毫秒为单位)或视频捕获时间戳

CV_CAP_PROP_POS_FRAMES

1

基于0的索引将被解码/捕获下一帧

CV_CAP_PROP_POS_AVI_RATIO

2

视频文件相对位置:0 - 电影的开始,电影的1 - 结束

CV_CAP_PROP_FRAME_WIDTH

3

视频里每一帧的宽

CV_CAP_PROP_FRAME_HEIGHT

4

视频里每一帧的高

CV_CAP_PROP_FPS

5

视频的帧速

CV_CAP_PROP_FOURCC

6

4个字符表示的视频编码器格式

CV_CAP_PROP_FRAME_COUNT

7

视频的帧数

CV_CAP_PROP_FORMAT

8

byretrieve()返回的Mat对象的格式

CV_CAP_PROP_MODE

9

指示当前捕获模式的后端特定值

CV_CAP_PROP_BRIGHTNESS

10

图像的亮度(仅适用于相机)

CV_CAP_PROP_CONTRAST

11

图像对比度(仅适用于相机)

CV_CAP_PROP_SATURATION

12

图像的饱和度(仅适用于相机)

CV_CAP_PROP_HUE

13

图像的色相(仅适用于相机)

CV_CAP_PROP_GAIN

14

图像的增益(仅适用于相机)

CV_CAP_PROP_EXPOSURE

15

曝光(仅适用于相机)

CV_CAP_PROP_CONVERT_RGB

16

表示图像是否应转换为RGB的布尔标志

CV_CAP_PROP_WHITE_BALANCE

17

目前不支持

CV_CAP_PROP_RECTIFICATION

18

立体摄像机的整流标志(注意:只有当前支持DC1394 v 2.x后端)

//1.打开摄像机设备(默认第一个)
cv::VideoCapture cap= cv::VideoCapture(0);
//2.一定要先设置采集格式!!!
cap.set(CV_CAP_PROP_FOURCC, cv::VideoWriter::fourcc('M', 'J', 'P', 'G'));
//3.然后再设置高清采集分辨率
cap.set(CV_CAP_PROP_FRAME_WIDTH, 1920);
cap.set(CV_CAP_PROP_FRAME_HEIGHT, 1080);

结果:流畅地一笔,自己去感受