使用大华摄像头SDK读取的网络流数据怎么转化为opencv的Mat

2020-12-02 11:21:06 5.4k 阅读 AI 写同款 · GEO 优化AI 选题数据监测一键分发 ›

weixin_44875634 墨衍会员 · AI 创作全网分发关注 + 加入社区

UE5集成4K RTSP流：VLC、OpenCV与InVideo SDK方案深度评测实时流媒体协议（RTSP）是安防监控、视频会议等领域广泛使用的标准协议，其核心原理是通过RTP/RTCP在IP网络上传输音视频数据。在游戏开发与数字孪生等工程实践中，将外部RTSP视频流无缝集成到实时3D渲染引擎中，能极大扩展应用场景，如构建虚拟监控大屏或沉浸式演播室。然而，处理高码率的4K分辨率视频流对解码性能、线程管理和GPU资源调度提出了严峻挑战。本文聚焦于在虚幻引擎5（UE5）这一前沿实时渲染平台中，系统评测并实践了三种主流技术方案：基于开源VLC库的深度集成、利用OpenCV的轻量级抓取，以及采用阅读详情

我使用大华摄像头的SDK进行开发的时候，从SDK的回调函数接收到原始的图像信息，但是我想直接使用opencv读取内存中的数据，没有什么思路。各位大佬有没有什么好的方法。主要代码如下：



char fileName[30] = "originData";

void CALLBACK RealDataCallBackEx(LLONG lRealHandle, DWORD dwDataType, BYTE

	* pBuffer, DWORD dwBufSize, LONG param, LDWORD dwUser)

{

        //pBuffer指向的是数据缓冲区的头部，dwBufSize是数据的大小。

	switch (dwDataType)

	{

	case 0:

		//原始音视频混合数据

		printf("receive real data, param: lRealHandle[%p], dwDataType[%d], pBuffer[%p], dwBufSize[%d]\n",

			lRealHandle, dwDataType, pBuffer, dwBufSize);

		CLIENT_SaveRealData(lRealHandle, fileName);

		break;

。。。。。。。。

我如果直接将原始数据保存成文件，在PotPlayer可以直接打开，在PotPlayer上查看文件的编码属性如下：



[滤镜使用列表]

  (1) Built-in DVR Source

  (2) Built-in Video Codec/Transform

  (3) Enhanced Video Renderer(Custom Present)



[视频信息]

  视频编码： HEVC - Native D3D9 DXVA Decoder(VLD) - Intel(R) UHD Graphics 630

  输入格式： HEVC(24 bits)

  输入尺寸： 1280 × 960(1.33:1)

  输出格式： dxva

  输出尺寸： 1280 × 960(1.33:1)

  帧率： 25

  BitRate: 未知

根据终端打印的信息，每次接受的原始数据信息地址相同，但是大小每次会有差异。



receive real data, param: lRealHandle[000002BED5B0E580], dwDataType[0], pBuffer[000000CA6F2F3070], dwBufSize[4415]

receive real data, param: lRealHandle[000002BED5B0E580], dwDataType[0], pBuffer[000000CA6F2F3070], dwBufSize[4604]

receive real data, param: lRealHandle[000002BED5B0E580], dwDataType[0], pBuffer[000000CA6F2F3070], dwBufSize[32768]

receive real data, param: lRealHandle[000002BED5B0E580], dwDataType[0], pBuffer[000000CA6F2F3070], dwBufSize[1881]

receive real data, param: lRealHandle[000002BED5B0E580], dwDataType[0], pBuffer[000000CA6F2F3070], dwBufSize[173]

receive real data, param: lRealHandle[000002BED5B0E580], dwDataType[0], pBuffer[000000CA6F2F3070], dwBufSize[4291]

receive real data, param: lRealHandle[000002BED5B0E580], dwDataType[0], pBuffer[000000CA6F2F3070], dwBufSize[4711]

receive real data, param: lRealHandle[000002BED5B0E580], dwDataType[0], pBuffer[000000CA6F2F3070], dwBufSize[4655]

receive real data, param: lRealHandle[000002BED5B0E580], dwDataType[0], pBuffer[000000CA6F2F3070], dwBufSize[5007]

receive real data, param: lRealHandle[000002BED5B0E580], dwDataType[0], pBuffer[000000CA6F2F3070], dwBufSize[4577]

receive real data, param: lRealHandle[000002BED5B0E580], dwDataType[0], pBuffer[000000CA6F2F3070], dwBufSize[4609]

receive real data, param: lRealHandle[000002BED5B0E580], dwDataType[0], pBuffer[000000CA6F2F3070], dwBufSize[4656]

receive real data, param: lRealHandle[000002BED5B0E580], dwDataType[0], pBuffer[000000CA6F2F3070], dwBufSize[4533]

在这种情况下如何才能将原始的图像信息转换成opencv能处理的图片格式。各位大佬有没有什么思路。望指点一二。