用相机对获取的帧进行实时处理

珊珊来吃 2017-05-25 04:54:50

想做三维目标跟踪。
我现在想用xtion对获取的每一帧图像进行实时的滤波，点云配准等，但是没有思路，opencv中有类似的图像实时处理的程序吗？求教

...全文

1281 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

使用AVFoundation框架中的AVCaptureSession和AVCaptureVideoPreviewLayer类，你可以设置相机预览界面，并显示相机捕捉到的实时图像。具体步骤如下：创建一个AVCaptureSession对象。使用AVCaptureDevice类获取并设置后置摄像头作为输入设备。创建一个AVCaptureVideoPreviewLayer对象，并将其添加到视图层级中，以显示相机预览界面。实时图像处理为了寻找边缘，你可以使用AVCaptureVideoDataOutput和AVCaptureVideoDataOutputSampleBufferDelegate代理来捕捉相机实时的视频帧。具体步骤如下：将AVCaptureVideoDataOutput添加到AVCaptureSession中，并设置代理。实现AVCaptureVideoDataOutputSampleBufferDelegate代理方法的回调，在回调方法中获取实时的视频帧数据。使用Core Image框架或自定义图像处理算法来处理视频帧数据，以寻找图像中的边缘。

FlyCapture相机在mfc界面picture控件上显示实时监控，包括打开相机，获取相机帧，使用settimer定时器连续显示帧图像达到实时监控的目的，避免使用循环获取帧使程序陷入死循环，同时文件中还包括如何将opencv的Mat图像显示到mfc的picture控件中使相机监控可以在mfc上显示。本程序将相机获取的帧转化为Mat和rgb格式，方便大家进行后续处理操作。

配置好相关库代码直接可用（多线程读取图像并显示）

yolov5、rcnn、alexnet、densenet，只要你的网络调用相机延迟严重，都可以使用tensorrt抓换模型，进行加速推理，在FPS很高的情况下也能实时处理获取的帧。

多线程编写相机与后期的图像处理目的是读取实时帧进行处理分为两个线程子线程进行图像的刷新主进程抓取图像进行处理。

数据库及相关技术

1,178

社区成员

18,939

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章