dshow videorender 直接接收yuv

unsway123 2013-12-31 04:36:59

用dshow开发camera的应用程序，实现预览功能后，发现预览cpu的占用率很高，后来通过debug，发现占用cpu占用率高的原因是因为YUV->RGB的转换。
我的显示驱动是支持OVERLAY的，支持两种OVERLAY,YUVoverlay,RGBoverlay,理想的状态下，从capturefilter传递过来的camera数据（yuv）直接传递给videorender,videorender通过ddraw来创建一个YUVoverlay,然后直接显示。

但是实际测试的结果是videorender永远都是创建一个RGBoverlay,肯定yuv的数据放到了RGB的表面，videorender或许就给我转了格式了。

现在预览的时候cpu占用率高，加上录像，还有录音，导致我在录像的时候有丢帧的现象，格外的录像的时候cpu占用率太高了，都到了%80多了，所以考虑到从根本上解决这个问题，只能够让videorender能够直接接收yuv数据，创建YUVoverlay

在微软的文档上看过文档，
大致上的意思是videorender在第一次协商的时候是需要连接和主屏幕格式一样的格式，一般就是RGB,当run了之后，再通过协商新的格式，实现动态格式改变

大家都有何见解

...全文

196 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

unsway123 2014-01-02

打赏
举报

回复

咋没人呢。顶起

videorenderer evr for linux. QT 编译环境下的EVR视频处理模块。

跑步： python flow --model cfg / yolo.cfg --load bin / yolo.weights --demo fileName.mp4 --gpu 1.0 --saveVideo

WebRTC源码分析1视频显示分类： google webRTC媒体引擎 2012-07-22 21:16 382人阅读评论(0) 收藏举报来源：http://blog.csdn.net/lezhiyong WebRTC是google一项在浏览器内部进行实时视频和音频通信的技术，其他关于WebRTC具体介绍和来源，大家google一下基本能知道，Webrtc里面的系统架构清晰精妙，代码风格良好，如此好的东西能开源出来，无论是学习还是使用，我们受益匪浅。 Webrtc的底层的结构相当清晰，就视频来说分视频采集、视频处理、视频编解码、视频显示、视频录制几个典型模块。所属模块：video_render_module 接口路径：webrtc\trunk\src\modules\video_render\main\interface\video_render.h 代码路径：webrtc\trunk\src\modules\video_render\main\source 通过video_render.hVideoRender提供的对外接口完成render的创建和调用，代码结构如下图所示：可见video_render模块通过继承IVideoRender实现多操作系统以及第三方数据的支持，通过继承IVideoRenderWin实现D3D和DirectDraw支持。最后通过VideoRender提供的接口给应用层调度。 video_render提供的功能挺强大的，支持插入字幕，支持插入图片、支持一个视频窗口显示多路视频，支持D3D,DDRAW,支持多操作系统，这些功能足够胜任日常使用了。关于video_render模块VideoRender的使用方法，可以从webrtc\trunk\src\modules\video_render\main\test\testAPI目录下的testAPI.cpp文件了解得清清楚楚。大致步骤： 1、创建VideoRender对象： VideoRender* renderModule= NULL; renderModule =VideoRender::CreateVideoRender(myId, window, false, windowType); VideoRenderCallback* renderCallback0 = renderModule->AddIncomingRenderStream(streamId0,0, 0.0f, 0.0f, 1.0f, 1.0f); assert(renderCallback0 != NULL); 2、获取VideoRenderCallback并通过renderModule->StartRender启动render const int streamId0 = 0; VideoRenderCallback* renderCallback0 = renderModule->AddIncomingRenderStream(streamId0,0, 0.0f, 0.0f, 1.0f, 1.0f); error = renderModule->StartRender(streamId0); 3、调用RenderFrame逐帧显示 renderCallback0->RenderFrame(streamId0, videoFrame0); 4、停止render error = renderModule->StopRender(streamId0); error = renderModule->DeleteIncomingRenderStream(streamId0);

webrtc android capture 上一篇发现视频采集有问题自己的客户端是2018年、2017年的主干版本已经废弃。大神做了修改，但是在我这里会崩溃本想升级下，发现 VideoRender 没了，尝试使用新api，但是信令有问题，所以继续在我的老客户端上使劲。跑了下老版本webrtc的android 采集例子，今天修改了下，采集ok了，但是绿屏使用webrtc 做Android视频采集 websocket 信令调试的原因，新版webrtc api 调不通流程所以考虑恢复使用了大神工程里自带的老的库老库使用 render 渲染，新库没了这个类老库有i420fra

本文介绍了基于org.webrtc.VideoRender.I420Frame的YUV转换方案，并提供了相应的源代码示例。通过这种方案，我们可以将YUV格式的视频数据转换为RGB格式，以满足不同应用场景对视频数据格式的要求。在实现视频通信功能时，常常需要对视频数据进行格式转换，其中最常见的是将YUV格式的视频数据转换为其他格式。在本文中，我们将介绍一种基于org.webrtc.VideoRender.I420Frame的YUV转换方案，并提供相应的源代码示例。至此，YUV转换为RGB的过程已完成。

多媒体/流媒体开发

2,543

社区成员

20,281

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章