[向各路专家提问]TransFormfilter 开发问题 (音视频同时播放阻塞在第一帧)

mmidd 2008-08-26 05:33:25
媒体文件:

音频:麦克录下的声音,经过mp3压缩
视频:摄像头采集,经过x264压缩

音视频混合存到一个文件中 (每个音视频sample分别加了区分包头写到文件)

目的:播放这个自制的文件

写了一个source filter 读取这个文件分离每个sample发送

写了一个transform filter 一个输入 pin 两个输出pin(一路音频,一路视频)
输入pin解析每个sample 区分音视频发送到对应的输出pin中 (用pSample->Delive方法)

Graph render我的transform filter的两个输出pin

出现问题:

只render 我的 音频,或视频,播放文件正常。
两个输出pin一起render 只能播放一帧视频后程序阻塞,我跟踪阻塞位置是 DoBufferProcessingLoop 的 GetDeliveryBuffer

我将两个输出pin都改成输出视频,正常,可以输出两个视频窗口。

音频打时间戳视频不打 , 视频打时间戳音频不打,音视频都不打时间戳,音视频打时间戳为0或单独一个为0等任何组合都试过了,还只能播放一帧。

是哪里出了问题呢?
...全文
171 10 打赏 收藏 举报
写回复
用AI写文章
10 条回复
切换为时间正序
请发表友善的回复…
发表回复
UDX协议 2008-09-04
  • 打赏
  • 举报
回复
说白了,要音频先render.
Carmack Jiang 2008-09-03
  • 打赏
  • 举报
回复
src->avi splitter->decompressor->video render
->directsound render
xjfox 2008-09-03
  • 打赏
  • 举报
回复
都只放音频可以放么?如果能放,那就是音视频同步有问题了,重点还是时间戳
UDX协议 2008-08-29
  • 打赏
  • 举报
回复
时间戳的问题。

你要保证音聘先Render第一侦就可以了。
xjfox 2008-08-28
  • 打赏
  • 举报
回复
音视频各自都需要一个数据线程。不知道你是在哪里实现创建两个数据线程的。看样子你的source filter是push方式的,那应该有一个数据线程,transform filter又具体做了什么,楼主再描述详细一点
sxcong 2008-08-28
  • 打赏
  • 举报
回复
不用transform ,直接把source连到render上试试
mmidd 2008-08-28
  • 打赏
  • 举报
回复
谢谢楼上!可以参考
还有什么说法吗
mmidd 2008-08-28
  • 打赏
  • 举报
回复
transform filter 的input pin的receive 方法中分析sample并分别发送到音视频的输出pin中 hr = tAudioOutpin->Deliver(pSample);方法发送
每个transform filter的输出pin定义了COutputQueue pOutputQueue 在Deliver中是用 m_pOutputQueue->Receive(pMediaSample);
mmidd 2008-08-27
  • 打赏
  • 举报
回复
无人问津 贴!
Jartru 2008-08-27
  • 打赏
  • 举报
回复
可能是source filter实现有问题,这种情况可以把source filter和transform filter合在一起,用一个独立的线程读取数据,将音、视频分离后的数据分别放到两个不同缓存区,对应的输出PIN从缓存区读取数据后往下发送。
缓存区要做好互斥,要不很容易死锁!

内容概要:本文针对质子交换膜燃料电池(PEMFC)在动态压力工况下的最大功率点跟踪(MPPT)问题,提出了一种压力工况协同调控下的自适应高阶滑模控制策略,并基于Simulink平台完成了系统建模与仿真实现。该策略融合高阶滑模控制的强鲁棒性与自适应机制的参数在线优化能力,有效克服了PEMFC系统固有的非线性、外部扰动及工况时变性等挑战,实现了对最大功率点的快速、精确与稳定跟踪。研究内容涵盖控制策略的理论设计、李雅普诺夫稳定性分析、自适应律构建以及在多种动态工况下的仿真实验验证,结果表明该方法相较于传统控制策略具有更快的动态响应速度、更小的稳态振荡以及更强的抗干扰能力,显著提升了PEMFC系统的能量转换效率与运行稳定性。; 适合人群:具备一定控制理论基础和Simulink仿真经验,从事新能源发电系统、燃料电池控制、电力电子变换或先进控制算法研究的研发人员及高校研究生。; 使用场景及目标:①应用于燃料电池发电系统的高性能最大功率点跟踪控制设计;②为解决强非线性、多扰动耦合的能源系统提供先进的自适应鲁棒控制方案;③通过Simulink仿真验证高阶滑模与自适应控制算法的有效性,服务于科研项目攻关或工程原型开发。; 阅读建议:建议读者结合Simulink模型同步学习,重点关注控制律设计原理、自适应机制实现方式及仿真结果对比分析部分,并可通过与传统滑模控制进行对比,深入理解该策略在鲁棒性与动态性能上的优越性。
下拉可见数据集可视化效果示意。 【数据集概况】 · 检测类别(中文):[滴落物(Drop)] · 训练集:2021 张 · 验证集:128 张 · 测试集:42 张 · 总计:2191 张 该数据集聚焦于工业生产环境中地面或设备表面出现的各类滴落物检测,通过多角度、多光照条件下的图像采集,全面覆盖了不同形态、颜色和材质的滴落物样本。数据集真实还原了车间地面、金属板、木质结构等复杂背景下的实际场景,为自动化巡检系统提供了高价值的视觉依据,有助于实现对潜在污染源或泄漏点的早期识别与预警。... 【训练曲线与评估图】 【模型训练配置】 参数 | 值 模型 | yolo26n 训练轮数 | 100 epochs 输入尺寸 | 640x640 批次大小 | 24 优化器 | auto 初始学习率 | 0.01 训练设备 【关键指标汇总】 训练了 71 个 epoch,最终轮指标: 指标 | 数值 mAP50 | **0.8949** mAP50-95 | 0.5139 Precision | 0.8991 Recall | 0.8527 train/box_loss | 0.8544 train/cls_loss | 0.4842 val/box_loss | 1.5612 val/cls_loss | 0.6862 【训练过程分析】 71 轮训练后 mAP50 为 0.8949,模型基本收敛但还有提升余地。Loss 曲线下降正常,后期趋于平缓。mAP50-95 为 0.5139,和 mAP50 差距 0.38,定位精度是主要短板。 【模型性能评估】 Precision 0.8991、Recall 0.8527,精度高于召回,存在一定漏检。 【预测效果展示】 验证集预测效果较好,检测框基本准确覆盖滴落物,置信度整体偏高。 【改进建议】 1. 增强难例挖掘:在大规模数据中筛选误检...
【2026年华为杯D题】山区洪涝灾害下无人机运输与通信协同优化(思路、代码、论文,持续更新)内容概要:本文围绕山区洪涝灾害背景下无人机在运输与通信任务中的协同优化问题展开研究,旨在通过数学建模与算法设计解决复杂地理环境下的应急响应难题。文中提出了综合考虑无人机飞行路径规划、物资投送效率、通信中继覆盖能力及多机协同控制的优化模型,并结合智能优化算法(如灰狼优化算法、鲸鱼算法等)进行求解,确保在灾情紧急、基础设施受损的情况下实现高效、可靠的救援支持。研究涵盖了从任务建模、约束条件设定到多目标优化框架构建的全过程,强调了算法在实际场景中的鲁棒性与适应性。; 适合人群:具备一定编程基础和运筹优化知识,从事应急管理、无人机应用或智能算法研究的研发人员及高校研究生。; 使用场景及目标:①应对山区洪涝等自然灾害时的无人机应急物流与通信保障;②提升多无人机系统在复杂环境下的协同作业能力,优化路径规划与资源分配策略;③为相关科研项目提供可复现的算法模型与仿真代码参考。; 阅读建议:建议结合文中提供的Matlab代码进行实践操作,重点关注多目标优化模型的构建逻辑与智能算法的实现细节,同时可参照其他类似无人机路径规划案例加深理解,以实现理论与应用的有效结合。

2,554

社区成员

发帖
与我相关
我的任务
社区描述
专题开发/技术/项目 多媒体/流媒体开发
社区管理员
  • 多媒体/流媒体开发社区
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧