视频播放帧率的问题

[baidu_34630879]

视频播放的时候帧率是如何控制的？
比如Opencv，每次读一个mat对象，处理后再显示出来。一个每秒24帧的视频，按照普通方法应该是设置一个定时器，到时间后处理一个mat对象，24帧也就是46.6毫秒处理一个mat。可是这样就要考虑46.6毫秒内程序能不能处理完这个mat并让它显示。请问像大型播放器是如何做精准的帧率控制的？难道是预先处理了放那里等着显示？但是预留的时间总会用完的。谢谢！

[BeanJoy]

我猜想可以这样： 记下开始播放的时间点A，然后开个定时器，每隔46.6毫秒响应一次。响应时，时间点为B，然后计算（B-A)的时长，然后计算这个时候实际应该播放第几帧画面，而并不是依次播放每一帧画面。正常情况下，每一帧都可以播放。如果处理某一帧太费时，比如某一帧就处理了1秒，那么下一次播放就不应该播放下一帧，而是应该播放此时应该播放的那一帧。 这样，如果播放一部2小时的电影，那么肯定是会有2小时内播放完，而且每隔46.6毫秒刷新一帧。 以上是一种方案，但还可以是这样： 播放完一帧后，计算下一帧应该是什么时候开始播放，比如下一帧应该再等45毫秒再播放，那么就Sleep(45)，然后开始播放下一帧。但如果这一帧处理时间过长，而计算出来下一帧应该等待播放的时间却为负的，那么就不应该播放下一帧，也不应该Sleep，而需要直接再计算播放下下帧需要等待播放的时间，如果等待时间为0，直接播放，等待时间为正数，直接Sleep，然后继续播放。

[baidu_34630879]

引用 1 楼 BeanJoy 的回复:

我猜想可以这样： [此处省略。。。]后继续播放。

感谢回复！ 你所提出这两个方法都是要付出丢帧的代价，每秒24帧已经是极限了，否则会有“卡顿”现象。另外，我测试一个mat做人脸识别需要200毫秒以上，整个视频必须每个mat都做识别处理，才不会有遗漏。

[BeanJoy]

引用 2 楼 baidu_34630879 的回复:

[quote=引用 1 楼 BeanJoy 的回复:] 我猜想可以这样： [此处省略。。。]后继续播放。

感谢回复！ 你所提出这两个方法都是要付出丢帧的代价，每秒24帧已经是极限了，否则会有“卡顿”现象。另外，我测试一个mat做人脸识别需要200毫秒以上，整个视频必须每个mat都做识别处理，才不会有遗漏。[/quote] 我说的是视频播放的方式，不包括人脸识别。 如果处理每帧人脸识别都要耗时200ms左右，你可能需要考虑另外的方式。可以先走个流程，先处理视频每帧的人脸识别，然后再播放，播放的时候将之前的处理结果叠加到视频上即可。

[shiter]

opencv做一些人脸识别是有一些延迟的，一两秒似乎都算正常的吧。 高级的face++什么的人家弄的延迟比较小，这个都是核心算法，做了很多优化，希望有高手过来给我们分享一下