FFmpeg 合成视频

灰太狼的星 2013-12-18 04:15:07

谁知道FFmpeg怎么将本地图片合成视频吗？最近在做这个，我想要C代码，不要命令，网上都是命令的形式做的，求大神指导？

...全文

1013 17 打赏收藏转发到动态举报

写回复

用AI写文章

17 条回复

切换为时间正序

请发表友善的回复…

发表回复

oldmtn 2015-08-25

打赏
举报

引用 16 楼 invinjun 的回复:

Vcamera sdk 直接执行命令感觉简单些

ffmpeg命令行也可以现在常见的方法是： 1. 外面加个壳，调用ffmpeg.exe的命令行执行 2. 直接调用ffmpeg的库进行图片合成视频

老干妈秦莞尔 2015-01-13

打赏
举报

Vcamera sdk 直接执行命令感觉简单些

baidu_23470469 2014-11-26

打赏
举报

LZ这个问题解决了吗，求指教，头疼了一星期了 940225899@qq.com

XIAOMENGH 2014-08-04

打赏
举报

楼主，估计你已经弄好了，能帮下吗？

蓄丰 2014-07-31

打赏
举报

正在关注这个，路过，学习。发现技术密度非常高，还是从雷霄骅学习过程开始吧。

dzhiheng 2014-01-03

打赏
举报

我也正在做能私聊下吧 1038315291

灰太狼的星 2013-12-26

打赏
举报

很感谢你细心的帮助，让我学到了很多

匹夫 2013-12-25

打赏
举报

通过ffmpeg编码h264还是比较别扭的，就是即使有h264了，它也需要设置更多的参数，avcodec_open(或者avcodec_open2)才能成功，你可以先试试mpeg4的编码，后缀存成m4v，vlc播放器就可以直接播放 h264直接调用x264库编可能更方便一些，后缀h264时，vlc播放器可以播放

匹夫 2013-12-25

打赏
举报

引用 8 楼 lvyunxing 的回复:

你碰到过codec = avcodec_find_encoder(CODEC_ID_H264);其中codec总是空的，这个
avcodec_init();
	avcodec_register_all();
两句话也加了，还是为空，但是codec = avcodec_find_decoder(CODEC_ID_H264);这个可以，不为空。求救

ffmpeg里默认没有h264编码，有h264解码，所以就是你的这个现象编译ffmpeg时，把x264带进去，才会是你想要的结果

灰太狼的星 2013-12-23

打赏
举报

感谢你，这么细心给我解释。我QQ:1101150926,我们可以私下交流。

灰太狼的星 2013-12-23

打赏
举报

你碰到过codec = avcodec_find_encoder(CODEC_ID_H264);其中codec总是空的，这个

avcodec_init();
	avcodec_register_all();

两句话也加了，还是为空，但是codec = avcodec_find_decoder(CODEC_ID_H264);这个可以，不为空。求救

雷霄骅 2013-12-20

打赏
举报

我总结的教程 [总结]FFMPEG视音频编解码零基础学习方法

灰太狼的星 2013-12-20

打赏
举报

感谢你们的帮助，我是做Android 的，现在有个问题是我从SDCard中读取的图片或是Bitmap对象的图片数据怎样转成AVFrame->data[0]所需要的数据。这种转格式完全不会，网上这篇文章（http://blog.csdn.net/eightdegree/article/details/7425635）跟我想要的类似，但是有点看不明白，

//将rgb图像数据填充rgb帧   
80.uint8_t * rgb_buff = new uint8_t[nDataLen];

中的nDataLen是什么样的格式不是很明白。

匹夫 2013-12-20

打赏
举报

引用 5 楼 lvyunxing 的回复:

感谢你们的帮助，我是做Android 的，现在有个问题是我从SDCard中读取的图片或是Bitmap对象的图片数据怎样转成AVFrame->data[0]所需要的数据。这种转格式完全不会，网上这篇文章（http://blog.csdn.net/eightdegree/article/details/7425635）跟我想要的类似，但是有点看不明白，
//将rgb图像数据填充rgb帧   
80.uint8_t * rgb_buff = new uint8_t[nDataLen];
中的nDataLen是什么样的格式不是很明白。

AVFrame结构体前面几个数据比较常用 typedef struct AVFrame { #define AV_NUM_DATA_POINTERS 8 uint8_t *data[AV_NUM_DATA_POINTERS]; int linesize[AV_NUM_DATA_POINTERS]; uint8_t **extended_data; int width, height; 。。。。。 AVFrame表示视频时，你把data[0]指针理解为矩形的图片大小linesize[0] x height,(linesize[0] >= width), 然后假设你有的数据是bmp的(如BGRA格式，一个像素点占4个字节），也是一个矩形width x height的数据，你用memcpy每行拷贝数据复制到data[0]就ok了(也就是是看的链接里 avpicture_fill 的功能）可以看的data可能还有data[1] data[2] ... 我们常用编码视频的格式I420（YUV420）是三个plane的AVFrame，也就是要用到 data[0] data[1] data[2],分别表示Y、U、V三个分量。 RGB YUV这些基本概念还是需要很熟悉的知道的，至少能先熟悉用ffmpeg里的swscale

匹夫 2013-12-19

打赏
举报

http://download.csdn.net/download/himulakensin/5224802里相关ffmpeg的代码在afterglow里，正好里面没有没有出来图片的，后来我补了一个存图片的函数（jpg，png或者bmp等），但是没补读图片的。但大体上都差不多，都是照着format的例子写的，主要是要主要像jpg一般用颜色空间有些不一样（YUVJ422P？），里面类KsSwscale封装了一下，可以在各种颜色空间之间转换。一般视频编码需要I420的数据这里贴出存图片的函数，仅供参考，good luck

int pifu::ks_output_image(const char * e_filename, ks_image_t *src, int bitrate)
{
    char suffix[128];
    ks_get_suffix(e_filename, suffix);

    if (strcmp(suffix, ".jpg") != 0 &&
        strcmp(suffix, ".jpeg") != 0 &&
        strcmp(suffix, ".png") != 0 &&
        strcmp(suffix, ".bmp") != 0 )
        return -1;
    ks_av_register_all();   
    AVFormatContext * oc = NULL;

    /* allocate the output media context */
    avformat_alloc_output_context2(&oc, NULL, NULL, e_filename);
    if (!oc)        
        return -1;

    if (strcmp(suffix, ".jpg") == 0 || strcmp(suffix, ".jpeg") == 0 ){
        oc->oformat->video_codec = CODEC_ID_MJPEG;
    }
    else if (strcmp(suffix, ".png") == 0){
        oc->oformat->video_codec = CODEC_ID_PNG;
    }
    else if (strcmp(suffix, ".bmp") == 0){
        oc->oformat->video_codec = CODEC_ID_BMP;
    }
    else{
        av_free(oc);
        return -1;
    }

    AVCodecContext *c;
    AVStream *st;

    st = av_new_stream(oc, 0);
    if (!st) {
        av_free(oc);
        return -1;
    }

    av_dump_format(oc, 0, e_filename, 1);

    c = st->codec;
    c->codec_id = oc->oformat->video_codec;
    c->codec_type = AVMEDIA_TYPE_VIDEO;

    /* put sample parameters */
    if (bitrate == 0) 
        bitrate = src->i_width*src->i_height/5;
    c->bit_rate = bitrate; // 无用??
    /* resolution must be a multiple of two */
    c->width = src->i_width;
    c->height = src->i_height;

    c->time_base.den = 25;
    c->time_base.num = 1;
    c->gop_size = 12; /* emit one intra frame every twelve frames at most */

    if (c->codec_id == CODEC_ID_MJPEG)
        c->pix_fmt = PIX_FMT_YUVJ422P; 
    else if (c->codec_id == CODEC_ID_PNG)
        c->pix_fmt = PIX_FMT_RGB24;
    else if (c->codec_id == CODEC_ID_BMP)
        c->pix_fmt = PIX_FMT_BGR24;

    // some formats want stream headers to be separate
    if(oc->oformat->flags & AVFMT_GLOBALHEADER)
        c->flags |= CODEC_FLAG_GLOBAL_HEADER;

    AVCodec * codec = avcodec_find_encoder(c->codec_id);
    if (!codec) {
        av_free(oc);
        return -1;
    }

    /* open the codec */
    if (avcodec_open(c, codec) < 0) {
        av_free(oc);
        return -1;
    }
    //avcodec_encode_video    
    
    AVFrame * picture = ks_alloc_picture(c->pix_fmt, c->width, c->height);
    if (!picture) {
        avcodec_close(c);
        av_free(oc);
        return -1;
    }


    if (avio_open(&oc->pb, e_filename, AVIO_FLAG_WRITE) < 0) {
        avcodec_close(c);
        av_free(oc);
        return -1;           
    }

    av_write_header(oc);

    int video_outbuf_size = c->width*c->height*3 + 1000000;
    uint8_t *video_outbuf = (uint8_t *)av_malloc(video_outbuf_size);

    int csp_type;
    if (c->codec_id == CODEC_ID_MJPEG)
        csp_type = PIFU_CSP_YUVJ422P; 
    else if (c->codec_id == CODEC_ID_PNG)
        csp_type = PIFU_CSP_RGB;
    else if (c->codec_id == CODEC_ID_BMP)
        csp_type = PIFU_CSP_BGR;

    pifu::ks_image_t pic(csp_type, c->width, c->height);
    pifu::KsSwscale sws;
    sws.scale(src, &pic);

    if (csp_type == PIFU_CSP_YUVJ422P)
    {
        for (int i = 0; i < c->height; i++)
            memcpy(picture->data[0] + i*picture->linesize[0], pic.plane[0] + i*pic.i_stride[0], c->width);
        for (int i = 0; i < c->height; i++)
        {
            memcpy(picture->data[1] + i*picture->linesize[1], pic.plane[1] + i*pic.i_stride[1], c->width/2);
            memcpy(picture->data[2] + i*picture->linesize[2], pic.plane[2] + i*pic.i_stride[2], c->width/2);
        }
    }
    else
    {
        for (int i = 0; i < c->height; i++)
            memcpy(picture->data[0] + i*picture->linesize[0], pic.plane[0] + i*pic.i_stride[0], c->width*3);
    }

    int out_size = avcodec_encode_video(c, video_outbuf, video_outbuf_size, picture);

    /* if zero size, it means the image was buffered */
    if (out_size > 0) {
        AVPacket pkt;
        av_init_packet(&pkt); 
        pkt.pts = 0;
        pkt.flags |= AV_PKT_FLAG_KEY;
        pkt.stream_index= 0;
        pkt.data= video_outbuf;
        pkt.size= out_size;        
        av_interleaved_write_frame(oc, &pkt);
    } 

    av_write_trailer(oc);
    avcodec_close(c);
    av_free(picture->data[0]);
    av_free(picture);

    //avformat_free_context(oc);
    av_freep(&oc->streams[0]); 
    avio_close(oc->pb);    
    av_free(oc);
    av_free(video_outbuf);

    return 0;
    
    
}

灰太狼的星 2013-12-19

打赏
举报

恩恩，最近我在网上看了很多资料，基本调用，和步骤清楚了，现在又一个问题，怎么将获取的Bitmap货jpg图片转换成FFmpeg 的AVFrame数据，网上没有这方面的例子，有点崩溃了，都是从一个视频转换成一个新的视频。我现在是想读取SDCard中的图片，将这些图片编码成视频。不知道你做过这方面的没，有的话能否贴出来看看，小弟在此感激你啦！

匹夫 2013-12-19

打赏
举报

要完成你说的功能，自己写代码调用ffmpeg库实现还是需要不少代码的。首先需要ffmpeg库，如果是win系统，我用minggw编译的（最好都是最新的版本，出现过最新的mingw编译不过0.8.15（我以前用这个版本，想出现编译一个发现编译不过）版本的ffmpeg），如果是linux编译更简单一些。然后需要调用avformat（及avcodec）的函数解码图片，得到yuv的数据然后需要调用avcodec或者x264的库生成视频流最后用avformat打包成你想要的媒体格式 http://download.csdn.net/download/himulakensin/5224802里面有一些调用ffmpeg库的代码（ffmpeg 0.8版本的，ffmpeg后面版本更新的很快，但是只是多了一堆filter和扩展了一些格式的支持，以及有些函数名给换了，特别是读写文件的接口）你可以可以参考ffmpeg自己提供的简单的例子文件（mingw make install后会放在/local/share下