gtk + opencv + ffmpeg + rtmp

ffmpeg -re -i /video_test/zz.mp4 -c copy -f flv rtmp://192.168.46.11:2020/hls/film  可以把视频推送到rtmp服务上(例如nginx)

#!/bin/sh

#ffmpeg -re -i /video_test/zz.mp4 -c copy -f flv rtmp://192.168.46.11:2020/live/film
#ffmpeg -re -i /video_test/zz.mp4 -c copy -f flv rtmp://192.168.46.11:2020/hls/film
#ffmpeg -re -loop 1 -i /video_test/1.jpg -f flv rtmp://192.168.46.11:2020/hls/film
#ffmpeg -f rawvideo -pix_fmt rgb24 -s 320x240 -i /tmp/MyPipe -s 320x240 -f flv rtmp://192.168.46.11:2020/hls/film

ffmpeg -hwaccel vdpau -hwaccel_device vdpau -f video4linux2 -s 640x480 -i /dev/video0 -vcodec libx264 -preset ultrafast -profile:v baseline -vlevel 3.0 -b:v 899k -r 15 -pix_fmt yuv420p -f flv rtmp://192.168.46.11:2020/hls/film
#ffmpeg -r 25 -f video4linux2 -s 640x480 -i /dev/video0 -vcodec libx264 -preset ultrafast -pix_fmt yuv420p -b 60k -ab 128k -f flv rtmp://192.168.46.11:2020/hls/film

#include <unistd.h>
#include <string.h>
#include <stdio.h>
#include <stdlib.h>
#include <stdint.h>
#include <errno.h>
#include <sys/types.h>
#include <sys/stat.h>
#include <fcntl.h>

#define MyPipe    "/tmp/MyPipe"

int main(int argc, char **argv)
{
    int iret;

    if (((iret=mkfifo(MyPipe, 0777))==-1) && (errno != EEXIST)) {
        printf("FiFo failed.");
        return -1;
    }

    int fd = open(MyPipe, O_WRONLY); //阻塞,知道 ffmpeg 打开pipe 为止.

    unsigned char data[320*240*3];
    unsigned char ivalue;
    while (1) {
        memset(data, ivalue++, sizeof(data));
        write(fd, data, sizeof(data));
        usleep(100000);
        printf("%d.\n", ivalue);
    }
    return 0;
}

这样既可以完成通过管道方式把视频流传递给ffmpeg, 完全利用ffmpeg的目前功能, 无须任何编码.







通过 GTK drawing_area + opencv Mat 可以显示从摄像头获取的每帧数据了, 那么想同时把每帧图像推送到 rmtp服务器上呢, 其实ffmpeg也是吧mp4中的每一帧取出来编码为flv然后送给RTMP服务器,那么编程需要查看 ffmpeg 的源代码,或者 参考官方范例 

跟踪官方示例使用 -loglevel 48, 参照代码,可以找到你所需要的一些参数的设置流程,精简ffmpeg.c代码,然后集成到用户程序中.

extern "C"
{
#include <libavcodec/avcodec.h>
#include <libavformat/avformat.h>
#include <libavfilter/avfiltergraph.h>
#include <libavfilter/buffersink.h>
#include <libavfilter/buffersrc.h>
#include <libavutil/opt.h>
#include <libavutil/pixdesc.h>
}

INCDIR += `pkg-config --cflags libavcodec libavformat libavutil`
LIBS += `pkg-config --libs libavcodec libavformat libavutil` -lavdevice -lavfilter -lswscale

http://www.cnblogs.com/youngt/p/3699689.html

http://blog.csdn.net/leixiaohua1020/article/details/12980423

ffmpeg一般情况下支持打开一个本地文件，例如“C:\test.avi”

或者是一个流媒体协议的URL，例如“rtmp://222.31.64.208/vod/test.flv”

其打开文件的函数是avformat_open_input()，直接将文件路径或者流媒体URL的字符串传递给该函数就可以了。

但其是否支持从内存中读取数据呢？这个问题困扰了我很长时间。当时在做项目的时候，通过Winpcap抓取网络上的RTP包，打算直接送给ffmpeg进行解码。一直没能找到合适的方法。因为抓取的数据包是存在内存中的，所以无法传递给avformat_open_input()函数其路径（根本没有路径= =）。当然也可以将抓取的数据报存成文件，然后用ffmpeg打开这个文件，但是这样的话，程序的就太难控制了。

后来经过分析ffmpeg的源代码，发现其竟然是可以从内存中读取数据的，代码很简单，如下所示：

1 AVFormatContext *ic = NULL; 2 ic = avformat_alloc_context();

1 unsigned char * iobuffer=(unsigned char *)av_malloc(32768); 2 AVIOContext *avio =avio_alloc_context(iobuffer, 32768,0,buffer,fill_iobuffer,NULL,NULL); 3 ic->pb=avio; 4 err = avformat_open_input(&ic, is->filename, is->iformat, &format_opts);

关键要在avformat_open_input()之前初始化一个AVIOContext，而且将原本的AVFormatContext的指针pb（AVIOContext类型）指向这个自行初始化AVIOContext。当自行指定了AVIOContext之后，avformat_open_input()里面的URL参数就不起作用了。示例代码开辟了一块空间iobuffer作为AVIOContext的缓存。

此外buffer就是期望读取数据的内存，fill_iobuffer则是读取buffer数据至iobuffer的回调函数。fill_iobuffer()形式（参数，返回值）是固定的，是一个回调函数，如下所示（只是个例子，具体怎么读取数据可以自行设计）。

 1 //把数据从buffer向iobuf传-------------------------  2 //AVIOContext使用的回调函数！  3 //注意：返回值是读取的字节数  4 //手动初始化AVIOContext只需要两个东西：内容来源的buffer，和读取这个Buffer到FFmpeg中的函数  5 int fill_iobuffer(void * buffer,uint8_t *iobuf, int bufsize){  6 int i;  7 for(i=0;i){  8 iobuf[i]=mediabuf_get();  9  } 10 return i; 11 }

http://blog.csdn.net/leixiaohua1020/article/details/12980423

从内存中读取/写入数据

更新记录（2014.7.24）：

1.为了使本文更通俗易懂，更新了部分内容，将例子改为从内存中打开。

2.增加了将数据输出到内存的方法。

从内存中读取数据

ffmpeg一般情况下支持打开一个本地文件，例如“C:\test.avi”

或者是一个流媒体协议的URL，例如“rtmp://222.31.64.208/vod/test.flv”

其打开文件的函数是avformat_open_input()，直接将文件路径或者流媒体URL的字符串传递给该函数就可以了。

但其是否支持从内存中读取数据呢？这个问题困扰了我很长时间。当时在做项目的时候，通过Winpcap抓取网络上的RTP包，打算直接送给ffmpeg进行解码。一直没能找到合适的方法。因为抓取的数据包是存在内存中的，所以无法传递给avformat_open_input()函数其路径（根本没有路径= =）。当然也可以将抓取的数据报存成文件，然后用ffmpeg打开这个文件，但是这样的话，程序的就太难控制了。

后来经过分析ffmpeg的源代码，发现其竟然是可以从内存中读取数据的，代码很简单，如下所示：

AVFormatContext *ic = NULL;
ic = avformat_alloc_context();

unsigned char * iobuffer=(unsigned char *)av_malloc(32768);
AVIOContext *avio =avio_alloc_context(iobuffer, 32768,0,NULL,fill_iobuffer,NULL,NULL);
ic->pb=avio;
err = avformat_open_input(&ic, "nothing", NULL, NULL);

关键要在avformat_open_input()之前初始化一个AVIOContext，而且将原本的AVFormatContext的指针pb（AVIOContext类型）指向这个自行初始化AVIOContext。当自行指定了AVIOContext之后，avformat_open_input()里面的URL参数就不起作用了。示例代码开辟了一块空间iobuffer作为AVIOContext的缓存。

fill_iobuffer则是将数据读取至iobuffer的回调函数。fill_iobuffer()形式（参数，返回值）是固定的，是一个回调函数，如下所示（只是个例子，具体怎么读取数据可以自行设计）。示例中回调函数将文件中的内容通过fread()读入内存。

//读取数据的回调函数-------------------------
//AVIOContext使用的回调函数！
//注意：返回值是读取的字节数
//手动初始化AVIOContext只需要两个东西：内容来源的buffer，和读取这个Buffer到FFmpeg中的函数
//回调函数，功能就是：把buf_size字节数据送入buf即可
//第一个参数(void *opaque)一般情况下可以不用
int fill_iobuffer(void * opaque,uint8_t *buf, int bufsize){
    if(!feof(fp_open)){
        int true_size=fread(buf,1,buf_size,fp_open);
        return true_size;
    }else{
        return -1;
    }
}

整体结构大致如下：

FILE *fp_open;

int fill_iobuffer(void *opaque, uint8_t *buf, int buf_size){
...
}

int main(){
    ...
    fp_open=fopen("test.h264","rb+");
    AVFormatContext *ic = NULL;
    ic = avformat_alloc_context();
    unsigned char * iobuffer=(unsigned char *)av_malloc(32768);
    AVIOContext *avio =avio_alloc_context(iobuffer, 32768,0,NULL,fill_iobuffer,NULL,NULL);
    ic->pb=avio;
    err = avformat_open_input(&ic, "nothing", NULL, NULL);
    ...//解码
}

将数据输出到内存

和从内存中读取数据类似，ffmpeg也可以将处理后的数据输出到内存。

回调函数如下示例，可以将输出到内存的数据写入到文件中。

//写文件的回调函数
int write_buffer(void *opaque, uint8_t *buf, int buf_size){
    if(!feof(fp_write)){
        int true_size=fwrite(buf,1,buf_size,fp_write);
        return true_size;
    }else{
        return -1;
    }
}

主函数如下所示。

FILE *fp_write;

int write_buffer(void *opaque, uint8_t *buf, int buf_size){
...
}

main(){
    ...
    fp_write=fopen("src01.h264","wb+"); //输出文件
    ...
    AVFormatContext* ofmt_ctx=NULL;
    avformat_alloc_output_context2(&ofmt_ctx, NULL, "h264", NULL);
    unsigned char* outbuffer=(unsigned char*)av_malloc(32768);

    AVIOContext *avio_out =avio_alloc_context(outbuffer, 32768,0,NULL,NULL,write_buffer,NULL);

    ofmt_ctx->pb=avio_out;
    ofmt_ctx->flags=AVFMT_FLAG_CUSTOM_IO;
    ...
}