基于最简单的FFmpeg采样读取内存读写：内存玩家

2023-08-01 15:53:52

=====================================================

基于最简单的FFmpeg样品系列读写内存列表：

最简单的基于FFmpeg的内存读写的样例：内存播放器

最简单的基于FFmpeg的内存读写的样例：内存转码器

=====================================================

打算记录两个最简单的FFmpeg进行内存读写的样例。

之前的全部有关FFmpeg的样例都是对文件进行操作的。比如《100行代码实现最简单的基于FFMPEG+SDL的视频播放器》播放的是一个视频的文件。

而《最简单的基于FFMPEG的转码程序》也是将一个视频文件转换为还有一个视频文件。《最简单的基于FFmpeg的视频编码器（YUV编码为H.264）》也是最后编码得到一个H.264视频文件。实际上，并非全部视频的编码，解码都是针对文件进行处理的。有的时候须要的解码的视频数据在一段内存中。比如，通过其它系统送来的视频数据。相同，有的时候编码后的视频数据也未必要保存成一个文件。比如。要求将编码后的视频数据送给其它的系统进行下一步的处理。以上两种情况就要求FFmpeg不不过对文件进行“读，写”操作，而是要对内存进行“读，写”操作。因此打算记录的两个样例就是使用FFmpeg对内存进行读写的样例。

有关FFmpeg读写内存的样例已经在文章《ffmpeg 从内存中读取数据(或将数据输出到内存)》中有过叙述，可是一直没有做完整代码的project。

本文记录《最简单的基于FFmpeg内存播放器》。该样例中，首先将文件里的视频数据通过fread()读取到内存中，然后使用FFmpeg播放内存中的数据。

下篇文章计划记录的第二个样例是《最简单的基于FFmpeg内存转码器》。

该样例中。首先将文件里的视频数据通过fread()读取到内存中。然后使用FFmpeg读取该数据并进行转码。接着将转码后的数据输出到还有一块内存中，最后将该数据通过fwrite()写入成文件。

关于怎样从内存中读取数据在这里不再详述。能够參考文章：

ffmpeg 从内存中读取数据(或将数据输出到内存)

关键点

关键点就两个：

1.      初始化自己定义的AVIOContext，指定自己定义的回调函数。

演示样例代码例如以下：

//AVIOContext中的缓存

unsigned char *aviobuffer=(unsigned char*)av_malloc(32768);

AVIOContext *avio=avio_alloc_context(aviobuffer, 32768,0,NULL,read_buffer,NULL,NULL);

pFormatCtx->pb=avio;

if(avformat_open_input(&pFormatCtx,NULL,NULL,NULL)!=0){

           printf("Couldn't open inputstream.（无法打开输入流）\n");

           return -1;

}

上述代码中，自己定义了回调函数read_buffer()。在使用avformat_open_input()打开媒体数据的时候，就能够不指定文件的URL了。即其第2个參数为NULL（由于数据不是靠文件读取，而是由read_buffer()提供）

2.      自己写回调函数。

演示样例代码例如以下：

//Callback

int read_buffer(void *opaque, uint8_t *buf, int buf_size){

	if(!feof(fp_open)){

		inttrue_size=fread(buf,1,buf_size,fp_open);

		return true_size;

	}else{

		return -1;

	}

}

当系统须要数据的时候。会自己主动调用该回调函数以获取数据。

这个样例为了简单，直接使用fread()读取数据至内存。回调函数须要格外注意它的參数和返回值。

源码

以下直接贴上程序的源码：

/**

 * 最简单的基于FFmpeg的内存读写样例（内存播放器）

 * Simplest FFmpeg mem Player

 *

 * 雷霄骅

 * leixiaohua1020@126.com

 * 中国传媒大学/数字电视技术

 * Communication University of China / Digital TV Technology

 * http://blog.csdn.net/leixiaohua1020

 *

 * 本程序实现了对内存中的视频数据的播放。

 * 是最简单的使用FFmpeg读内存的样例。

*

 * This software play video data in memory (not a file).

 * It's the simplest example to use FFmpeg to read from memory.

 *

 */

#include <stdio.h>

#define __STDC_CONSTANT_MACROS

#ifdef _WIN32

//Windows

extern "C"

{

#include "libavcodec/avcodec.h"

#include "libavformat/avformat.h"

#include "libswscale/swscale.h"

#include "SDL/SDL.h"

};

#else

//Linux...

#ifdef __cplusplus

extern "C"

{

#endif

#include <libavcodec/avcodec.h>

#include <libavformat/avformat.h>

#include <libswscale/swscale.h>

#include <SDL/SDL.h>

#ifdef __cplusplus

};

#endif

#endif

//Output YUV420P

#define OUTPUT_YUV420P 0

FILE *fp_open=NULL;

//Callback

int read_buffer(void *opaque, uint8_t *buf, int buf_size){

	if(!feof(fp_open)){

		int true_size=fread(buf,1,buf_size,fp_open);

		return true_size;

	}else{

		return -1;

	}

}

int main(int argc, char* argv[])

{

	AVFormatContext	*pFormatCtx;

	int				i, videoindex;

	AVCodecContext	*pCodecCtx;

	AVCodec			*pCodec;

	char filepath[]="cuc60anniversary_start.mkv";

	av_register_all();

	avformat_network_init();

	pFormatCtx = avformat_alloc_context();

	fp_open=fopen(filepath,"rb+");

	//Init AVIOContext

	unsigned char *aviobuffer=(unsigned char *)av_malloc(32768);

	AVIOContext *avio =avio_alloc_context(aviobuffer, 32768,0,NULL,read_buffer,NULL,NULL);

	pFormatCtx->pb=avio;

	if(avformat_open_input(&pFormatCtx,NULL,NULL,NULL)!=0){

		printf("Couldn't open input stream.\n");

		return -1;

	}

	if(avformat_find_stream_info(pFormatCtx,NULL)<0){

		printf("Couldn't find stream information.\n");

		return -1;

	}

	videoindex=-1;

	for(i=0; i<pFormatCtx->nb_streams; i++)

		if(pFormatCtx->streams[i]->codec->codec_type==AVMEDIA_TYPE_VIDEO){

			videoindex=i;

			break;

		}

	if(videoindex==-1){

		printf("Didn't find a video stream.\n");

		return -1;

	}

	pCodecCtx=pFormatCtx->streams[videoindex]->codec;

	pCodec=avcodec_find_decoder(pCodecCtx->codec_id);

	if(pCodec==NULL){

		printf("Codec not found.\n");

		return -1;

	}

	if(avcodec_open2(pCodecCtx, pCodec,NULL)<0){

		printf("Could not open codec.\n");

		return -1;

	}

	AVFrame	*pFrame,*pFrameYUV;

	pFrame=av_frame_alloc();

	pFrameYUV=av_frame_alloc();

	//uint8_t *out_buffer=(uint8_t *)av_malloc(avpicture_get_size(PIX_FMT_YUV420P, pCodecCtx->width, pCodecCtx->height));

	//avpicture_fill((AVPicture *)pFrameYUV, out_buffer, PIX_FMT_YUV420P, pCodecCtx->width, pCodecCtx->height);

	//SDL----------------------------

	if(SDL_Init(SDL_INIT_VIDEO | SDL_INIT_AUDIO | SDL_INIT_TIMER)) {

		printf( "Could not initialize SDL - %s\n", SDL_GetError());

		return -1;

	} 

	int screen_w=0,screen_h=0;

	SDL_Surface *screen;

	screen_w = pCodecCtx->width;

	screen_h = pCodecCtx->height;

	screen = SDL_SetVideoMode(screen_w, screen_h, 0,0);

	if(!screen) {

		printf("SDL: could not set video mode - exiting:%s\n",SDL_GetError());

		return -1;

	}

	SDL_Overlay *bmp;

	bmp = SDL_CreateYUVOverlay(pCodecCtx->width, pCodecCtx->height,SDL_YV12_OVERLAY, screen);

	SDL_Rect rect;

	rect.x = 0;

	rect.y = 0;

	rect.w = screen_w;

	rect.h = screen_h;

	//SDL End------------------------

	int ret, got_picture;

	AVPacket *packet=(AVPacket *)av_malloc(sizeof(AVPacket));

#if OUTPUT_YUV420P

    FILE *fp_yuv=fopen("output.yuv","wb+");

#endif

	SDL_WM_SetCaption("Simplest FFmpeg Mem Player",NULL);

	struct SwsContext *img_convert_ctx;

	img_convert_ctx = sws_getContext(pCodecCtx->width, pCodecCtx->height, pCodecCtx->pix_fmt, pCodecCtx->width, pCodecCtx->height, PIX_FMT_YUV420P, SWS_BICUBIC, NULL, NULL, NULL);

	//------------------------------

	while(av_read_frame(pFormatCtx, packet)>=0){

		if(packet->stream_index==videoindex){

			ret = avcodec_decode_video2(pCodecCtx, pFrame, &got_picture, packet);

			if(ret < 0){

				printf("Decode Error.\n");

				return -1;

			}

			if(got_picture){

				SDL_LockYUVOverlay(bmp);

				pFrameYUV->data[0]=bmp->pixels[0];

				pFrameYUV->data[1]=bmp->pixels[2];

				pFrameYUV->data[2]=bmp->pixels[1];

				pFrameYUV->linesize[0]=bmp->pitches[0];

				pFrameYUV->linesize[1]=bmp->pitches[2];

				pFrameYUV->linesize[2]=bmp->pitches[1];

				sws_scale(img_convert_ctx, (const uint8_t* const*)pFrame->data, pFrame->linesize, 0, pCodecCtx->height, pFrameYUV->data, pFrameYUV->linesize);

#if OUTPUT_YUV420P

				int y_size=pCodecCtx->width*pCodecCtx->height;

				fwrite(pFrameYUV->data[0],1,y_size,fp_yuv);    //Y

				fwrite(pFrameYUV->data[1],1,y_size/4,fp_yuv);  //U

				fwrite(pFrameYUV->data[2],1,y_size/4,fp_yuv);  //V

#endif

				SDL_UnlockYUVOverlay(bmp); 

				SDL_DisplayYUVOverlay(bmp, &rect);

				//Delay 40ms

				SDL_Delay(40);

			}

		}

		av_free_packet(packet);

	}

	sws_freeContext(img_convert_ctx);

#if OUTPUT_YUV420P

    fclose(fp_yuv);

#endif 

	fclose(fp_open);

	SDL_Quit();

	//av_free(out_buffer);

	av_free(pFrameYUV);

	avcodec_close(pCodecCtx);

	avformat_close_input(&pFormatCtx);

	return 0;

}

能够通过代码定义的宏来确定是否将解码后的YUV420P数据输出成文件：

#define OUTPUT_YUV420P 0

结果

程序的执行结果例如以下。

能够解码播放測试视频。

适逢60周年校庆，因此截取了一小段校庆晚会的开场画面作为測试视频，给母校庆生~

基于最简单的FFmpeg采样读取内存读写：内存玩家

watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQvbGVpeGlhb2h1YTEwMjA=/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/SouthEast" alt="" />

下载


simplest ffmpeg mem handler

项目主页

SourceForge：https://sourceforge.net/projects/simplestffmpegmemhandler/

Github：https://github.com/leixiaohua1020/simplest_ffmpeg_mem_handler

开源中国：http://git.oschina.net/leixiaohua1020/simplest_ffmpeg_mem_handler

CSDN下载地址：
http://download.csdn.net/detail/leixiaohua1020/8003731

本project包括两个FFmpeg读写内存的样例：
 simplest_ffmpeg_mem_player：基于FFmpeg的内存播放器。
 simplest_ffmpeg_mem_transcoder：基于FFmpeg的内存转码器（下篇文章记录）。

更新-1.1 (2015.2.13)=========================================

这次考虑到了跨平台的要求。调整了源码。经过这次调整之后。源码能够在以下平台编译通过：

VC++：打开sln文件就可以编译，无需配置。

cl.exe：打开compile_cl.bat就可以命令行下使用cl.exe进行编译，注意可能须要依照VC的安装路径调整脚本里面的參数。编译命令例如以下。

::VS2010 Environment

call "D:\Program Files\Microsoft Visual Studio 10.0\VC\vcvarsall.bat"

::include

@set INCLUDE=include;%INCLUDE%

::lib

@set LIB=lib;%LIB%

::compile and link

cl simplest_ffmpeg_mem_player.cpp /MD /link SDL.lib SDLmain.lib avcodec.lib ^

avformat.lib avutil.lib avdevice.lib avfilter.lib postproc.lib swresample.lib swscale.lib ^

/SUBSYSTEM:WINDOWS /OPT:NOREF

MinGW：MinGW命令行下执行compile_mingw.sh就可以使用MinGW的g++进行编译。编译命令例如以下。

g++ simplest_ffmpeg_mem_player.cpp -g -o simplest_ffmpeg_mem_player.exe \

-I /usr/local/include -L /usr/local/lib \

-lmingw32 -lSDLmain -lSDL -lavformat -lavcodec -lavutil -lswscale

GCC(Linux)：Linux命令行下执行compile_gcc.sh就可以使用GCC进行编译。编译命令例如以下。

gcc simplest_ffmpeg_mem_player.cpp -g -o simplest_ffmpeg_mem_player.out -lstdc++ \

-I /usr/local/include -L /usr/local/lib -lSDLmain -lSDL -lavformat -lavcodec -lavutil -lswscale

GCC(MacOS)：Mac终端下执行compile_gcc_mac.sh就可以使用Mac 的GCC进行编译，Mac的GCC和Linux的GCC区别不大，可是使用SDL1.2的时候，必须加上“-framework Cocoa”參数，否则编译无法通过。编译命令例如以下。

gcc simplest_ffmpeg_mem_player.cpp -g -o simplest_ffmpeg_mem_player.out -lstdc++ \

-framework Cocoa -I /usr/local/include -L /usr/local/lib -lSDLmain -lSDL -lavformat -lavcodec -lavutil -lswscale

PS：相关的编译命令已经保存到了project目录中

CSDN下载地址：http://download.csdn.net/detail/leixiaohua1020/8445795

SourceForge已经更新。

版权声明：本文博客原创文章。博客，未经同意，不得转载。

上一篇：Android做法说明(3)---Fragment使用app袋或v4包解析


下一篇：java中使用反射做一个工具类，来为指定类中的成员变量进行赋值操作，使用与多个类对象的成员变量的赋值。