项目地址,求star
https://github.com/979451341/Audio-and-video-learning-materials/tree/master/FFmpeg(AVfilter%E8%BF%87%E6%BB%A4%EF%BC%89

1.AVfilter结构体成员

这个特效要靠AVfilter来实现,首先说一下说AVfilter这个结构体的成员

/ * **过滤器定义。这定义了一个过滤器包含的垫,以及所有的*用于与筛选器交互的回调函数。* /
typedef struct AVFilter {/ * **过滤器名称。在过滤器中必须是非空且唯一的。* /const char *name;/ * **描述滤波器。可能是空的。*你应该使用null_if_config_small()宏定义。* /const char *description;/ * **输入清单,由零元终止。**如果没有(静态)输入,则为null。过滤器实例* avfilter_flag_dynamic_inputs集可能会有比现在更多的投入*这份清单。* /const AVFilterPad *inputs;/ * **输出清单,由零元终止。**如果没有(静态)输出,则为null。过滤器实例* avfilter_flag_dynamic_outputs集可能会有比现在更多的产出*这份清单。* /const AVFilterPad *outputs;/ * **一个私人数据的类,用于声明私人avoptions过滤器。*此字段对于未声明任何选项的筛选器无效。**如果该字段非空,则是筛选私有数据的第一个成员。*必须是指针对avclass,这将由libavfilter通用*这个类的代码。* /const AVClass *priv_class;/ * **结合avfilter_flag_ ** /int flags;

2.AVfilter使用步骤

现在直接在代码上说这个AVfilter使用的步骤

因为使用滤镜,所以需要播放视频,就要解码,来段标准准备代码

    // sd卡中的视频文件地址,可自行修改或者通过jni传入char *file_name = "/storage/emulated/0/pauseRecordDemo/video/2018-02-03-09-25-34.mp4";//char *file_name = "/storage/emulated/0/video.avi";av_register_all();
//注册所有AVFilter。avfilter_register_all();//added by ws for AVfilterAVFormatContext *pFormatCtx = avformat_alloc_context();// Open video fileif (avformat_open_input(&pFormatCtx, file_name, NULL, NULL) != 0) {LOGD("Couldn't open file:%s\n", file_name);return -1; // Couldn't open file}// Retrieve stream informationif (avformat_find_stream_info(pFormatCtx, NULL) < 0) {LOGD("Couldn't find stream information.");return -1;}// Find the first video streamint videoStream = -1, i;for (i = 0; i < pFormatCtx->nb_streams; i++) {if (pFormatCtx->streams[i]->codec->codec_type == AVMEDIA_TYPE_VIDEO&& videoStream < 0) {videoStream = i;}}if (videoStream == -1) {LOGD("Didn't find a video stream.");return -1; // Didn't find a video stream}// Get a pointer to the codec context for the video streamAVCodecContext *pCodecCtx = pFormatCtx->streams[videoStream]->codec;

开始滤镜的准备

    AVFilter *buffersrc  = avfilter_get_by_name("buffer");AVFilter *buffersink = avfilter_get_by_name("buffersink");//新版的ffmpeg库必须为buffersinkAVFilterInOut *outputs = avfilter_inout_alloc();AVFilterInOut *inputs  = avfilter_inout_alloc();enum AVPixelFormat pix_fmts[] = { AV_PIX_FMT_YUV420P, AV_PIX_FMT_NONE };AVBufferSinkParams *buffersink_params;
//为FilterGraph分配内存。filter_graph = avfilter_graph_alloc();
//创建并向FilterGraph中添加一个Filter。ret = avfilter_graph_create_filter(&buffersrc_ctx, buffersrc, "in",args, NULL, filter_graph);if (ret < 0) {LOGD("Cannot create buffer source\n");return ret;}buffersink_params = av_buffersink_params_alloc();buffersink_params->pixel_fmts = pix_fmts;
//创建并向FilterGraph中添加一个Filter。ret = avfilter_graph_create_filter(&buffersink_ctx, buffersink, "out",NULL, buffersink_params, filter_graph);av_free(buffersink_params);if (ret < 0) {LOGD("Cannot create buffer sink\n");return ret;}

给AVfilter的输入输出描述赋值

    outputs->name       = av_strdup("in");outputs->filter_ctx = buffersrc_ctx;outputs->pad_idx    = 0;outputs->next       = NULL;inputs->name       = av_strdup("out");inputs->filter_ctx = buffersink_ctx;inputs->pad_idx    = 0;inputs->next       = NULL;

配置和使用滤镜效果,改变u、v这个两个像素,使画面显示黑白

const char *filters_descr = "lutyuv='u=128:v=128'";//将一串通过字符串描述的Graph添加到FilterGraph中。if ((ret = avfilter_graph_parse_ptr(filter_graph, filters_descr,&inputs, &outputs, NULL)) < 0) {LOGD("Cannot avfilter_graph_parse_ptr\n");return ret;}
//检查FilterGraph的配置。if ((ret = avfilter_graph_config(filter_graph, NULL)) < 0) {LOGD("Cannot avfilter_graph_config\n");return ret;}

接下来就是渲染

    // Find the decoder for the video streamAVCodec *pCodec = avcodec_find_decoder(pCodecCtx->codec_id);if (pCodec == NULL) {LOGD("Codec not found.");return -1; // Codec not found}if (avcodec_open2(pCodecCtx, pCodec, NULL) < 0) {LOGD("Could not open codec.");return -1; // Could not open codec}// 获取native windowANativeWindow *nativeWindow = ANativeWindow_fromSurface(env, surface);// 获取视频宽高int videoWidth = pCodecCtx->width;int videoHeight = pCodecCtx->height;// 设置native window的buffer大小,可自动拉伸ANativeWindow_setBuffersGeometry(nativeWindow, videoWidth, videoHeight,WINDOW_FORMAT_RGBA_8888);ANativeWindow_Buffer windowBuffer;if (avcodec_open2(pCodecCtx, pCodec, NULL) < 0) {LOGD("Could not open codec.");return -1; // Could not open codec}// Allocate video frameAVFrame *pFrame = av_frame_alloc();// 用于渲染AVFrame *pFrameRGBA = av_frame_alloc();if (pFrameRGBA == NULL || pFrame == NULL) {LOGD("Could not allocate video frame.");return -1;}// Determine required buffer size and allocate buffer// buffer中数据就是用于渲染的,且格式为RGBAint numBytes = av_image_get_buffer_size(AV_PIX_FMT_RGBA, pCodecCtx->width, pCodecCtx->height,1);uint8_t *buffer = (uint8_t *) av_malloc(numBytes * sizeof(uint8_t));av_image_fill_arrays(pFrameRGBA->data, pFrameRGBA->linesize, buffer, AV_PIX_FMT_RGBA,pCodecCtx->width, pCodecCtx->height, 1);// 由于解码出来的帧格式不是RGBA的,在渲染之前需要进行格式转换struct SwsContext *sws_ctx = sws_getContext(pCodecCtx->width,pCodecCtx->height,pCodecCtx->pix_fmt,pCodecCtx->width,pCodecCtx->height,AV_PIX_FMT_RGBA,SWS_BILINEAR,NULL,NULL,NULL);

解码和释放资源,在解码的时候将解码的数据放入FilterGraph去显示

    while (av_read_frame(pFormatCtx, &packet) >= 0) {// Is this a packet from the video stream?if (packet.stream_index == videoStream) {// Decode video frameavcodec_decode_video2(pCodecCtx, pFrame, &frameFinished, &packet);// 并不是decode一次就可解码出一帧if (frameFinished) {//added by ws for AVfilter startpFrame->pts = av_frame_get_best_effort_timestamp(pFrame);//* 向FilterGraph中加入一个AVFrame。if (av_buffersrc_add_frame(buffersrc_ctx, pFrame) < 0) {LOGD("Could not av_buffersrc_add_frame");break;}
//从FilterGraph中取出一个AVFrame。ret = av_buffersink_get_frame(buffersink_ctx, pFrame);if (ret < 0) {LOGD("Could not av_buffersink_get_frame");break;}//added by ws for AVfilter end// lock native window bufferANativeWindow_lock(nativeWindow, &windowBuffer, 0);// 格式转换sws_scale(sws_ctx, (uint8_t const *const *) pFrame->data,pFrame->linesize, 0, pCodecCtx->height,pFrameRGBA->data, pFrameRGBA->linesize);// 获取strideuint8_t *dst = (uint8_t *) windowBuffer.bits;int dstStride = windowBuffer.stride * 4;uint8_t *src = (pFrameRGBA->data[0]);int srcStride = pFrameRGBA->linesize[0];// 由于window的stride和帧的stride不同,因此需要逐行复制int h;for (h = 0; h < videoHeight; h++) {memcpy(dst + h * dstStride, src + h * srcStride, srcStride);}ANativeWindow_unlockAndPost(nativeWindow);}}av_packet_unref(&packet);}av_free(buffer);av_free(pFrameRGBA);// Free the YUV frameav_free(pFrame);avfilter_graph_free(&filter_graph); //added by ws for avfilter// Close the codecsavcodec_close(pCodecCtx);

这个想要真正掌握,需要将avfilter.c至少过个两个遍,因为这下面四个结构体还没有看看他们的内部成员

typedef struct AVFilterContext AVFilterContext;
typedef struct AVFilterLink    AVFilterLink;
typedef struct AVFilterPad     AVFilterPad;
typedef struct AVFilterFormats AVFilterFormats;

Android 音视频深入 十 FFmpeg给视频加特效(附源码下载)相关推荐

  1. android画板需求分析,Android编程实现画板功能的方法总结【附源码下载】

    本文实例讲述了Android编程实现画板功能的方法.分享给大家供大家参考,具体如下: Android实现画板主要有2种方式,一种是用自定义View实现,另一种是通过Canvas类实现.当然自定义Vie ...

  2. android flv 编码器,Android 音视频深入 十七 FFmpeg 获取 RTMP 流保存为 flv (附源码下载)...

    Android 音视频深入 十七 FFmpeg 获取 RTMP 流保存为 flv (附源码下载) 项目地址 https://github.com/979451341/RtmpSave 这个项目主要代码 ...

  3. 短视频去水印多功能工具箱微信小程序源码下载支持多种流量主

    没错这是一款以去水印为主的一款多功能微信小程序源码 该小程序源码除了拥有去水印功能以外还拥有N款其它实用的功能 比如喝酒神器,短网址生成,历史上的今天等等如下: 短视频去水印(自带接口,速度非常快) ...

  4. Android音频实时传输与播放(四):源码下载(问题更新)【转】

    Android音频实时传输与播放(四):源码下载(问题更新) 激动人心的时刻到了有木有 ^_^ 服务端下载请点击这里,客户端下载请点击这里! 最近有朋友在下载源码使用之后,说播放出来的声音噪声很大.其 ...

  5. android+仿iphone,Android编程实现仿iphone抖动效果的方法(附源码)

    Android编程实现仿iphone抖动效果的方法(附源码) 时间:2021-05-20 本文实例讲述了Android编程实现仿iphone抖动效果的方法.分享给大家供大家参考,具体如下: 布局文件: ...

  6. Android 百度地图-实现POI的搜索(搜索周边)附源码

    首先贴出主要代码 Activity package cn.yhsh.maptest;import java.util.ArrayList; import utils.PoiOverlay; impor ...

  7. Android 利用广播实现黑名单【指定号码】的短信的拦截 附源码下载链接

    Android 利用广播实现指定号码的短信的拦截 根据最近的学习内容,今天实现了利用广播进行指定号码的拦截 步骤: ①.写一个数据库的帮助类,实现对数据库的创建,总共创建两个数据库psms(受保护的短 ...

  8. Android 统一打包框架(附源码下载)

    唠叨: 把手给我,我带你去吃云浮吃石磨肠粉.云吞面,木瓜渣. 那里的肠粉和广州的不一样,皮很薄很滑,肉馅没广州的那么花里胡哨,只有肉碎和香葱.但吃起来就很香滑,再配上它的甜辣酱.那味道好极了. 云吞面 ...

  9. Android可滑动画板,Android实现画板、写字板功能(附源码下载)

    前言 本文给大家分享一个使用Android开发写字板功能Dem.简单操作内存中的图像.对图像进行简单的处理.绘制直线.以达到写字板的效果 效果图如下 XML布局代码 xmlns:tools=" ...

  10. php写字板代码,Android实现画板、写字板功能(附源码下载)

    前言 本文给大家分享一个使用Android开发写字板功能Dem.简单操作内存中的图像.对图像进行简单的处理.绘制直线.以达到写字板的效果 效果图如下 XML布局代码 xmlns:tools=" ...

最新文章

  1. 操作系统 实验三 进程调度模拟程序
  2. Java Web——文件下载时中文文件名乱码问题解决方案
  3. 4.QPixmap,QTransform,绘图函数的使用
  4. Docker 二进制安装docker
  5. html的table效果,html的table用法(让网页的视觉效果显示出来)
  6. python 新建一列_python – 如何在迭代pandas数据框时创建新列并插入行值
  7. jQuery按ID选择
  8. 微软官方推出的win10安装或者创建安装u盘的工具
  9. LDA(Latent Dirichlet Allocation)简介
  10. pdf打印机如何设置双面打印
  11. 大麦支持选座位、定时等功能
  12. JZOJ 7.10B组第一题 可见点数
  13. Sentry 开发者贡献指南 - SDK 开发(性能监控)
  14. 【微信小程序教程】点击按钮修改view标签背景颜色
  15. mysql数据库生成pd_使用pd从数据库逆向生成pdm文件
  16. Python基础----Socket编程规范及底层原理(三)---socketserver实现并发及底层原理
  17. 破解mifare Classic(M1)非接触式射频IC卡--Mifare crack Hack 笔记二
  18. 东莞群控服务器系统,群控服务器远程连接工具
  19. 40-网上商城数据库-商品类别数据操作(一)
  20. 人工智能在各领域的应用

热门文章

  1. 从多个PDF中快速搜索字符串
  2. webpack安装及配置
  3. iPhone X 适配
  4. 数值计算笔记之非线性方程的求解(一)二分法
  5. matlab:plot线型和颜色
  6. Cesium聚簇实现-kdbush类实现
  7. TBox、E-Call、B-Call、I-Call是什么?
  8. forward 和 redirect
  9. Doc2Vec句向量模型PV-DM与PV-DBOW的理解
  10. 自动化项目倍加福WCS-PG210E使用GSD文件