1. MediaExtractor

该类主要用于音视频混合数据的分离,接口比较简单,首先要通过setDataSource(String path)函数设置数据源,数据源可以是本地文件地址,也可以使用HTTP协议的网络码流地址。

然后,可以通过下面的代码块,来获取码流的详细信息,如:MimeType,分辨率、编码格式、码率、帧率等等。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
int videoTrackIndex = -1;
int audioTrackIndex = -1;
for(int i = 0; i < mMediaExtractor.getTrackCount(); i++) {
    //获取码流的详细格式/配置信息
    MediaFormat format = mMediaExtractor.getTrackFormat(i);
    String mime = format.getString(MediaFormat.KEY_MIME);
    if(mime.startsWith("video/")) {
        videoTrackIndex = i;
    }
    else if(mime.startsWith("audio/")) {
        audioTrackIndex = i;
    }
    ....
}

获取到媒体文件的详细信息之后,就可以选择指定的通道,并分离和读取数据了:

1
2
3
4
5
6
7
8
9
10
mMediaExtractor.selectTrack(videoTrackIndex); //选择读取视频数据
while(true) {
    int sampleSize = mMediaExtractor.readSampleData(buffer, 0);  //读取一帧数据
    if(sampleSize < 0) {
        break;
    }
    mMediaExtractor.advance(); //移动到下一帧
}
mMediaExtractor.release(); //读取结束后,要记得释放资源

2. MediaMuxer

该类主要用于将音频和视频进行混合生成多媒体文件,创建该类对象,需要传入输出的文件位置以及格式,构造函数如下:

1
public MediaMuxer(String path, int format);

创建对象之后,一个比较重要的操作就是addTrack(),添加数据通道,该函数需要传入MediaFormat对象,MediaFormat即媒体格式类,用于描述媒体的格式参数,如视频帧率、音频采样率等。

在本示例中,可以直接使用MediaExtractor.getTrackFormat()解析得到的MediaFormat对象,如果你希望自己来创建这个MediaFormat对象的话,可以使用该类的如下静态方法创建:

1
MediaFormat format = MediaFormat.createVideoFormat("video/avc",320,240);

注意,这里有一个比较大的坑,就是,如果手动创建MediaFormat对象的话,一定要记得设置"csd-0"和"csd-1"这两个参数:

1
2
3
4
5
byte[] csd0 = {x,x,x,x,x,x,x...}
byte[] csd1 = {x,x,x,x,x,x,x...}
format.setByteBuffer("csd-0",ByteBuffer.wrap(csd0));
format.setByteBuffer("csd-1",ByteBuffer.wrap(csd1));

至于"csd-0"和"csd-1"是什么,对于H264视频的话,它对应的是sps和pps,对于AAC音频的话,对应的是ADTS,做音视频开发的人应该都知道,它一般存在于编码器生成的IDR帧之中。

通过 addTrack() 添加了数据通道之后,记录下函数返回的 trackIndex,然后就可以调用 MediaMuxer.writeSampleData() 愉快地向mp4文件中写入数据了。

这里会产生第二个坑,就是writeSampleData函数的最后一个参数是一个BufferInfo对象,你必须认真地填入“正确”的值:

1
2
3
4
5
BufferInfo info = new BufferInfo();
info.offset = 0;
info.size = sampleSize;
info.flags = MediaCodec.BUFFER_FLAG_SYNC_FRAME;
info.presentationTimeUs = timestamp;

其中,

info.size 必须填入数据的大小

info.flags 需要给出是否为同步帧/关键帧

info.presentationTimeUs 必须给出正确的时间戳,注意单位是 us,例如,对于帧率为 x f/s 的视频而言,时间戳的间隔就是 1000/x ms

跳过了这些坑,你就可以顺利地完成mp4文件的写入了,同样,完成后记得关闭以及释放资源:

1
2
mMediaMuxer.stop();
mMediaMuxer.release();

3. 小结

有了上面的简单介绍和铺垫,demo代码就不难看懂了。运行demo代码的注意事项:

(1)Android 4.3以及以上系统的手机

(2)把 input.mp4文件拷贝到sdcard

代码最核心的部分如下所示:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
  protected boolean process() throws IOException {
      mMediaExtractor = new MediaExtractor();          
      mMediaExtractor.setDataSource(SDCARD_PATH+"/input.mp4");                
               
      int mVideoTrackIndex = -1;
      int framerate = 0;
      for(int i = 0; i < mMediaExtractor.getTrackCount(); i++) {
          MediaFormat format = mMediaExtractor.getTrackFormat(i);
          String mime = format.getString(MediaFormat.KEY_MIME);
          if(!mime.startsWith("video/")) {                
              continue;
          }
          framerate = format.getInteger(MediaFormat.KEY_FRAME_RATE);            
          mMediaExtractor.selectTrack(i);
          mMediaMuxer = new MediaMuxer(SDCARD_PATH+"/ouput.mp4", OutputFormat.MUXER_OUTPUT_MPEG_4);
          mVideoTrackIndex = mMediaMuxer.addTrack(format);  
          mMediaMuxer.start();
      }
       
      if(mMediaMuxer == null) {
          return false;
      }
       
      BufferInfo info = new BufferInfo();
      info.presentationTimeUs = 0;
      ByteBuffer buffer = ByteBuffer.allocate(500*1024);        
      while(true) {
          int sampleSize = mMediaExtractor.readSampleData(buffer, 0);
          if(sampleSize < 0) {
              break;
          }
          mMediaExtractor.advance();
          info.offset = 0;
          info.size = sampleSize;
          info.flags = MediaCodec.BUFFER_FLAG_SYNC_FRAME;        
          info.presentationTimeUs += 1000*1000/framerate;
          mMediaMuxer.writeSampleData(mVideoTrackIndex,buffer,info);
      }
      mMediaExtractor.release();
       
      mMediaMuxer.stop();
      mMediaMuxer.release();
       
      return true;
  }

本文转自 Jhuster 51CTO博客,原文链接:http://blog.51cto.com/ticktick/1710743,如需转载请自行联系原作者

Android中如何提取和生成mp4文件相关推荐

  1. Android 用MediaCodec ,MediaExtractor解码播放MP4文件

    上一篇讲了如何采集摄像头画面并且进行编码,再进行封装成MP4格式文件,如需了解可以看 安卓采集摄像头画面生成MP4文件 本篇博客,主要讲解如何对MP4文件进行解封装,再进行解H264码流,进行画面显示 ...

  2. Android Studio的res自动生成的文件出错了_莫韵乐与bug的奇妙冒险

    Android Studio的res自动生成的文件出错了_莫韵乐与bug的奇妙冒险 无论学什么编程语言都要跟奇怪的bug过不去 奇怪的bug出现了 今天满怀欣喜地进行安卓开发学习,创建好一个新的项目之 ...

  3. 利用FFmpeg转码生成MP4文件

    利用FFmpeg转码生成MP4文件 2017年06月24日 14:42:53 阅读数:2401 项目中,需要把一路音频流及一路视频流分别转码,生成指定格式(MP4)文件.在使用ffmpeg转码生成mp ...

  4. android 颜色资源文件,android中colors.xml颜色设置资源文件的方法

    1. 打开res目录下的values文件夹,双击打开colors.xml文件进行编辑 上代码 #008577 #00574B #D81B60 #ff0000 #0000ff 2. 在res目录下的la ...

  5. android中 MediaStore提取缩略图和原始图像

    android中 MediaStore提取缩略图和原始图像 . 欢迎转载:http://blog.csdn.net/djy1992/article/details/10005767 提取图像的Thum ...

  6. android 中color目录,android中colors.xml颜色设置资源文件的方法

    1. 打开res目录下的values文件夹,双击打开colors.xml文件进行编辑 上代码 #008577 #00574B #D81B60 #ff0000 #0000ff 2. 在res目录下的la ...

  7. 解决ffmpeg生成mp4文件不能正常预览的问题

    框架的使用极大的提高了开发效率,让我们能够有更多的精力去关注系统的整体架构和业务需求,而不需要过多的关注一些具体的实现细节,但任何事情都有两面性,如果某个细节出了问题,由于对具体的实现不了解,那么会给 ...

  8. android.process.media已停止 三星,android – 在三星设备上播放mp4文件时出现...

    我正在使用经典的VideoView实现在Android上播放视频. 相同的mp4文件网址在HTC Desire上运行正常.但它不适用于三星设备. 三星Galaxy S1和三星Galaxy Tab说:& ...

  9. 安卓采集摄像头画面生成MP4文件

    主要用的安卓类有MediaCodec和MediaMuxer,MediaCodec负责视频数据编解码,MediaMuxer负责将编码后的数据封装成MP4文件,采集摄像头用的是camera,并且用surf ...

最新文章

  1. Java中的static关键字的用法
  2. 字符串声明太大出现错误_搜索框输入中文出现单引号报错问题
  3. python常用指令-日常整理python执行系统命令的常见方法(全)
  4. Lucene查询语法详解
  5. 解决xtraFinder在EI下不能使用问题
  6. 正则化的通俗解释_干货|深度学习中的正则化技术概述(附Python+keras实现代码)...
  7. eclipse下的tomcat内存设置大小
  8. go语言io reader_go语言之IO操作(待补充)
  9. mysql常见数据库设计_常见数据库设计
  10. redis 转义字符_阿里巴巴官方最新 Redis 开发规范
  11. 帧栈使用的基本用法c语言,栈帧详解
  12. java项目_值得学习和练手的Java企业级开源项目,强烈推荐!
  13. gitlab 修改存储为mysql_gitlab仓库存储位置的修改方法
  14. 关于assert和de-assert的解释
  15. mybatisplus修改单个属性_SolidWorks工程图比例:整体修改与单视图修改
  16. 手把手教你LINUX镜像文件的下载
  17. python在d盘创建txt文件_python中如何创建一个txt文件
  18. linux命令chmod什么意思,Linux中chmod命令起什么作用呢?
  19. html怎么做qq空间主页,如何设计qq空间
  20. HDU 5745 La Vie en rose 暴力

热门文章

  1. C中的extern-static-const关键词
  2. private、public、protected、internal修饰符的访问权限
  3. jQuery控制表单重置
  4. 使用Attribute简单地扩展WebForm
  5. Lync Server 2013视频会议新功能及配置
  6. 程序、进程与线程的关系
  7. Oracle 11g新特性密码大小写敏感问题
  8. kingdee kis
  9. NBR100多IP出口解决方案的配置方法
  10. Centos 7 密码重置