【流媒體】Android 实时视频采集—Cameara预览采集

SkySeraph Mar 26th 2012  SZ

Email:skyseraph00@163.com


更多精彩请直接访问SkySeraph个人站点:www.skyseraph.com

流媒体系列: http://skyseraph.com/2012/04/11/Media/流媒体专题/

1 概述

通过Android Camera拍摄预览中设置setPreviewCallback实现onPreviewFrame接口,实时截取每一帧视频流数据


2 知识点

① Android Camera使用:    参考 Refs/Related 0-4

Camera 支持格式

拍照流程

② Android SurfaceView使用:  参考 Refs/Related 5-10

③ Camera权限


3 核心源码

① SurfaceView相关

// 定义对象 private SurfaceView mSurfaceview = null;  // SurfaceView对象:(视图组件)视频显示  private SurfaceHolder mSurfaceHolder = null;  // SurfaceHolder对象:(抽象接口)SurfaceView支持类  private Camera mCamera =null;     // Camera对象,相机预览

 // InitSurfaceView private void initSurfaceView() {  mSurfaceview = (SurfaceView) this.findViewById(R.id.Surfaceview);  mSurfaceHolder = mSurfaceview.getHolder(); // 绑定SurfaceView,取得SurfaceHolder对象  mSurfaceHolder.addCallback(mainActivity.this); // SurfaceHolder加入回调接口// mSurfaceHolder.setFixedSize(176, 144); // 预览大小設置  mSurfaceHolder.setType(SurfaceHolder.SURFACE_TYPE_PUSH_BUFFERS);// 設置顯示器類型,setType必须设置 }

② 主Activity实现SurfaceHolder.Callback接口,编写回调函数

/*【SurfaceHolder.Callback 回调函数】*/public void surfaceCreated(SurfaceHolder holder)// SurfaceView启动时/初次实例化,预览界面被创建时,该方法被调用。 {// TODO Auto-generated method stub    mCamera = Camera.open();// 开启摄像头(2.3版本后支持多摄像头,需传入参数)   try  {      Log.i(TAG, "SurfaceHolder.Callback:surface Created");   mCamera.setPreviewDisplay(mSurfaceHolder);//set the surface to be used for live preview

  } catch (Exception ex)  {if(null != mCamera)   {    mCamera.release();    mCamera = null;        }   Log.i(TAG+"initCamera", ex.getMessage());  } }public void surfaceChanged(SurfaceHolder holder, int format, int width, int height)// 当SurfaceView/预览界面的格式和大小发生改变时,该方法被调用 {// TODO Auto-generated method stub    Log.i(TAG, "SurfaceHolder.Callback:Surface Changed");//mPreviewHeight = height;//mPreviewWidth = width;  initCamera();   }public void surfaceDestroyed(SurfaceHolder holder) // SurfaceView销毁时,该方法被调用 {// TODO Auto-generated method stub  Log.i(TAG, "SurfaceHolder.Callback:Surface Destroyed");if(null != mCamera)  {   mCamera.setPreviewCallback(null); //!!这个必须在前,不然退出出错   mCamera.stopPreview();    bIfPreview = false;    mCamera.release();   mCamera = null;       } }

核心子函数:  相机预览

 1 /*【2】【相机预览】*/ 2  private void initCamera()//surfaceChanged中调用 3  { 4   Log.i(TAG, "going into initCamera"); 5   if (bIfPreview) 6   { 7    mCamera.stopPreview();//stopCamera(); 8   } 9   if(null != mCamera)10   {11    try12    {13     /* Camera Service settings*/    14     Camera.Parameters parameters = mCamera.getParameters();15     // parameters.setFlashMode("off"); // 无闪光灯16     parameters.setPictureFormat(PixelFormat.JPEG); //Sets the image format for picture 设定相片格式为JPEG,默认为NV21    17     parameters.setPreviewFormat(PixelFormat.YCbCr_420_SP); //Sets the image format for preview picture,默认为NV2118     /*【ImageFormat】JPEG/NV16(YCrCb format,used for Video)/NV21(YCrCb format,used for Image)/RGB_565/YUY2/YU12*/19     20     // 【调试】获取caera支持的PictrueSize,看看能否设置??21     List<Size> pictureSizes = mCamera.getParameters().getSupportedPictureSizes();22     List<Size> previewSizes = mCamera.getParameters().getSupportedPreviewSizes();23     List<Integer> previewFormats = mCamera.getParameters().getSupportedPreviewFormats();24     List<Integer> previewFrameRates = mCamera.getParameters().getSupportedPreviewFrameRates();25     Log.i(TAG+"initCamera", "cyy support parameters is ");26     Size psize = null;27     for (int i = 0; i < pictureSizes.size(); i++)28     {29      psize = pictureSizes.get(i);30      Log.i(TAG+"initCamera", "PictrueSize,width: " + psize.width + " height" + psize.height);31     }32     for (int i = 0; i < previewSizes.size(); i++)33     {34      psize = previewSizes.get(i);35      Log.i(TAG+"initCamera", "PreviewSize,width: " + psize.width + " height" + psize.height);36     }37     Integer pf = null;38     for (int i = 0; i < previewFormats.size(); i++)39     {40      pf = previewFormats.get(i);41      Log.i(TAG+"initCamera", "previewformates:" + pf);42     }43     44     // 设置拍照和预览图片大小45     parameters.setPictureSize(640, 480); //指定拍照图片的大小46     parameters.setPreviewSize(mPreviewWidth, mPreviewHeight); // 指定preview的大小 47 //这两个属性 如果这两个属性设置的和真实手机的不一样时,就会报错48     49 // 横竖屏镜头自动调整50     if (this.getResources().getConfiguration().orientation != Configuration.ORIENTATION_LANDSCAPE) 51     {52      parameters.set("orientation", "portrait"); //53      parameters.set("rotation", 90); // 镜头角度转90度(默认摄像头是横拍) 54      mCamera.setDisplayOrientation(90); // 在2.2以上可以使用55     } else// 如果是横屏56     {57      parameters.set("orientation", "landscape"); //58      mCamera.setDisplayOrientation(0); // 在2.2以上可以使用59     } 60     61     /* 视频流编码处理 */ 62     //添加对视频流处理函数63     64     65 // 设定配置参数并开启预览66     mCamera.setParameters(parameters); // 将Camera.Parameters设定予Camera    67     mCamera.startPreview(); // 打开预览画面68     bIfPreview = true;69     70     // 【调试】设置后的图片大小和预览大小以及帧率71     Camera.Size csize = mCamera.getParameters().getPreviewSize();72     mPreviewHeight = csize.height; //73     mPreviewWidth = csize.width;74     Log.i(TAG+"initCamera", "after setting, previewSize:width: " + csize.width + " height: " + csize.height);75     csize = mCamera.getParameters().getPictureSize();76     Log.i(TAG+"initCamera", "after setting, pictruesize:width: " + csize.width + " height: " + csize.height);77     Log.i(TAG+"initCamera", "after setting, previewformate is " + mCamera.getParameters().getPreviewFormat());78     Log.i(TAG+"initCamera", "after setting, previewframetate is " + mCamera.getParameters().getPreviewFrameRate());79    } catch (Exception e)80    { 81     e.printStackTrace();82    }83   }84  }

 说明1:  在/* 视频流编码处理 */ 中通过setPreviewCallback添加对视频流进行处理,如
     mCamera.setPreviewCallback(new encoderVideo(mCamera.getParameters().getPreviewSize().width, 
         mCamera.getParameters().getPreviewSize().height,(ImageView) findViewById(R.id.ImageView2)));//①原生yuv420sp视频存储方式
     mCamera.setPreviewCallback(new encoderH264(mCamera.getParameters().getPreviewSize().width, 
         mCamera.getParameters().getPreviewSize().height)); //②x264编码方式 
     mCamera.setPreviewCallback(mJpegPreviewCallback);  //③JPEG压缩方式
 
 说明2: 当然也可以不在主Acitivity中实现SurfaceHolder.Callback接口,而是在①的initSurfaceView中的addCallback函数,修改为
 mSurfaceHolder.addCallback(new MyCallback);  再在这函数中实现上述三个回调函数

③视频帧回调接口

 1  // 【获取视频预览帧的接口】 2   mJpegPreviewCallback = new Camera.PreviewCallback() 3   { 4    @Override 5    public void onPreviewFrame(byte[] data, Camera camera)  6    { 7     //传递进来的data,默认是YUV420SP的 8 // TODO Auto-generated method stub     9     try10     {11      Log.i(TAG, "going into onPreviewFrame");12      //mYUV420sp = data;   // 获取原生的YUV420SP数据13      YUVIMGLEN = data.length;14      15      // 拷贝原生yuv420sp数据16      mYuvBufferlock.acquire();17      System.arraycopy(data, 0, mYUV420SPSendBuffer, 0, data.length);18      //System.arraycopy(data, 0, mWrtieBuffer, 0, data.length);19      mYuvBufferlock.release();20      21      // 开启编码线程,如开启PEG编码方式线程22      mSendThread1.start();23      24     } catch (Exception e)25     {26      Log.v("System.out", e.toString());27     }// endtry    28    }// endonPriview  29   };


Refs/Related

0 http://developer.android.com/reference/android/graphics/Camera.html
1 http://wenku.baidu.com/view/5551eb59be23482fb4da4c89.html
2 http://www.cnblogs.com/franksunny/archive/2011/11/17/2252926.html
3 http://blog.csdn.net/yf210yf/article/details/7304437
4 http://topic.csdn.net/u/20111104/13/fdf356b5-ea77-4ee9-ba8e-c44d0f1b7a19.html  
5 http://developer.android.com/reference/android/view/SurfaceView.html
6 http://developer.android.com/reference/android/view/SurfaceHolder.html
7 http://blog.csdn.net/xiaominghimi/article/details/6089594
8 http://blog.csdn.net/xiaominghimi/article/details/6090575
9 http://www.cnblogs.com/emily1314/archive/2012/03/03/2378147.html
10 http://blog.csdn.net/hellogv/article/details/5985090

【流媒體】Android 实时视频采集—Camera预览采集相关推荐

  1. Android 休眠状态对Camera预览的影响

    http://blog.csdn.net/sevensundark/article/details/7433177 最近遇到的一个问题,app中有照相功能的预览画面,提供照相功能,在此画面打开的前提下 ...

  2. Android camera预览流程

    前面已经简单介绍了,在Android系统中open camera的流程,但是,它又是怎么预览.怎么配置流,如何最终操作到camera HAL的呢.接下来以android原生相机应用,android9, ...

  3. android平台下OpenGL ES 3.0使用GLSurfaceView对相机Camera预览实时处理

    OpenGL ES 3.0学习实践 android平台下OpenGL ES 3.0从零开始 android平台下OpenGL ES 3.0绘制纯色背景 android平台下OpenGL ES 3.0绘 ...

  4. 【流媒體】H264—MP4格式及在MP4文件中提取H264的SPS、PPS及码流

    原文地址为: [流媒體]H264-MP4格式及在MP4文件中提取H264的SPS.PPS及码流 [流媒體]H264-MP4格式及在MP4文件中提取H264的SPS.PPS及码流 SkySeraph A ...

  5. [转]【流媒體】H264—MP4格式及在MP4文件中提取H264的SPS、PPS及码流

    [流媒體]H264-MP4格式及在MP4文件中提取H264的SPS.PPS及码流 SkySeraph Apr 1st 2012  Email:skyseraph00@163 .com 一.MP4格式基 ...

  6. 流媒體】H264—MP4格式及在MP4文件中提取H264的SPS、PPS及码流

    源地址:http://www.cnblogs.com/skyseraph/archive/2012/04/01/2429384.html [流媒體]H264-MP4格式及在MP4文件中提取H264的S ...

  7. Android Camera预览角度和拍照保存图片角度学习

    1 Camera预览角度处理 开发Camera过程中会遇到Camera拍照,获取照片后可以上传照片或者展示给用户. Camera的图像数据来源于摄像头硬件的图像传感器,这个图像传感器被固定到手机上后会 ...

  8. 【流媒體】jrtplib—VS2010 下RTP开源协议库JRTPLIB3.9.1编译

    [流媒體]jrtplib-VS2010下RTP开源协议库JRTPLIB3.9.1编译 SkySeraph Apr 7th 2012 Email:skyseraph00@163.com 一.JRTPLI ...

  9. RTP/RTCP流媒體服務器技術研究

    來源:http://www.sharp-i.net/big5/articles/article/26.htm 隨著互聯網的飛速發展,流媒體技術的應用越來越廣泛,從網上廣播.電影播放到遠程教學以及在線的 ...

最新文章

  1. evernote使用推荐
  2. c程序语言设定定义域,4.22C语言学习日记:变量的定义域及编译预处理
  3. python自学书籍顺序-2018最全各阶段Python学习书籍汇总!
  4. 云原生时代,Java还是Go?
  5. Windows下搭建PySpark环境
  6. 【Python】用 Python 帮财务小妹生成 Excel 报表,小妹直说一辈子。。。
  7. SQL语句性能调整原则
  8. 「每天一道面试题」String和StringBuilder、StringBuffer的区别
  9. cas返回mysql数据_单点登录 CAS 5.* - 从数据库获取用户信息 - 4
  10. 如何获取租户中所有的Team
  11. 无服务器革命:好,坏和丑
  12. MVVM模式的一个小例子
  13. 计算机网络中TCP连接管理,计算机网络 TCP协议
  14. 转 OUI and OPatch Do Not Recognize JDK/JRE on Windows
  15. linux可视化打开root,Linux非root用户登录情况下可视化编辑root权限文本
  16. 数据结构银行排队系统c语言,数据结构银行排队系统实验报告
  17. CentOS利用WebHook实现PHP自动部署Git代码
  18. 拼多多又起一事:因为看到同事被抬上救护车我被拼多多开除了
  19. 七牛服务器提供的压缩图片的方法
  20. 电信ZNHG60光猫信息虚标

热门文章

  1. php首页遍历出商品详情页,ECSHOP首页/分类页/详情页各页面调用显示销量
  2. 计算机上没有office2010,《我安装了office2010,为什么桌面-右键-新建中没有excel呢?》 excel文件找不到...
  3. cross join 一张表没有值关联不出来数据_你是否还在对left join、right join和join有困扰呢?...
  4. android signalr 自动重连,.net-何时在signalR中重新连接?
  5. 目标检测第6步:YOLOv5(5.0)如何在Colab中训练自定义数据集?(更新时间:2022.3.22)
  6. 将数据转化成字符串时:用字符串的链接 还是 StringBuilder
  7. Java11.0.2怎么生成JRE_java环境变量配置,jdk13.0.1中没有jre解决办法
  8. helm安装postgres_Helm 入门介绍 Kubernetes 上的包管理软件
  9. Vim进阶2 map映射
  10. python axis 0 1_python pandas 中axis值0 1怎么分行还是列