Android开发:实时处理摄像头预览帧视频------浅析PreviewCallback,onPreviewFrame,AsyncTask的综合应用

  次阅读 作者:智能小宝 来源:互联网 2015-09-29 10:14 我要评论(0)

很多时候,android摄像头模块不仅预览,拍照这么简单,而是需要在预览视频的时候,能够做出一些检测,比如最常见的人脸检测。在未按下拍照按钮前,就检测出人脸然后矩形框标示出来,再按拍照。那么如何获得预览帧视频么?

只需要在Activity里继承PreviewCallback这个接口就行了。示例如下:

public class RectPhoto extends Activity implements SurfaceHolder.Callback, PreviewCallback{}。(注意这个SurfaceHolder.Callback是用来预览摄像头视频,参见我的前贴)。

继承这个方法后,会自动重载这个函数:public void onPreviewFrame(byte[] data, Camera camera) {}这个函数里的data就是实时预览帧视频。一旦程序调用PreviewCallback接口,就会自动调用onPreviewFrame这个函数。调用PreviewCallback的方法有三种,可以参考这里,总共有三种方式调用这个回调。所谓回调就是当条件满足时,自动触发调用这个函数。分别是:.setPreviewCallback, setOneShotPreviewCallback, setPreviewCallbackWithBuffer, 我一般是使用第二种方式。

这里解释下,如果Activity继承了PreviewCallback这个接口,只需Camera.setOneShotPreviewCallback(this);就可以了。程序会自动调用主类Activity里的onPreviewFrame函数。如果Camera.setOneShotPreviewCallback()这个函数是在主类Activity里的内部类如class A里面,里面的参数应写为Camera.setOneShotPreviewCallback(YourActivity.this)。当然这里,也可以定义一个变量,如Camera.PreviewCallback mPreviewCallback,在调用的时候用Camera.setOneShotPreviewCallback(mPreviewCallback)来完成。相信很多人都熟悉这点,就不罗嗦了。

按理说只要在onPreviewFrame()这个函数里写你的处理程序就可以了。当通常不这么做,因为处理实时预览帧视频的算法可能比较复杂,这就需要借助AsyncTask开启一个线程在后台处理数据。这里假设我们定义一个FaceTask来进行人脸检测,可以这样写:

/*自定义的FaceTask类,开启一个线程分析数据*/

private class FaceTask extends AsyncTask<Void, Void, Void>{

private byte[] mData;

//构造函数

PalmTask(byte[] data){

this.mData = data;

}

@Override

protected Void doInBackground(Void... params) {

// TODO Auto-generated method stub

Size size = myCamera.getParameters().getPreviewSize(); //获取预览大小

final int w = size.width;//宽度

final int h = size.height;

final YuvImage image = new YuvImage(mData, ImageFormat.NV21, w, h, null);

ByteArrayOutputStream os = new ByteArrayOutputStream(mData.length);

if(!image.compressToJpeg(new Rect(0, 0, w, h), 100, os)){

return null;

}

byte[] tmp = os.toByteArray();

Bitmap bmp = BitmapFactory.decodeByteArray(tmp, 0,tmp.length);

doSomethingNeeded(bmp);//自己定义的实时分析预览帧视频的算法

return null;

}

}

注意上面的bmp就是Bitmap格式的实时预览帧数据。doSomethingNeeded(bmp) 就是你要对预览帧视频进行的处理,可以是检测人脸或其他,如分析有无火灾。或者是进行传输。另外,这里是通过YuvImage和ImageFormat.NV21来解析数据的。在华为u9200上,android4.0.3的系统运行良好。不同手机上支持的格式可能有所不同。网上也有自己写算法进行转化的,需要的可以自己找,但这里如果支持这个格式就不用自己写转换算法了。

onPreviewFrame()里可以这样写:

/*获取预览帧视频*/

public void onPreviewFrame(byte[] data, Camera camera) {

// TODO Auto-generated method stub

if(null != mFaceTask){

switch(mFaceTask.getStatus()){

本站文章信息来源于网络以及网友投稿,本站只负责对文章进行整理、排版、编辑,是出于传递更多信息之目的,并不意味着赞同其观点或证实其内容的真实性。如果您有什么意见或建议,请联系QQ28-1688-302!

人工智能实验室
相关文章相关文章
  • 英国研发“杀生”机器人 通过生命体获取能量

    英国研发“杀生”机器人 通过生命体获取能量

  • 韩春雨称已能重复实验结果 近期将有消息公布

    韩春雨称已能重复实验结果 近期将有消息公布

  • 未来两年人工智能要怎么走?看这篇就够了

    未来两年人工智能要怎么走?看这篇就够了

  • 无人驾驶汽车如何改变城市生活?听听他们怎么说

    无人驾驶汽车如何改变城市生活?听听他们怎么说

网友点评网友点评
阅读推荐阅读推荐

据国外媒体报道,在过去两年内,聊天机器人(chatbot)、人工智能以及机器学习的研发和采用取得了巨大进展。许多初创公司正利用人工智能和...

霍金 视觉中国 图 英国著名物理学家霍金(Stephen Hawking)再次就人工智能(AI)发声,他认为:对于人类来说,强大AI的出现可能是最美妙的...

文|郑娟娟 今年,人工智能(AI) 60岁了。在AI60岁的时候,笔者想要介绍一下AI100,一个刚刚2岁的研究项目,但它的预设寿命是100年,甚至更长...

AlphaGo与李世石的人机大战,为大众迅速普及了人工智能的概念。 但对谷歌而言,除了下围棋,现在的人工智能进展到哪一步了?未来,人工智能...