android opencv 人脸截取

需求

启动摄像头,在预览视频流中识别人脸,并标注人脸框;当用户按下拍照按钮,将人脸部分裁剪出来,现实在ImageView中。


图片来自于网络

解决方案

开发环境:android studio、ecplise

1.人脸标注功能可采用第三方依赖库实现,如谷歌自带的FaceDetector、Face++、科大讯飞等。当拍照按钮被按下,先把整张图像保存下来,再启动系统自带的CROP应用,指引用户手动定位到人脸区域并截图。

   缺点:操作复杂,用户需进行4次点击操作;整个流程下来耗时约7秒。

2.采用开源库open cv,该已封装好人脸检测功能,可自动将人脸区域标注出来,当用户按下拍照按钮,直接将人脸数据转换为bitmap,即可显示。

   缺点:open cv对安卓系统的兼容性还不是很好,相应的so库需要手动编译。版本也较多,不同版本之间的也有一定的差异性。

明显看得出,第二方案优于第一方案,花了好一些时间,填了好些坑才把功能调通了。下面把整个debug过程记录下来,供他人参考。

1.文件下载

第一想法,是去官网opencv.org/下,目前官网提供的最新版本是3.2,是寄存在Github上,可能是由于国外服务器的原因,我电脑没翻墙,就总是下载不了,也没啥错误提示。现在我把文件上传到了百度云盘,方便大家下载:pan.baidu.com/s/1qYyfxzI

文件的结构我就不去分析了,网上很多这方面的资料。

2.so库编译

官网提供的文件里面并没有包含android可调用的so库文件,只提供了相应的头文件、编译文件。关于这点,我也是挺疑惑的,为何官网不直接编译好so文件,同时也保留相应的头文件、编译文件,有特殊需求的再去重新编译。

实现ndk编译,需要先搭建好编译环境(搭建方法,百度一下,要多详细有多详细)。打开cmd,进入到项目(我这里用的是face-detection)结构下的jni文件夹,如:


输入 ndk-build 执行后,libs下(我用的是ecplise)便会多出一个文件:


编译好的so文件

3.排除错误

将项目和sdk都导入到ecplise中,会提示camera2这个类找不到。查了一下,这个类是从Android5.0之后才引入的,但opencv sdk默认的编译版本是4.0.这点上,感觉官方真的好坑。解决起来也很容易,修改project.properties文件中的target=android-21

解决以上错误后,项目就可以跑起来了,但如果没有第2步编译的so文件,应用一启动就会蹦了,log只看到某个类加载不了。在这里卡了好一段时间,官方既不提供so库,log提示又没有明确说明是由于某个动态库未加载。

4.去除manager

在使用某个功能时,需要先安装一个manager.apk应用,官方将某些服务封装到了manager.apk里面。无疑,这是一个很鸡肋的操作。

其实要解决起来也很简单,在官网下载的文件中,找到sdk-->native-->libs-->armeabi-v7(这是我的设备架构,大家需要根据自己的设备来选择不同的文件夹)-->libopencv_java3.so   将该文件拷贝至项目下,clean一下,再运行,就可以脱离manager.apk正常运行了。

5.数据格式转换

face-detection项目跑起来后,也只是捕捉到了人脸数据。我们需要将rect类型的数据转换为bitmap,但官网并没有提供现有的方式进行转换,只能讲rect先转为mat,再转换为bitmap,相关函数为:

rect-->mat  Utils.matToBitmap(Rect roi)

mat-->bitmap Utils.matToBitmap(Mat mat, Bitmap bitmap);

总结

以上看似简单的几个步骤,实际上花了将近一周的时间,现在回头想想,根源是对opencv实现流程不熟悉,套用惯性思维去对待。下意识总觉着,官方下载下来的东西都是可以直接跑的。这次算是长见识了。如对上述项目源码有需要的,可以将邮箱留言,我会第一时间给你发过去。opencv还有很多强大的功能,后期有时间慢慢研究。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,884评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,755评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,369评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,799评论 1 285
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,910评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,096评论 1 291
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,159评论 3 411
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,917评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,360评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,673评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,814评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,509评论 4 334
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,156评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,882评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,123评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,641评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,728评论 2 351

推荐阅读更多精彩内容