Android NDK开发FFmpeg/OpenGLES/OpenCV问题汇总

之前Qt的人脸特效方面的c++项目,用到的库很多,FFmpeg OpenGL OpenCV libYUV GLM...

最近决定同样的东西,在安卓上做完整做一次。

虽然大部分都是标准c/c++但移植过程,也出现了很多小问题,麻烦。

这些小问题,麻烦虽然都能拐个弯解决,但总结其实就是,安卓开发其实要比Qt,iOS麻烦一些。

很多东西并不能一步到位。尤其一些c c++项目,并不像ios qt那样,基本不怎么改就能直接跑起来。安卓上光c++库就好几个。libc++ gunc++。。 而且版本不兼容。 一些早年开发的opencv的项目什么的,很可能导致很多麻烦。

1 OpenGL方面,GLSL放在asset下. JNI传入AssetManager 来获取,读取shader文件. 这个做法点赞,类似Qt,因为把shader当字符串,写在代码里,每行敲一个"\n",实在太糟糕了。弄在Asset里面还有个好处,当然Qt做得更好一些,把shader文件打包到可执行文件二进制里面了。更隐蔽。之前可以看到很多商业公司的软件,shader文件竟然暴露在外面。

2 安卓OpenGLES直接上3.0。 3.0的GL,有VAO,GLSL 支持layout, in out关键字,用起来更舒服。更合理.

3 写FFmpeg,99%都一样,这个不必说,libYUV可以替代swscale,谷歌自家写的,效率应该有优化.

4 OpenCV,这个确实有很多麻烦。首先是c++ 有几个版本,有些不兼容,libc++ gunc++ libstdc++ 这背后就不细说。GCC/LLVM/Clang.. OpenCV3.x用的是gnuc++。 如果你用的是ndk r16之前的ndk,就用gnuc++。 r16之后,用的是libc++。用错了opencv都编不过。

5 如果你的代码是早年的opencv写的项目,可能还比较麻烦。如果用最新的安卓studio,最新的ndk,就只能改,将代码改成opencv4.x最新的兼容版本.

6 训练的model ,classifier,在安卓上加载,还不能用assertmanager。assermanager其实蛮方便的,比如加载图片,GLSL。 这些二进制文件,建议用java读取asset/Resources文件,然后拷贝到App私有目录下,然后再按照之前iostream方式加载。

成功移植到安卓的结果:


以上就是安卓在FFmpeg,OpenGL,OpenCV开发过程中的小麻烦总结。跑通了其实也比较简单,就那么点事儿.但整个过程,没有iOS/Qt那样单纯,简单,直观,总要拐个弯去解决。毕竟有个java摆在那. 其实从Qt框架移植到安卓上,就可以看到,很多地方,在c++层也调用了java API来解决问题,如果c++实在解决不了的话。

深入做客户端开发,一些核心代码,第三方库还得靠c++。所以客户端开发程序员,熟练掌握一个c++开发工具是非常有必要的,推荐Qt, 或者VC++,或者VSCode+CMake. 三者都行。 Qt为什么首推荐,因为开源,当你有时候遇到一个小问题,而没头绪的时候,你可以去看看Qt源码里面怎么解决的。尤其是你周围没有什么人跟你讨论的时候,一些好的开源项目,比如Qt,WebRTC,都可能找到很好的思路,将好的理念借鉴.

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 218,386评论 6 506
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,142评论 3 394
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,704评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,702评论 1 294
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,716评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,573评论 1 305
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,314评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,230评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,680评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,873评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,991评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,706评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,329评论 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,910评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,038评论 1 270
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,158评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,941评论 2 355

推荐阅读更多精彩内容