【iOS】(一)GPUImage的结构,滤镜链的实现原理

前言

学了OpenGL,OpenGLES后,去阅读了GPUImage的源码,使用了一段时间,接下来,记录一下我对GPUImage使用和源码阅读的一些分析吧。
相关引用
从0打造一个GPUImage(6)-GPUImage的多滤镜处理逻辑

GPUImage结构

GPUImage目录.png

对于GPUImage,可以分为

  • GLProgram 用于加载shader,链接program的类
  • GPUImageContext 用于OpenGLContext上下文管理的
  • GPUImageFrameBuffer 用于frameBuffer的管理,GPUImage的滤镜链靠的就是传递GPUImageFrameBuffer
  • GPUImageFrameBufferCache 用于缓存frameBuffer的类,会根据texture的option属性,已经size生成key,作为缓存
  • Sources 可以理解为万恶之源吧,所有的渲染处理,都是从这里开始的,必须继承GPUImageOutput
  • Filter 滤镜类 既继承了GPUImageOutput,也遵守GPUImageInput的类,从而实现GPUImageOutput -> filter -> filter -> GPUImageInput的滤镜链的关键
  • Outputs,实现了GPUImageInput的组件,是渲染结果的终点

GPUImage的滤镜链

上面也提了,所谓的GPUImage滤镜链就是
GPUImageOutput -> filter -> filter -> GPUImageInput
GPUImageOutput通过target数组(里面都是实现GPUImageInput组件),组成了滤镜链的关系,我们需要牢牢的记住这个滤镜链的关系,这样开发的时候,我们就知道如何Debug,如何实现我们需要的效果。那么问题来了,为什么GPUImage可以实现这样的滤镜链呢?

滤镜链实现的原理

这里我们先抛开GPUImage,用OpenGL ES去实现一个具有滤镜叠加效果的Demo,这里的Demo我是参考叶孤城的这篇文章,从0打造一个GPUImage(6)-GPUImage的多滤镜处理逻辑

Demo需要实现的效果,是将一张图片,先后通过叠加亮度滤镜饱和度滤镜最后显示在屏幕上。

使用GPUImage的渲染步骤

  • 通过GPUImagePicture加载图片(这里就是source)
  • source addTarget亮度滤镜
  • 亮度滤镜传递渲染结果给饱和度滤镜
  • 饱和度滤镜传递给GPUImageView,GPUImageView显示渲染结果,

使用OpenGLES的渲染步骤

那么对应的OpenGLES,我们会怎么做呢?首先我们需要以下东西

  • 一个源,其实就是将图片信息加载为纹理的过程,这里对应GPUImagePicture
  • 3个frameBuffer,前两个挂载亮度滤镜饱和度滤镜texture,通过glFramebufferTexture2D绑定texture到frameBuffer上,最后一个frameBuffer挂载的是renderBuffer用于显示
// 绑定texture
glFramebufferTexture2D(GL_FRAMEBUFFER, GL_COLOR_ATTACHMENT0, GL_TEXTURE_2D, brightnessTexture, 0)
glFramebufferTexture2D(GL_FRAMEBUFFER, GL_COLOR_ATTACHMENT0, GL_TEXTURE_2D, saturationTexture, 0)
// 绑定renderBuffer
 glFramebufferRenderbuffer(GL_FRAMEBUFFER, GL_COLOR_ATTACHMENT0, GL_RENDERBUFFER, _renderBuffer);
  • 3个Program,前两个Program用于加载亮度滤镜饱和度滤镜的frameShader文件(这里就相当于GPUImageInput),最后一个Program加载的frameShader只需要把rgb信息从纹理中取出,然后展示就行了(这里就相当于GPUImageView)。

从以上的步骤,我们可以总结以下结论

  • 1、源总是会产生texture开始传递的,这里其实就是GPUImageOutput的职责
  • 2、每个滤镜Filter都是通过传递frameBuffer挂载texture来传递渲染结果的(这里的滤镜对应一个program,一个frameBuffer)
  • 3、对于需要显示的渲染结果的GPUImageInput,例如GPUImageView,需要依赖frameBuffer挂载renderBuffer进行显示

对于这个Demo的一个流程图,可以参考从0打造一个GPUImage(6)-GPUImage的多滤镜处理逻辑的一幅图,Demo的详细实现请看原文吧。

OpenGLES滤镜叠加流程图

总结

以上就是GPUImage对于滤镜链的实现原理,只有你懂了OpenGL ES的渲染流程,才能彻底的明白GPUImage的滤镜链的原理。所以时时刻刻记住以下关系
GPUImageOutput -> filter -> filter -> GPUImageInput
当然也可以存在多个Source,多个Input的情况,例如要给一个视频添加水印,用GPUImageMovie用于输出视频纹理,用GPUImageUIElement输出UI空间的纹理,通过一个filter进行Blend,最后用一个GPUImageView进行预览,用GPUImageMovieWriter进行输出,滤镜链关系如下

GPUImageOutput -> filter -> filter -> GPUImageInput
                    ↑         ↓
GPUImageOutput ----->    GPUImageInput
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 205,236评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,867评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,715评论 0 340
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,899评论 1 278
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,895评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,733评论 1 283
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,085评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,722评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,025评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,696评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,816评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,447评论 4 322
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,057评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,009评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,254评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,204评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,561评论 2 343

推荐阅读更多精彩内容