OpenGL ES初探(上)

一、简介

在之前,我写了几篇学习 OpenGL 的文章,大家有兴趣的可以去看一下,在学习了 OpenGL 的基础上,现在再来学习一下它的简化版本—— OpenGL ES

OpenGL ES(OpenGL for Embedded Systems)是以手持和嵌⼊式设备为⽬标的⾼级 3D 图形应⽤程序编程接口(API)。 OpenGL ES 是目前智能手机中占据统治地位的图形 API。支持的平台包括:iOS,Andriod,BlackBerry,bada,LinuxWindows,它还是基于浏览器的 3D 图形 Web 标准WebGL 的基础。

OpenGL ESOpenGL 的简化版本,它消除了冗余功能,提供了一个既易于学习又更易于在移动图形硬件中实现的库。OpenGL ES允许应⽤程序利⽤底层图形处理器的强大功能。iOS 设备上的 GPU 可以执行复杂的 2D3D 绘图,以及最终图像中每个像素的复杂着色计算。

OpenGl渲染流程.png

简单的来说,OpenGL ESOpenGL 学习起来大致一样,有很多重复的知识点。整个渲染管线流程如上图,还是以前那一套,具体流程可以看我之前写过的 《OpenGL基础渲染》。所以这篇文章就不再赘述渲染流程,而是着重介绍 OpenGL ES 中几个重要的步骤。
可编程管线中,我们只能操作 顶点着色器片元着色器

二、关键步骤介绍

1、顶点着色器

1)顶点着色器的输入输出:

顶点着色器 实现了顶点操作的通用可编程方法。

顶点着色器输入 包括:

  • 着色器程序 —— 描述顶点上执⾏操作的顶点着色器程序源代码(GLSL代码)或者可执行⽂文件。
  • 顶点着色器输入(或者属性Attributes)—— 用顶点数组提供的每个顶点的数据。
  • 统一变量(uniform)—— 顶点(或者片段)着色器使用的不变数据(例如旋转矩阵)。
  • 采样器 —— 代表顶点着色器使用纹理的特殊统一变量类型。

图形表述如下图所示:

OpenGL ES顶点着色器.png

2)顶点着色器的业务:

1、通过矩阵变换位置
2、计算光照公式生成逐顶点颜色
3、生成或变换纹理坐标

此外,因为顶点着色器由应用程序规定,所以它可以用于执行自定义计算,实施新的变换、照明或者较传统的固定功能管线所不允许的基于顶点的效果。

3)GLSL 代码的简单认识:

格式:通道修饰符 类型 变量名

attribute vec4 position;
attribute vec2 textCoordinate;
uniform mat4 rotateMatrix;
  • attributeuniform 对应 通道修饰符
    分别是 attribute属性通道uniform 通道。
  • vec4vec2mat4 对应 类型
    vec4 代表 4 维向量,
    vec2 代表 2 维向量,
    mat4 代表 44 列的矩阵类型。
  • positiontextCoordinate 对应 变量名,可以随便起。
varying lowp vec2 varyTextCoord;

varying 代表的也是一种通道,
lowp 是一个精度,低精度、高精度等,可以不写。

  • 这里 position 声明的是 顶点坐标
    textCoordinate 声明的是 纹理坐标
    rotateMatrix 声明的是个 旋转矩阵
4)顶点着色器的代码案例:
attribute vec4 position;
attribute vec2 textCoordinate;
uniform mat4 rotateMatrix;
varying lowp vec2 varyTextCoord;
void main()
{
// 把textCoordinate交给varyTextCoord,就可以把纹理坐标传递到片元着色器里面去。
    varyTextCoord = textCoordinate;

    vec4 vPos = position;
    vPos = vPos * rotateMatrix;// 让每一个顶点都和旋转矩阵相乘
    
    gl_Position = vPos;// gl_Position是一个内建变量,是vec4类型的,必须给它赋值。
}

GPU 来执行上述代码,有几个顶点就会执行其次,GPU 是并行的,所以会并行把所有顶点都执行了。

2、图元装配

顶点着色器之后,OpenGL ES 3.0 图形管线的下一阶段是 图元装配
图元(Primitive):是三角形、直线或者点精灵等几何对象。图元装配:将顶点数据计算组合成一个个图元,在这个阶段会执行裁剪、透视分割和 Viewport 变换操作。
在这之后将进⼊ 光栅化 阶段。

3、光栅化

在此阶段绘制对应的图元(点精灵、直线或者三角形)。光栅化是将图元转化为一组二维片段的过程,然后这些片段由片元着色器处理。这些二维片段代表着可在屏幕上绘制的像素。
光栅化阶段.png

4、片元(片段)着色器

1)片元着色器的输入输出:

片元/⽚段着色器输入 包括:

  • 着色器程序 —— 描述⽚段上执⾏操作的片元着⾊器程序源代码/可执行⽂件。
  • 输入变量—— 光栅化单元用插值为每个片段生成的顶点着⾊器输出。
  • 统一变量(uniform)—— 顶点(或者片段)着色器使用的不变数据。
  • 采样器 —— 代表⽚元着色器使⽤纹理的特殊统一变量类型。

图形表述如下图所示:

ES 片元着色器.png

2)片元着色器的业务:

1、计算颜色
2、获取纹理值
3、往像素点中填充颜色值【纹理值/颜色值】
总结:
它可以用于图片/视频/图形中每个像素的颜色填充(比如给视频添加滤镜,实际上就是将视频中每个图片的像素点颜色填充进行修改)。

3)片元着色器的代码案例:
varying lowp vec2 varyTextCoord;
uniform sampler2D colorMap;
void main()
{
    // texture2D(纹理采样器, 纹理坐标); 为了取得纹素(纹理对应坐标上的颜色值),比如取到了一个rgba四维变量
    gl_FragColor = texture2D(colorMap, varyTextCoord);
}

顶点着色器 里的 varying lowp vec2 varyTextCoord;
片元着色器 里的 varying lowp vec2 varyTextCoord;
必须定义的一模一样才行,包括通道、精度、类型和变量名都要一致,这样才能从顶点着色器传进来。
uniform sampler2D colorMap 是由 uniform 通道传进来的纹理采样器,通过它可以拿到对应的纹理。

5、逐片段操作

片元着色器之后,下一阶段就是 逐片段操作

逐片段操作.png

  • 像素归属测试:这个测试确定帧缓存区中位置 (Xw, Yw) 的像素目前是不是归 OpenGL ES 所有。例如,如果⼀个显示 OpenGL ES 帧缓存区窗口的窗口被另外一个窗口所遮蔽,则窗⼝系统可以确定被遮蔽的像素不属于 OpenGL ES 上下文。从⽽完全不显示这些像素。虽然像素归属测试是 OpenGL ES 的⼀部分,但它不由开发人员控制,⽽是在 OpenGL ES 内部进行。
  • 裁剪测试:裁剪测试确定 (Xw, Yw) 是否位于作为 OpenGL ES 状态的一部分的裁剪矩形范围内。如果该⽚段位于裁剪区域之外,则被抛弃。
  • 深度测试:输⼊片段的深度值比较,确定⽚段是否应该被拒绝。
  • 混合:混合将新生成的⽚段颜⾊值与保存在帧缓冲区 (Xw, Yw) 位置的颜⾊值组合起来。
  • 抖动:抖动可用于最⼩化,因为使用有限精度在帧缓存区中保存颜色⽽产生的伪像。

6、EGL (Embedded Graphics Library )

OpenGL ES 命令需要 渲染上下文绘制表面 才能完成图形图像的绘制。

  • 渲染上下文:存储相关 OpenGL ES 状态。
  • 绘制表⾯:是⽤于绘制图元的表面,它指定渲染所需要的缓存区类型,例如颜色缓冲区、深度缓冲区和模板缓冲区。

OpenGL ES API 并没有提供如何创建渲染上下文或者上下文如何连接到原⽣窗⼝系统。EGLKhronos 渲染 API(如OpenGL ES)和原生窗口系统之间的接口。唯一⽀持 OpenGL ES 却不⽀持 EGL 的平台是 iOSApple 提供自己的 EGL APIiOS 实现,称为 EAGL
因为每个窗⼝系统都有不同的定义,所以 EGL 提供基本的不透明类型—EGLDisplay,这个类型封装了所有统相关性,⽤于和原⽣生窗⼝系统接口。

至此,我们完成了 OpenGL ES 的初探(上)。后面我还会继续分享深入学习 OpenGL ES 的学习成果给大家,点击进入
《OpenGL ES初探(下)—— GLKit》

以上的总结参考了并部分摘抄了以下文章,非常感谢以下作者的分享!:
《OPENGL ES 3.0编程指南 原书第2版》

转载请备注原文出处,不得用于商业传播——凡几多

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,080评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,422评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,630评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,554评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,662评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,856评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,014评论 3 408
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,752评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,212评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,541评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,687评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,347评论 4 331
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,973评论 3 315
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,777评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,006评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,406评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,576评论 2 349

推荐阅读更多精彩内容