OpenGL-ES初探

初识 OpenGL ES

  • OpenGL ES是OpenGL的子集
  • OpenGL ES 是针对嵌入式设备及移动终端设备的高级3D图形应用程序,例如iOS、Android、Windows等
  • OpenGL ES 是跨平台的,不会提供窗口相关方法,需要系统各自提供载体

OpenGL ES渲染流程

OpenGL ES渲染流程

OpenGL ES的渲染主要分为两部分:CPU和GPU

  • CPU部分

    app代码通过OpenGL ES API,会调度OpenGL ES Framework

    通过OpenGL ES client 调度 OpenGL ES server,将顶点数据等传递到GPU

  • GPU部分

    做一些图形硬件的处理,例如光栅化、显示等

OpenGL ES 图形管道

OpenGL ES 图形管道有以下两种图示,其中原理都是一致的,只是描述方式不同:

图一

OpenGL ES 图形管道
  • API获得顶点数据,将顶点数据从内存中拷贝至顶点缓冲区(显存)
  • 拿到数据之后,通过attribute通道传递至顶点着色器,同时,纹理坐标通过Texture通道传递到顶点着色器和片元着色器
  • 然后,图元装配,即图元的连接方式,一共有9种,常用的有6种,此步骤将顶点变换为图形
  • 光栅化:确定图形与屏幕对应的位置
  • 片元/片段/像素着色器:处理对应像素点的颜色值
  • 在将处理好的每个像素点的颜色值存储到帧缓存区,然后在显示器中显示
  • API:可以通过API操作顶点缓冲区、顶点着色器、纹理坐标、片段着色器

Apple官方图示

Apple官方图示
  • App:提供图元装配顶点信息,图片信息
  • Vertex(顶点着色器):处理顶点 -- 图形变换(旋转、缩放、平移)
  • Geometry(图元装配):图元装配 + 裁剪(超出屏幕部分被裁剪)
  • Fragment(片元着色器):纹理处理 + 雾化处理
  • Framebuffer Operation(帧缓冲区):透明度混合、模板、深度测试;最后在混合,这些操作都是在即将显示时,在帧缓冲区中完成的动作

顶点着色器

顶点着色器处理顶点的着色器程序,顶点着色器的输入输出如下图所示

顶点着色器
  • 输入,有3种方式 1.通过attribute通道输入顶点数据,提供每个顶点的数据 2.通过uniform通道输入统一变量,即顶点/片元着色器中使用的不变的数据 3.采样器:表示顶点着色器使用纹理的特殊统一变量类型

  • 输出:经过处理的最终顶点数据,有2种

    1. gl_Position ,是GLSL 的内建变量,是将处理后的最终顶点数据赋值给它
    2. gl_PointSize,是指点的尺寸,即可以在顶点着色器中修改每个点的大小,使用率较低

顶点着色器处理的业务

  • 矩阵变换位置
  • 算光照公式生成逐顶点颜色(也可以片元着色器)
  • 生成/变换纹理坐标:片元着色器是没有办法传入属性即attribute的,可以通过顶点着色器桥接,间接将纹理坐标属性传递到片元着色器

顶点着色器GLSL代码示例

attribute vec4 position;
attribute vec2 textCoordinate; 
uniform mat4 rotateMatrix; 
varying lowp vec2 varyTextCoord; 
void main()
{
    varyTextCoord = textCoordinate;
    vec4 vPos = position;
    vPos = vPos * rotateMatrix;
    gl_Position = vPos; 
}
  • attribute、uniform 表示client与server之间的通道
  • 其中的vec4、vec2都是向量类型,表示四维向量和二维向量
  • mat4:4*4矩阵
  • varying是修饰符:通过varying将纹理坐标传入到片元着色器
  • lowp:低精度
  • main中的操作: 1.实现了纹理坐标的桥接;2.实现了顶点旋转矩阵的相乘:列向量 与 列矩阵 相乘,得到旋转后的顶点坐标;3.将上述得到的顶点坐标,赋值给gl_Position

图元装配、光栅化

  • 图元装配:将顶点数据计算成一个个图元
  • 光栅化:将图元转化为一组二维片段的过程,主要是由于屏幕是2D的,所以转换的像素点也是二维的

片元着色器

下图展示了片元着色器的输入和输出。

片元着色器
  • 输入,和顶点着色器一样,也有3种方式

    1.由顶点着色器桥接传递过来的纹理坐标等

    2.通过uniform通道输入统一变量,即顶点/片元着色器中使用的不变的数据

    3.采样器:表示顶点着色器使用纹理的特殊统一变量类型,例如纹理就是通过采样器传递

  • 输出:

    某个像素点经过片元着色器处理后的结果

片元着色器处理的业务

  • 计算颜色
  • 获取纹理值
  • 往像素点中填充颜色值(纹理值/颜色值)

片元着色器GLSL代码示例

varying lowp vec2 varyTextCoord; 
uniform sampler2D colorMap;
void main() {
gl_FragColor = texture2D(colorMap, varyTextCoord); }
  • varying:必须和顶点着色器中一模一样,这样才能传递纹理坐标
  • sampler2D 采样器类型
  • texture2D(纹理采样器,纹理坐标):获取对应位置/坐标的颜色值,简称获得纹素
  • gl_FragColor(内建变量):将最终的颜色值赋值给它

总结

  • 顶点着色器、片元着色器都是代码段,类似于iOS中的函数/方法,有返回值.
  • 这两个返回值都属于GLSL中的内建变量,是封装好的,直接将数据赋值给它即可.
  • 顶点着色器的返回值会被复制给gl_Position,它 是顶点着色器中某一个顶点经过一系列处理后得到的结果;片元着色器的结果会赋值给gl_fragColor,它是经过片元着色器对某一个像素点来进行处理之后的结果。
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,222评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,455评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,720评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,568评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,696评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,879评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,028评论 3 409
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,773评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,220评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,550评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,697评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,360评论 4 332
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,002评论 3 315
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,782评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,010评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,433评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,587评论 2 350