0021--OpenGL Metal初探

什么是metal?

Metal 是一个和OpenGL ES 类似的面向底层的图形编程接口,通过使用相关的API 可以直接操作 GPU

注意:Metal只针对苹果的平台系统使用,不像OpenGL ES那样可以进行跨平台使用但是它能最大的挖掘苹果移动设备的 GPU 能力,进行复杂的运算,像 Unity 等游戏引擎都通过 Metal3D 能力进行了优化。

  • Metal在苹果中的架构图
5cc4997a5cbafc2e51cfd8747679095c
e14cb7b51d03c3f5d14462f813e38b8b

UIKit -> Core Graphics -> Metal/OpenGL ES -> GPU Driver -> GPU

  • Metal的特点
  1. GPU 支持的 3D 渲染
  2. CPU 并行处理数据 (深度学习)
  3. 提供低功耗接口
  4. CPU 共享资源内存
  • Metal绘制流水线
185e604f8e3dadfdb984bc3c40accdbc

器件和命令

通常使用两个框架来显示呈现的内容:MetalMetalKit
Metal提供对GPU的访问,MetalKit提供了常用的实用程序,可以更轻松地开发Metal应用程序。 它们与OS和其他框架无缝集成,因此您可以专注于GPU编程.

MetalKit最有用的功能之一是MTKView类,它包装UIViewNSView对象并配置特定于MetalCore Animation功能。 特别是,MetalKit视图自动设置和管理连续渲染循环,为每个帧提供2D可显示资源,通常称为可绘制资源。

注意:您可以直接使用Core Animation开发Metal应用程序,但使用MetalKit更容易,更快捷,更方便

  • Separate Your Rendering Loop - 分离渲染循环

在我们开发Metal程序时,将渲染循环分离到自己创建的类中,是非常有用的一种方式,使用 单独的类,我们可以更好管理初始化Metal,以及Metal视图委托.


 _render =[[Renderer alloc]initWithMetalKitView:_view];
    
    //5.判断_render 是否创建成功
    if (!_render) {
        NSLog(@"Renderer failed initialization");
        return;
    }
  • Respond to View Events - 响应视图事件

MTKViewDelegate的代理对象实现mtkView:drawableSizeWillChange:drawInMTKView方法。 这些方法通知渲染器MetalKit视图的大小调整和绘图事件

每当窗口大小发生变化(macOS)或发生重新布局操作(例如设备方向更改)时,视图都会调用mtkView:drawableSizeWillChange:方法(iOS和tvOS)。 然后,您可以根据需要响应视图的新大小并更改渲染分辨率。

每当需要渲染新帧时,视图都会调用drawInMTKView:方法,这是由视图的preferredFramesPerSecond属性上设置的帧速率(例如,60 FPS)指定的。 此回调通常是开始执行渲染循环的主要事件。

  • Metal Command Objects - Metal命令对象

MTLDevice对象表示GPU。 通常,您调用MTLCreateSystemDefaultDevice()方法以获取表示设备的默认GPU的单个MTLDevice对象。 MTLDevice对象提供有关GPU的信息,但其主要目的是创建可与GPU交互的其他对象。

所有应用程序需要与GPU交互的第一个对象是MTLCommandQueue对象。

 _commandQueue = [_device newCommandQueue];

你使用MTLCommandQueue 去创建对象,并且加入MTLCommandBuffer 对象中.确保它们能够按照正确顺序发送到GPU.对于每一帧,一个新的MTLCommandBuffer 对象创建并且填满了由GPU执行的命令.

id<MTLCommandBuffer> commandBuffer = [_commandQueue commandBuffer];

有许多不同类型的GPU,每个GPU都以自己独特的方式接受和解释命令。 MTLCommandBuffer对象将这些命令合并为单个提交,但必须首先使用MTLCommandEncoder对象以与设备无关的方式对它们进行编码。有几种不同类型的MTLCommandEncoder类,每种类用于在GPU上执行不同类型的任务。此示例演示了如何使用MTLRenderCommandEncoder子类,该子类专门将渲染命令编码到命令缓冲区中。

此示例使用MTLRenderCommandEncoder对象对GPU命令进行编码,这些命令将像素渲染到MetalKit视图的drawable。为此,渲染命令编码器必须与此drawable特别关联。

要创建MTLRenderCommandEncoder对象,必须首先创建MTLRenderPassDescriptor对象。 MTLRenderPassDescriptor是一个轻量级临时对象,具有许多可配置属性,现有MTLCommandBuffer对象使用这些属性来创建新的MTLRenderCommandEncoder对象。之后,不再需要MTLRenderPassDescriptor对象。

下图说明了Metal的命令对象之间的关系。总结一下:

  • 命令缓冲区(Command buffers)是从命令队列(command queue)创建的
  • 命令编码器(Command encoders)将命令编码到命令缓冲区中
  • 然后提交命令缓冲区并将其发送到GPU
  • GPU执行命令并将结果呈现为可绘制的
    cb71d873de6bb360f157d16ddf98d73c
  • Prepare a Frame - 准备一帧

MetalKit视图为每个帧创建一个新的MTLRenderPassDescriptor对象,通过currentRenderPassDescriptor属性提供。 此渲染过程描述符预先配置了特定于视图的属性,一些属性派生自视图的drawable,可用于轻松方便地创建新的MTLRenderCommandEncoder对象。

 MTLRenderPassDescriptor *renderPassDescriptor = view.currentRenderPassDescriptor;
    

    if(renderPassDescriptor != nil)
    {
     
        id<MTLRenderCommandEncoder> renderEncoder = [commandBuffer renderCommandEncoderWithDescriptor:renderPassDescriptor];
        renderEncoder.label = @"MyRenderEncoder";

        [renderEncoder endEncoding];
        
     
        [commandBuffer presentDrawable:view.currentDrawable];
    }

编码到此MTLRenderCommandEncoder对象中的命令呈现给视图的drawable。 默认情况下,创建MTLRenderCommandEncoder对象会隐式编码GPU在任何其他渲染命令之前执行的清除clear命令。 clear命令将drawable的像素设置为在渲染循环开始时为clear color

//1. 获取颜色值
    Color color = [self makeFancyColor];
    //2. 设置view的clearColor
    view.clearColor = MTLClearColorMake(color.red, color.green, color.blue, color.alpha);

Finalize a Frame - 完成一帧

通常,Metal应用程序调用许多MTLRenderCommandEncoder方法,这些方法将显式渲染命令编码到命令缓冲区中。 为简单起见,此示例实际上不编码显式渲染命令,只有隐式清除命令被编码。 创建MTLRenderCommandEncoder对象后,该示例只调用endEncoding方法以指示编码器已完成。

编码器完成后,命令缓冲区(command buffer)接受两个最终命令:presentcommit

由于GPU不直接绘制到屏幕上,因此在完成执行命令之前无法绘制像素。 为避免因不完整的drawable导致的糟糕用户体验,请调用presentDrawable:方法。 此方法告诉Metal在屏幕上显示之前等待GPU完成渲染到drawable.

[commandBuffer presentDrawable:view.currentDrawable];

GPU也不会立即执行命令。 只有在调用commit方法后才会执行对MTLRenderCommandEncoderMTLCommandBuffer对象的调用。 然后,Metal会调度命令缓冲区(command buffer)以供执行。 GPU开始执行时,将使用新颜色清除drawableGPU完成执行后,渲染的drawable将显示在屏幕上。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,544评论 6 501
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,430评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 162,764评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,193评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,216评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,182评论 1 299
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,063评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,917评论 0 274
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,329评论 1 310
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,543评论 2 332
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,722评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,425评论 5 343
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,019评论 3 326
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,671评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,825评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,729评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,614评论 2 353