您现在的位置: IOS教程網 >> IOS系統 >  >> iOS 程式開發 >> iOS 開發綜合

iOS 圖形編程總結

編輯:iOS 開發綜合

iOS 實現圖形編程可以使用三種 API:UIKit、Core Graphics、OpenGL ES 及 GLKit。

這些 API 包含的繪製操作都在一個圖形環境中進行。一個圖形環境包含繪製參數與所有繪製所需的裝置特定資訊,包括螢幕圖形環境、offscreen 位圖環境與 PDF 圖形環境,分別用來在螢幕表面、一個位圖或一個 PDF 檔案中進行圖形與圖像繪製。在螢幕圖形環境中進行的繪製限定於在 UIView 類或其子類的實例中進行並直接顯示在螢幕上;在 offscreen 位圖或 PDF 圖形環境中進行的繪製則不直接在螢幕上顯示。

1. UIKit API

UIKit 是一組 Objective-C API,為線條圖形、Quartz 圖像與顏色操作提供 Objective-C 封裝,並提供 2D 繪製、圖像處理及使用者介面級別的動畫。

UIKit 包括 UIBezierPath(繪製線、角度、橢圓及其他圖形)、UIImage(顯示圖像)、UIColor(顏色操作)、UIFont 與 UIScreen(提供字體與螢幕資訊)等類別,以及在位圖、PDF 圖形環境上進行繪製與操作的功能,也提供對標準視圖與列印功能的支援。

在 UIKit 中,UIView 類本身在繪製時會自動建立一個圖形環境(對應 Core Graphics 層的 CGContext 型別)作為目前的繪製環境,可以呼叫 UIGraphicsGetCurrentContext 取得它。

2. Core Graphics 與 Quartz 2D API

Core Graphics 是一套 C-based API,支援向量圖形、線、形狀、圖案、路徑、漸層、位圖圖像與 PDF 內容的繪製。

Quartz 2D 是 Core Graphics 中的 2D 繪製呈現引擎。Quartz 是資源與裝置無關的,提供路徑繪製、anti-aliased 呈現、漸層填色圖案、圖像、透明繪製與透明層、遮蔽與陰影、顏色管理、座標轉換、字體、offscreen 呈現、PDF 文件建立/顯示/分析等功能,並能與所有圖形與動畫技術(Core Animation、OpenGL ES、UIKit 等)一起使用。Quartz 採用 paint 模式進行繪製,圖形環境由 CGContext 表示。

在 Quartz 中可以把一個圖形環境作為繪製目標。使用 Quartz 繪製時,所有裝置特定的特性都被封裝在你所使用的圖形環境型別中,因此只要給相同的圖像操作函式傳入不同的圖形環境,就能把同樣的圖像畫到不同裝置上,做到繪製的裝置無關性。

Quartz 提供的主要圖形環境:

1)位圖圖形環境,用來建立一個位圖,使用 CGContext... 也就是 CGBitmapContextCreate 函式建立。

2)PDF 圖形環境,用來建立一個 PDF 檔案。Quartz 2D API 提供兩個函式:CGPDFContextCreateWithURL(帶一個作為 PDF 輸出路徑的 Core Foundation URL)與 CGPDFContextCreate(想輸出到 data consumer 時使用)。

3)視窗圖形環境,用來在一個視窗上進行繪製。

4)層環境(CGLayer),是一個與另一個圖形環境關聯的 offscreen 繪製目標,目的是優化把層繪製到建立它的圖形環境時的效能。層環境能提供比位圖圖形環境更好的 offscreen 繪製效能。

Quartz 提供的主要類別:

CGContext:表示一個圖形環境;
CGPath:使用向量圖形建立路徑,並能填色與描邊;
CGImage:用來表示位圖;
CGLayer:表示一個可用於重複繪製與 offscreen 繪製的繪製層;
CGPattern:表示 Pattern,用於重複繪製;
CGShading 與 CGGradient:用於繪製漸層;
CGColor 與 CGColorSpace:進行顏色與顏色空間管理;
CGFont:繪製文字;
CGPDFContentStream、CGPDFScanner、CGPDFPage、CGPDFObject、CGPDFStream、CGPDFString 等:進行 PDF 檔案的建立、解析與顯示。

3. OpenGL ES 與 GLKit

OpenGL ES 是一套多功能開放標準的、用於嵌入系統的 C-based 圖形庫,用於 2D 與 3D 資料的可視化。它被設計用來把一組圖形呼叫轉換到底層圖形硬體(GPU),由 GPU 執行圖形命令,從而高效能、高幀率地利用 GPU 提供的 2D 與 3D 繪製能力。

OpenGL ES 規範本身不定義繪製表面與繪製視窗,因此 iOS 必須提供並建立一個呈現環境、建立與配置儲存繪製命令結果的 framebuffer,以及建立與配置一個或多個呈現目標。

在 iOS 中使用 EAGL 提供的 EAGLContext 類來實現並提供一個呈現環境,用來保持 OpenGL ES 使用到的硬體狀態。EAGL 是一個 Objective-C API,提供讓 OpenGL ES 與 Core Animation、UIKit 整合的接口。在呼叫任何 OpenGL ES 功能之前必須先初始化一個 EAGLContext 物件。

每一個 iOS 應用的每一個線程都有一個目前的 context,呼叫 OpenGL ES 函式時會使用或改變此 context 中的狀態。setCurrentContext: 用來設定目前線程的 context,currentContext 則回傳它。在切換同一線程的兩個 context 之前,必須呼叫 glFlush 以確保先前提交的命令已送出到圖形硬體。

可以採用不同方式把 OpenGL ES 內容呈現到不同目標:GLKit 與 CAEAGLLayer。為了建立全螢幕視圖或讓 OpenGL ES 內容與 UIKit 視圖整合,可以使用 GLKit——GLKView 本身實現了呈現目標並建立、維護一個 framebuffer。若要使 OpenGL ES 內容作為一個 Core Animation 層的部分內容,則可使用 CAEAGLLayer 作為呈現目標,並需另外建立 framebuffer 以及自己實作、控制整個繪製流程。

GLKit 是一組 Objective-C 類,為使用 OpenGL ES 提供物件導向接口以簡化開發,支援四個 3D 應用開發的關鍵領域:

1)GLKView 與 GLKViewController 提供標準的 OpenGL ES 視圖與相關的呈現循環。GLKView 作為呈現目標,GLKViewController 提供內容呈現的控制與動畫;視圖負責管理與維護 framebuffer,應用只需在 framebuffer 上作畫。

2)GLKTextureLoader 提供從 iOS 支援的各種圖像格式自動載入紋理圖像到 OpenGL ES 環境的方式,並能進行適當轉換,支援同步與異步載入。

3)數學運算庫,提供向量、矩陣、四元數的實作與矩陣堆疊操作等 OpenGL ES 1.1 功能。

4)Effect 效果類提供標準公共著色效果的實作,可配置效果與相關的頂點資料後建立、載入合適的著色器。包含三個可配置著色效果類:GLKBaseEffect(實作 OpenGL ES 1.1 的關鍵燈光與材質模式)、GLKSkyboxEffect(skybox 效果)、GLKReflectionMapEffect(在 GLKBaseEffect 基礎上加入反射映射支援)。

使用 GLKView 與 OpenGL ES 繪製的過程:

1)建立一個 GLKView 物件。可程式化或使用 Interface Builder 建立。程式化時先建立一個 context 再呼叫 initWithFrame:context:;使用 Interface Builder 時,在從 storyboard 載入 GLKView 後建立 context 並設為視圖的 context 屬性。iOS 中使用 GLKit 需建立 OpenGL ES 2.0 以上的圖形環境 context。GLKit 視圖會自動建立與配置它所有的 framebuffer 與 renderbuffer 物件,可透過修改視圖的 drawable 屬性來控制這些物件的屬性。

2)繪製 OpenGL 內容(發布繪製命令)。需要三個子步驟:準備 OpenGL ES 基礎、發布繪製命令、呈現顯示內容到 Core Animation。GLKit 類本身已實作第一與第三個步驟,使用者只需實作第二個——在視圖的 drawRect 或代理物件的 glkView:drawInRect: 中呼叫合適的 OpenGL ES 繪製命令。

GLKViewController 維護一個 animation 呈現循環(包含 update 與 display 兩個方法),用來實現連續動畫的複雜場景。交替速率由 framesPerSecond 屬性指示,可用 preferredFramesPerSecond 修改。

4. 其他圖形編程相關 API

Core Animation

Core Animation 是一套 Objective-C API,實作了一個高效能的複合引擎並提供簡單易用的編程接口,為使用者 UI 加上平滑運動與動態回饋能力。它是 UIKit 實現動畫與變換的基礎,也負責視圖的複合功能。使用它可以實現自訂動畫與細粒度的動畫控制,建立複雜的、支援動畫與變換的 layered 2D 視圖。

Core Animation 不屬於繪製系統,而是以硬體複合與操作顯示內容的基礎設施。核心是 layer 物件,用來管理與操作顯示內容。iOS 中每一個視圖都對應一個 layer 物件,layer 之間也組織為樹狀關係。一個 layer 把視圖內容捕獲為一個容易被圖形硬體操作的位圖。多數應用中 layer 作為管理視圖的方式使用,但也可以建立獨立的 layer 加入樹中,用來顯示視圖不足的內容。OpenGL ES 的內容也能與 Core Animation 內容整合。

使用 Core Animation 實現動畫時,可以修改 layer 的屬性值來觸發一個 action 物件的執行,不同的 action 物件實現不同的動畫。Core Animation 提供的類:

CAAnimation 是抽象公共基類,採用 CAMediaTiming 與 CAAction 協定為動畫提供時間(週期、速度、重複次數等)與 action 行為(啟動、停止等)。
CAPropertyAnimation 是 CAAnimation 的抽象子類,為動畫提供由一個 key path 規定的 layer 屬性支援;
CABasicAnimation 是它的具體子類,為一個 layer 屬性提供簡單插入能力;
CAKeyframeAnimation 也是具體子類,提供 keyframe 動畫支援;
CATransition 是 CAAnimation 的具體子類,提供影響整個 layer 內容的轉場效果;
CAAnimationGroup 允許把動畫物件組合起來同時運行。

Image I/O

提供讀寫多數格式圖像檔案資料的接口,主要包括圖像源 CGImageSourceRef 與圖像目標 CGImageDestinationRef 兩個類。

Sprite Kit

建立於 OpenGL ES 之上,使用圖形硬體有效呈現動畫幀,因此可以高幀率地動畫與呈現任意的 2D 紋理圖像或遊戲 sprite,內容包括 sprites、文字、CGPath 形狀、影片等。

動畫與呈現由一個 SKView 視圖物件執行,遊戲內容組織為以 SKScene 物件表現的一個個場景。一個場景包含要呈現的 sprites 與其他內容,也實作每一幀關聯的邏輯與內容處理。同一時刻一個 SKView 只呈現一個場景,場景呈現時其動畫與幀關聯邏輯會自動執行;切換場景時使用 SKTransition 類執行兩個場景間的動畫。

SceneKit

SceneKit 是一個使用 3D 圖形技術實現的 Objective-C 框架,包含高效能的呈現引擎與一個高階的描述性 API。可以用它建立簡單的遊戲與介面豐富的使用者 UI——只需用描述性 API 描述場景的內容(幾何形狀、材質、燈光、攝影機等)以及想在這些內容上執行的行動或動畫即可。

SceneKit 的內容組織為由節點組成的樹形結構,稱為 scene graph。一個場景包含一個根節點(定義場景的座標空間),其他節點定義場景的可視內容。SceneKit 在 GPU 上呈現每一幀之前,會在一個視圖上顯示場景、處理 scene graph 並執行動畫處理。

SceneKit 包含的主要類別:

SCNView 與 SCNSceneRenderer:SCNView 是顯示 SceneKit 內容的視圖;SCNSceneRenderer 是一個協議,定義視圖的一些重要方法。
SCNScene:表現一個場景,是所有 SceneKit 內容的容器。可從 3D 著作工具建立的檔案中載入,也可程式化建立。
SCNNode:場景的基本構造塊,表示 scene graph 樹的一個節點。為節點附屬 geometries、lights、cameras 來提供場景的可視內容。
SCNGeometry、SCNLight、SCNCamera:分別對應 geometries、lights、cameras。SCNGeometry 提供形狀、文字或自訂頂點資料,SCNLight 提供陰影效果,SCNCamera 提供可視點。
SCNMaterial:為 SCNGeometry 定義表面外觀屬性,規定表面如何著色、紋理以及如何反應燈光。

SceneKit 內容的動畫:基於 Core Animation 框架,可隱式或顯式建立。隱式建立是透過動畫節點的屬性來實現:SceneKit 會自動把 run loop 一次運行期間對場景中節點屬性的所有改變組合成一個原子操作(稱為一個事務,由 SCNTransaction 類表示);當 SCNTransaction 的動畫週期不為 0 時,所有對節點動畫屬性的改變會自動執行動畫:

func fallAndFade(sender: AnyObject) {
    SCNTransaction.setAnimationDuration(1.0)
    textNode.position = SCNVector3(x: 0.0, y: -10.0, z: 0.0)
    textNode.opacity = 0.0
}

顯式建立動畫時,可選擇 CAAnimation 的一種類本子類來建立特定類型的動畫,使用 key-value 為動畫規定屬性並設定動畫參數,然後把建立的動畫附屬到場景的一個或多個元素:

let animation = CABasicAnimation(keyPath: "geometry.extrusionDepth")
animation.fromValue = 0.0
animation.toValue = 100.0
animation.duration = 1.0
animation.autoreverses = true
animation.repeatCount = Float.infinity
textNode.addAnimation(animation, forKey: "extrude")

SceneKit 也支援使用 SCNSceneSource 類從場景檔案中載入 CAAnimation 動畫物件,然後附屬到 SCNNode 物件。

Metal

Metal 框架是一個類似 OpenGL ES 的底層 API,為 GPU 加速的先進 3D 圖形呈現或資料並行計算任務提供支援。它負責與 3D 繪圖硬體互動,為圖形與計算命令的組織、處理、提交及相關資源與資料的管理提供細粒度、底層的現代 API。Metal 的目標是在執行 GPU 任務時盡量減少 CPU 負載,消除效能瓶頸,並能有效利用多線程並行建立與提交命令到 GPU。

Metal 也提供了一個映射編程語言,用來編寫能被 Metal 應用使用的圖形映射或計算函式。這類程式碼可在編譯時與應用程式碼一起編譯,執行時載入到 GPU 上執行;也支援執行時編輯。

Metal 架構中的重要類別與協議:

MTLDevice:代表一個執行命令的 GPU 裝置,協議定義了查詢裝置能力屬性與建立其他裝置特定物件(命令隊列、緩衝區、紋理等)的接口。應用透過 MTLCreateSystemDefaultDevice 函式取得系統可用的 MTLDevice 物件。

命令與命令編碼器:3D 圖形呈現命令、計算命令與 blitting 命令在提交到 GPU 執行前必須先編碼。Metal 為每種命令提供一個編碼器協議:

MTLRenderCommandEncoder:編碼單次循環呈現期間要執行的 3D 呈現命令,物件代表一次呈現流程的呈現狀態與繪製命令。
MTLComputeCommandEncoder:編碼資料並行計算任務。
MTLBlitCommandEncoder:編碼緩衝與紋理之間的簡單拷貝操作。

同一時刻僅能有一個命令編碼器活躍來添加命令到一個命令緩衝空間,即每個命令編碼器必須在另一個使用相同命令緩衝空間的編碼器建立前結束。為支援多個不同任務並行執行,Metal 提供 MTLParallelRenderCommandEncoder 協議,支援多個 MTLBlitCommandEncoder 在不同線程同時提交不同的命令緩衝到同一個命令緩衝空間——每個線程有自己的命令緩衝物件,同一時刻該物件只能被該線程的一個命令編碼器存取。MTLParallelRenderCommandEncoder 允許把一次呈現循環的命令編碼分解到多個編碼器,用多線程並行處理來提高效率。命令編碼器物件呼叫 endEncoding 方法來結束。

命令編碼器由 MTLCommandBuffer 物件負責建立,協議定義了 renderCommandEncoderWithDescriptor:(建立 MTLRenderCommandEncoder,參數 MTLRenderPassDescriptor 表現編碼呈現命令的目標,是一個附屬點集合,最多可包含四個顏色附屬點、一個深度附屬點、一個圖案附屬點)、computeCommandEncoder、blitCommandEncoder、parallelRenderCommandEncoderWithDescriptor: 等方法。

命令緩衝 MTLCommandBuffer:編碼後的命令被加到 MTLCommandBuffer 上,然後該物件被提交到 GPU 執行。協議提供命令編碼器的建立、提交到命令隊列以及檢查狀態等方法。一個 MTLCommandBuffer 包含打算在特定裝置上執行的編碼命令,一旦所有編碼完成就必須提交到一個命令隊列並標記為就緒。標準應用中通常一個呈現幀的命令由一個線程編碼進一個命令緩衝。

MTLCommandBuffer 由 MTLCommandQueue 的 commandBuffer 或 commandBufferWithUnretainedReferences 方法建立,且只能提交到建立它的 MTLCommandQueue。它實作的協議方法包括:enqueue(在命令隊列中保留一個位置)、commit(提交執行)、addScheduledHandler:(登記命令緩衝被調度時呼叫的程式碼塊,可登記多個)、waitUntilScheduled(等待被調度且所有調度塊執行完)、addCompletedHandler:(登記裝置執行完後呼叫的程式碼塊,可登記多個)、waitUntilCompleted(等待命令執行完且所有完成塊執行結束)、presentDrawable:(在命令緩衝被調度時呈現一個可顯示資源的內容)。

MTLCommandQueue:包含命令緩衝的一個隊列,用來組織其中命令緩衝物件的執行次序並控制它們何時被執行,主要接口是命令緩衝物件的建立。使用 MTLDevice 的 newCommandQueue 或 newCommandQueueWithMaxCommandBufferCount: 方法建立。

以下為這些物件之間的關係圖:

如圖所示:必須為一個呈現命令編碼器設定呈現相關的狀態,並設定、建立相關的呈現用到的緩衝區、紋理等 Metal 資源物件。為呈現命令編碼器指定的狀態包括一個呈現管道流水線狀態(Render Pipeline State)、一個深度與圖案狀態(Depth Stencil State)、一個採樣狀態(Sampler State)。一個 Blit 命令編碼器則與一個緩衝區和一個紋理關聯,用來在兩者之間進行 Blit 操作。

命令編碼器指定圖形或計算功能時可以配置三種 MTLResource 資源物件:

MTLBuffer 表現一個能包含任意型別資料的無格式記憶體,通常用於多邊形頂點、著色器及計算狀態資料。
MTLTexture 表現一個有特定紋理型別與點格式的具格式圖像資料,可作為頂點、片段或計算功能的來源,也可作為呈現的輸出目標。
MTLSamplerState 在一個圖形或計算功能對 MTLTexture 執行紋理採樣時使用,用來定義地址、過濾等屬性。

圖形呈現編碼器 MTLRenderCommandEncoder 可以使用 setVertex* 及 setFragment* 系列方法作為參數,為相應的映射函式配置一個或多個資源。

CAMetalLayer 與 CAMetalDrawable:Core Animation 定義了一個 CAMetalLayer 類與一個 CAMetalDrawable 協議,用來提供一個 Metal 內容呈現的層後備視圖。CAMetalLayer 包含要呈現內容的位置、尺寸、可視屬性(背景顏色、邊界與陰影)及 Metal 呈現內容使用到的資源等。CAMetalDrawable 是 MTLDrawable 的擴充,指定可顯示資源物件要符合 MTLTexture 協議,使其可作為呈現命令的目標。

為了實現 Metal 內容在 CAMetalLayer 上的呈現,應為每次呈現流程建立一個 CAMetalDrawable 物件(透過 CAMetalLayer 的 nextDrawable 方法),從中取得它包含的 MTLTexture,然後在呈現流水線描述 MTLRenderPipelineDescriptor 的顏色附屬點屬性中使用,指定其為圖形呈現命令的目標。

建立可顯示資源作為圖形命令目標後,可依下列步驟完成繪製:

1)建立一個 MTLCommandQueue 物件,再用它建立一個 MTLCommandBuffer 物件;

2)建立一個 MTLRenderPassDescriptor 物件,為其規定用作圖形緩衝中編碼呈現命令目標的附屬點集合,再用它建立一個 MTLRenderCommandEncoder 物件;

3)建立相應的 Metal 資源物件來儲存繪製用到的資源資料(如頂點座標與顏色),並呼叫 setVertex*:offset:atIndex: 與 setFragment*:offset:atIndex: 為呈現編碼器指定用到的資源;

4)建立一個 MTLRenderPipelineDescriptor 物件並為其指定 vertexFunction 與 fragmentFunction 屬性,這些屬性使用 Metal 映射語言程式碼中讀取的相應映射函式 MTLFunction 物件來設定;

5)使用 MTLDevice 的 newRenderPipelineStateWithDescriptor:error: 或類似方法,依 MTLRenderPipelineDescriptor 建立一個 MTLRenderPipelineState 物件,然後呼叫 setRenderPipelineState: 為呈現編碼器設定管道流水線;

6)呼叫 drawPrimitives:vertexStart:vertexCount: 執行圖形呈現,接著呼叫 endEncoding 結束本次編碼,最後呼叫 MTLCommandBuffer 的 commit 在 GPU 上執行整個繪製命令。

  1. 上一篇文章:
  2. 下一篇文章:
蘋果刷機越獄教程| IOS教程問題解答| IOS技巧綜合| IOS7技巧| IOS8教程
Copyright © IOS教程網 All Rights Reserved