
本文由 CocoaChina 翻譯組成員 YueWang 翻譯自蘋果 Technical Note 之《New AV Foundation Camera Features for the iPhone 6 and iPhone 6 Plus》。
AV Foundation 框架為支援 iPhone 6 與 iPhone 6 Plus 的相機新功能,引入了一系列 API。這些新特性包括 Focus Pixels(對焦像素)、光學圖像防抖、1080p60、慢動作視頻、影院級視頻防抖、單鏡頭(視頻)HDR,以及在錄製視頻過程中拍攝高分辨率靜態照片。
除此之外,iPhone 6 與 iPhone 6 Plus 還支援手動控制功能,包括手動對焦、手動曝光、曝光補償、手動白平衡以及托架式靜態捕捉。這些內容可參考 WWDC 2014 Session 508《Camera Capture: Manual Controls》。
Focus Pixels 自動對焦
光學圖像防抖
1080p60
240 fps 慢動作視頻
影院級視頻防抖功能
單鏡頭(視頻)HDR
錄製視頻時拍攝高分辨率靜態照片
文檔修訂記錄
Focus Pixels 自動對焦
iPhone 6 與 iPhone 6 Plus 專用的 Focus Pixels 技術,能透過相位檢測提供景深資訊,讓連續自動對焦既快速又靈敏,即使鏡頭進行全域對焦掃描也幾乎沒有抖動。相位檢測的表現非常出色,因此官方強烈建議你在錄製視頻時允許相機持續自動對焦;而在光線不佳的環境下,AF 機制則會透過掃描來收集對比資訊。
如果硬件支援 Focus Pixels,那麼當你把 AVCaptureDevice 的 focusMode 屬性設為 AVCaptureFocusModeContinuousAutoFocus 時,這個功能就會預設「開啟」。也就是說,只要自動對焦可用,它們便會自動生效,無需手動切換。iPhone 6 與 iPhone 6 Plus 的前置相機都採用固定焦距鏡頭,因此 Focus Pixels 自動對焦僅針對後置相機。所有對應後置相機的 AVCaptureDeviceFormat 物件,都支援除 720p240 格式以外的自動對焦。
那麼,你該如何判斷某個格式究竟是使用了 Focus Pixels、傳統反差式對焦,還是完全不支援對焦呢?
AVCaptureDeviceFormat 的唯讀屬性 autoFocusSystem 就能解答這個問題。AVCaptureAutoFocusSystem 有三個常量:None、ContrastDetection 與 PhaseDetection。當某個格式支援相位檢測時,強烈建議你允許相機在錄製時持續調整焦點,因為相位檢測既快速又敏銳;而當系統使用傳統反差檢測時,則應在錄製前鎖定對焦,或在支援的前提下使用 AVCaptureDevice 的 smoothAutofocusEnabled 屬性。
注意:使用傳統對比檢測自動對焦時,對焦過程中 AVCaptureDevice 的 adjustingFocus 屬性會變為 YES,對焦完成後則變回 NO。而在使用相位檢測自動對焦時,adjustingFocus 屬性並不會轉為 YES,因為相位檢測往往會更頻繁地對焦,只是幾乎讓你感覺不到。你可以透過 AVCaptureDevice 的 lensPosition 屬性,來觀察相位檢測 AF 所引起的鏡頭移動變化。
請參閱 AVCaptureDevice.h 中的 AVCaptureAutoFocusSystem 與 autoFocusSystem。
光學圖像防抖功能
iPhone 6 Plus(僅限 6 Plus)的後置相機支援光學圖像防抖。在預設配置下,該功能會在低光環境中、當你使用 800 萬像素設備格式的 AVCaptureStillImageOutput 拍照,或預先調整 AVCaptureSessionPresetPhoto 時自動啟用。在 iOS 7 中,AV Foundation 沿用了同樣的屬性 AVCaptureStillImageOutput 的 automaticallyEnablesStillImageStabilizationWhenAvailable,它在支援的平台上(iPhone 5s、iPhone 6 以及 iPhone 6 Plus)預設為 YES。在 iPhone 5s 與 iPhone 6 上,數位圖像防抖技術能降低低光照片的模糊程度;而在 iPhone 6 Plus 上,數位與光學防抖的結合,則能在光線更暗的環境下達到更佳的效果。
請參閱 AVCaptureOutput.h 中的 automaticallyEnablesStillImageStabilizationWhenAvailable。
1080p60
iPhone 6 與 iPhone 6 Plus 的後置相機擁有一個 1080p30 的 AVCaptureDeviceFormat(420v / 420f),以及一個支援 1080p60 的格式,幀率範圍可從最低 2 fps 一路提升到最高 60 fps。AVCaptureSessionPresetHigh 使用的是 1080p30 格式。如果你想以 1080p60 錄製,請使用 iOS 7 中提供的 AVCaptureDevice formats,找到目標 AVCaptureDeviceFormat,並設定 AVCaptureDevice 的 setActiveFormat 屬性,而非使用 AVCaptureSession 的 setSessionPreset。可以回顧 WWDC 2013 Session 610《What's New in Camera Capture》來學習這項技術。請參閱 AVCaptureDevice.h 中的 activeFormat。
240 fps 慢動作視頻
iPhone 6 與 iPhone 6 Plus 的後置相機擁有一個 720p30 的 AVCaptureDeviceFormat(420v / 420f),以及一個支援 720p240 的格式,支援的幀率範圍為 5 fps 至 240 fps。你可以透過設定 AVCaptureDevice 的 activeFormat 屬性來啟用它(方式同上面的 1080p60)。需要注意的是,240 fps 格式已被標記為棄用。如果你想在 iPhone 6 或 iPhone 6 Plus 上拍攝 120 fps 的畫面,可以找出並選取支援 240 fps 的格式,然後將 AVCaptureDevice 的 activeVideoMinFrameDuration 與 activeVideoMaxFrameDuration 屬性設為 CMTimeMake(1, 120)。
請參閱 AVCaptureDevice.h 中的 activeFormat。
影院級視頻防抖功能
iOS 6 曾在 iPhone 4S 上引入了支援視頻防抖的 API。iPhone 6 與 6 Plus 的後置相機則支援一套更積極、更流暢的演算法——「影院級視頻防抖」。相比普通的視頻防抖,這項特性會縮小相機視角、引入更多視頻抓取延遲,並消耗更多系統內存,因此它並非預設開啟,必須手動設定後才會生效。
使用影院級視頻防抖時,強烈建議採用相近或相同的最小與最大幀持續時間,以保持延遲的一致與可控。iPhone 6 與 6 Plus 同樣支援早期產品中的一般視頻防抖演算法。如前所述,AVCaptureConnection 允許你呼叫 setEnablesVideoStabilizationWhenAvailable: 方法來選擇視頻防抖功能。由於 AV Foundation 現在支援不止一種形式的視頻防抖,舊方法(AVCaptureConnection 的 videoStabilizationEnabled:)已被棄用,官方更推薦使用 AVCaptureConnection 的 setPreferredVideoStabilizationMode: 方法。
共有四種視頻防抖模式常量可選:AVCaptureVideoStabilizationModeOff、AVCaptureVideoStabilizationModeStandard、AVCaptureVideoStabilizationModeCinematic 以及 AVCaptureVideoStabilizationModeAuto。
你可以呼叫 AVCaptureDeviceFormat 的 isVideoStabilizationModeSupported: 方法,查詢 AVCaptureDevice 的 activeFormat 屬性,以判斷支援哪一種防抖模式。設定除 AVCaptureVideoStabilizationModeOff 以外的參數,並不會強制開啟視頻防抖,因為某些設備的格式與 AVCaptureOutput 並不支援防抖。若想確認實際採用哪一種防抖模式,你可以用鍵值觀察(KVO)監聽 AVCaptureConnection 的 activeVideoStabilizationMode 屬性。當你把 preferredVideoStabilizationMode 設為 AVCaptureVideoStabilizationModeAuto 時,系統會依據你使用的格式與幀率,自動選擇合適的防抖模式。目前僅有 1080p30 與 1080p60 視頻格式支援影院級視頻防抖。preferredVideoStabilizationMode 的預設值為 AVCaptureVideoStabilizationModeOff。在早期設備上,僅有 16:9 視頻格式支援防抖。
請參閱 AVCaptureDevice.h 中的 isVideoStabilizationModeSupported:,以及 AVCaptureSession.h 中的 preferredVideoStabilizationMode 與 activeVideoStabilizationMode。
單鏡頭(視頻)HDR
它也被稱為「流 HDR」或「視頻 HDR」。iPhone 6 與 6 Plus 支援連續的、流式的高動態範圍視頻,有別於傳統上將不同 EV 值的靜態圖片融合成一張 HDR 圖片的做法。HDR 的支援直接內嵌在感光元件之中,這項功能在 API 裡被稱為「視頻 HDR」。所有前置相機的 AVCaptureDeviceFormat 物件都支援視頻 HDR;而在後置相機上,540p30、720p30、1080p30 以及 1080p60 格式支援視頻 HDR。
預設情況下,AVCaptureDevice(其 automaticallyAdjustsVideoHDREnabled 屬性預設為 YES)會自動調整視頻 HDR。當自動調整開啟時,你若以 setActiveFormat: 設定新格式,AVCaptureDevice 會一律關閉 videoHDREnabled 屬性;反之,若你呼叫 setSessionPreset: 方法,AVCaptureDevice 則會根據視頻 HDR 是否符合預設情況,自動開啟或關閉它。
如果你想在指定的格式下強制開啟視頻 HDR,請把 automaticallyAdjustsVideoHDREnabled 屬性設為 NO,再將 AVCaptureDevice 的 videoHDREnabled 屬性設為 YES。你可能會發現,剛關閉自動調整時無法立即設定後者。另外要注意,設定 videoHDREnabled 屬性可能會觸發 AVCaptureDevice 一次冗長的重新配置過程,類似於設定新的有效格式或 AVCaptureSession 的 sessionPreset。因此,如果你要同時設定有效格式(或 AVCaptureSession 的會話預設)與 videoHDREnabled,建議把這些操作包在 [session beginConfiguration] 與 [session commitConfiguration] 之間,以盡量縮短重新配置的時間。
請參閱 AVCaptureDevice.h 中的 automaticallyAdjustsVideoHDREnabled 與 videoHDREnabled。
錄製視頻時拍攝高分辨率靜態照片
在所有的設備上,AVCaptureStillImageOutput 都是依據 AVCaptureDevice 的 activeFormat 所指定的分辨率來捕捉靜態圖片。換句話說,如果你的 activeFormat 的 CMVideoFormatDescription 是 640x480,那麼拍到的靜態圖片就是 640x480。但有時由於 AVCaptureVideoDataOutput 密集的圖像處理,AVCaptureDevice 需要在壓縮分辨率下運行,此時人們仍希望能在不影響預覽、也不重置設備的前提下,抓到全分辨率的靜態圖片。
得益於 iPhone 6 與 6 Plus 的新特性,你可以在錄製由 activeFormat 指定分辨率的視頻(同時涵蓋視頻數據輸出與影片文件輸出)的過程中,抓取高分辨率的靜態圖片。這張高分辨率靜態圖片仍會保持 AVCaptureDevice 的 activeFormat 所設定的屏幕寬高比與視角。此功能預設關閉,你可以呼叫 AVCaptureStillImageOutput 的 setHighResolutionStillImageOutputEnabled: 方法將它開啟;也可以透過查詢 AVCaptureDeviceFormat 的 highResolutionStillImageDimensions 屬性,取得所捕捉靜態圖片的分辨率。開啟此功能後,你可以在錄製(例如 192x144)視頻的同時,抓到 3264x2448(全 800 萬像素)的靜態圖片。需要注意的是,如果你對所有輸出都啟用了視頻防抖,那麼 AVCaptureStillImageOutput 輸出的高分辨率靜態圖片會縮小約 10% 甚至更多。此外,錄製視頻時拍攝高分辨率靜態照片的功能僅在後置相機上支援。
作為參考,以下列出支援 iPhone 6 與 iPhone 6 Plus 前置與後置相機的 AVCaptureDeviceFormat 對照表。
表格標識說明(圖片 1、圖片 2):
HRSI = 高分辨率靜態圖片量度
FOV = 視角
VIS = 支援視頻防抖的格式
Max Zoom = 最大視頻變焦因數
Upscales = 在某個數位高標度時使用的變焦因數
AF = 自動對焦系統(1 = 對比檢測,2 = 相位檢測)
ISO = 支援的 ISO 範圍
SS = 支援的曝光持續範圍
HDR = 該格式是否支援視頻 HDR
Figure 1 支援後置相機的 AVCaptureDeviceFormat 項目

Figure 2 支援後置相機的 AVCaptureDeviceFormat 對照表
