您现在的位置: IOS教程網 >> IOS系統 >  >> iOS 程式開發 >> iOS 開發基礎

iOS 10 SiriKit 接入實錄:以 QQ 的適配為例

編輯:iOS 開發基礎

本文整理自騰訊 Bugly。

一、概述

蘋果在 iOS 10 中把 SiriKit 開放給了第三方應用,QQ 也率先完成了適配。這意味著你可以直接對 Siri 說「用 QQ 發消息給某某」,讓語音助手替你完成發消息與打電話——聽起來確實有點酷。

那麼實際體驗如何?哪些應用適合接入 SiriKit?接入過程又需要做哪些事?下文逐一拆解。

圖 1 用 Siri 發 QQ 消息的效果

二、SiriKit 是什麼

SiriKit 是蘋果提供給第三方應用接入 Siri 的開發框架。官方文件把不同場景的語音支援劃分為不同的 domain,目前涵蓋:VoIP 通話、發消息、轉賬、圖片搜索、網約車訂車、CarPlay 與餐廳預訂。也就是說,只要你的應用裡有這些能力之一,就可以考慮接入。

一個關鍵認知是:你不需要自己做語音識別。識別由 Siri 完成,Siri 會把語音要執行的動作抽象成 Intent 物件傳給你,你要處理的只是這些 Intent,完全不涉及自然語言處理(NLP)技術。

網上已有不少 SiriKit 入門文章,也可參考官方文件 SiriKit Programming Guide。本文側重 QQ 的適配經驗。

圖 2 SiriKit 原理

三、接入步驟

要在 Xcode 專案中新增 Intents Extension 的 target。和其他 extension 一樣,它是獨立於主 App 行程運行的外掛,負責處理與確認來自 Siri 的 intent 請求。如果希望 Siri 在處理相關 intent 時顯示自訂介面,還需要再補一個 Intents UI Extension 的 target——也就是說,完整支援 SiriKit 其實要加兩個 target。關於 App Extension 的開發,可參考蘋果的 App Extension Programming Guide。

首先在 Intents Extension 的 info.plist 中宣告要支援哪些 intent:在 IntentsSupported 中加入 INSendMessageIntent;若需要在鎖屏狀態下停用某功能,則在 IntentsRestrictedWhileLocked 中加入對應項目。

圖 3 Intent Extension 的 info.plist 配置

Intents Extension

當你對 Siri 說「用 QQ 發消息給王一然說你好」時,語音識別由 Siri 完成並顯示在介面上。一句完整的指令大致由四部分構成:

  • 應用名:告訴 Siri 要用哪個 App。Siri 會依 App 的 bundle displayname 自動識別,無需額外註冊。
  • 發消息 Intent:告訴 Siri 要執行發消息動作。實測「發信息」也能被正確識別,但除此之外還有哪些詞彙會被歸為該 intent,蘋果並未在文件中說明。
  • 消息接收者:例如「王一然」,是 QQ 好友的暱稱。
  • 消息內容:例如「我很生氣」。

圖 4 確認發送消息介面

其中應用名與 Intent 是必須的,否則 Siri 無法抽象出你的意圖;後兩項若缺省,可以在實作中要求使用者補充或直接忽略。識別完成後,Siri 會把內容與接收者打包成一個 INSendMessageIntent 傳給 QQ 的 Intent Extension。

值得注意的是,Siri 能準確辨識出「王一然」這種並非通用詞組的暱稱。奧祕在於 App 運行時,我們把所有好友暱稱同步到了 Siri 雲端,於是 Siri 就能識別特定使用者的特定詞彙,做法是呼叫 INVocabulary 的 setVocabularyStrings:ofType:。

每個 domain 在 Siri 中都有對應的 Intent,而每個 Intent 又對應一個特定的 handler 協議。以發消息為例,對應的是 INSendMessageIntent 與 INSendMessageIntentHandling。只要實作協議中的相關方法,並在 Siri 解析出請求時由我們的物件接手處理即可。

圖 5 Siri 發 QQ 消息流程

1)ResolveRecipientsForSendMessage
處理並確認 Siri 傳來的接收者名稱,例如檢查它是否位於好友列表中,再把結果回饋給 Siri。Resolution result 代表應用對 intent 的處理結果,常見的幾種包括:成功匹配、需要使用者再確認、無匹配對象等。

2)ResolveContent
與接收者處理類似,這裡可以對識別出的消息內容做「修飾」並回饋結果。例如 QQ 對「生氣」這類詞彙做了 emoji 適配。

3)ConfirmSendMessage
確認是否真的要發送這則消息,可以在此進行鑑權,通過後再放行,否則取消。確認後會調起圖 4 的確認介面。若需要與主 App 共享資料,可參考 App Group 的 Shared Container 方案。

4)HandleSendMessage
當使用者點擊「發送」或以語音下達發送指令時進入此方法,在這裡實作真正的發送邏輯,成功後調起成功提示介面。

圖 6 消息發送成功介面

Intents UI Extension

對於支援自訂介面的 Intent 類型,可以在 Intents UI Extension 中提供更精緻的呈現。Custom UI 的實作並不複雜,和一般 iOS 開發一樣,透過 UIViewController 的子類完成:在 info.plist 中設定 initial viewcontroller 或 main storyboard,而不同 Intent 的差異化呈現則用 Child Viewcontroller 的方式處理。

當系統收到來自 Intents Extension 的 response 時,會喚起 Intents UI Extension 並載入 initial viewcontroller;透過 INUIHostedViewSiriProviding 協議的 configureWithInteraction:context:completion: 方法可以取得 intent。以發消息為例,無論是確認發送還是發送成功,都會回呼一次這個方法,此時依 Intent 的類型與狀態 present 對應的 Child Viewcontroller 即可。

要留意的是,Intents UI Extension 的行程並不會在介面銷毀後立刻退出,很可能只是轉入背景休眠,等下次 response 抵達時再被喚醒。

圖 7 Intents UI extension 的生命週期

四、總結

蘋果這次開放的場景還算有限,但從實際適配經驗來看,它對 Siri 的投入是認真的。作為 SiriKit 首度對第三方開放的版本,難免存在瑕疵——開發過程中我們確實遇到過幾個 SiriKit 自身的 Bug,多數在回報蘋果後獲得解決。語音識別環節仍有改進空間,例如中英文混合場景的辨識效果就不太理想。

期待 Siri 對中文的支援越來越好,也希望它能開放更多場景給第三方應用。

  1. 上一篇文章:
  2. 下一篇文章:
蘋果刷機越獄教程| IOS教程問題解答| IOS技巧綜合| IOS7技巧| IOS8教程
Copyright © IOS教程網 All Rights Reserved