您现在的位置: IOS教程網 >> IOS系統 >  >> iOS 程式開發 >> iOS 開發綜合

iOS 平台音視訊即時通訊開發:需求盤點與 SDK 串接實作

編輯:iOS 開發綜合

用過 QQ 的語音視訊對話,跟「自己動手做一個跨平台的音視訊即時通訊 App」是兩件完全不同的事。後者牽涉到採集、編解碼、傳輸、抖動緩衝、回声消除、顯示與播放等一整條管線,每一段都有大量學問。

先盤點需求

一個能用的音視訊通訊方案,通常至少要滿足:

  • 支援 iOS 裝置上的即時音訊通訊
  • 提供 Objective-C 語言 API 介面,並附範例原始碼
  • 整合 H.264、AAC、AMR 等編解碼技術
  • 封裝音視訊的採集、編解碼、傳輸、顯示與播放等模組
  • 能與 Android、Web、PC 等平台互通

要在 iOS 上快速實現,最實際的兩條路是:找成熟開源專案,或串接廠商封裝好的 SDK。以下以 AnyChat SDK 為例,說明典型 API 的呼叫順序。

一、SDK 初始化

初始化是第一步,用來設定 SDK 行為並註冊回呼:

// 初始化 SDK
public native int InitSDK(int osver, int flags);

// 連接伺服器
public native int Connect(String serverip, int port);

// 登入系統
public native int Login(String username, String password);

// 進入房間(房間 ID)
public native int EnterRoom(int roomid, String password);

// 進入房間(房間名稱)
public native int EnterRoomEx(String roomname, String password);

// 離開房間
public native int LeaveRoom(int roomid);

// 設定視訊顯示位置
public native int SetVideoPos(int userid, Surface surface, int left, int top, int right, int bottom);

// 登出
public native int Logout();

// 釋放資源
public native int Release();

二、初始化流程

private void InitialSDK() {
    if (anychat == null) {
        anychat = new AnyChatCoreSDK();
        // 設定基本事件回呼
        anychat.SetBaseEvent(this);
        if (configEntity.useARMv6Lib != 0)
            anychat.SetSDKOptionInt(AnyChatDefine.BRAC_SO_CORESDK_USEARMV6LIB, 1); // 使用 ARMv6 指令集
        anychat.InitSDK(android.os.Build.VERSION.SDK_INT, 0);
        bNeedRelease = true;
    }
}

三、登入系統

初始化完成後即可連線伺服器、驗證身分:

anychat.Connect("211.155.25.90", 8906);
anychat.Login("android", "");

連線與登入都是非同步的,呼叫後立即返回,真正的結果要在回呼中依回傳碼判斷。

四、進入房間與文字聊天

// 進入 1 號房間
anychat.EnterRoom(1, "");

// 發送文字訊息(-1 表示發送給全房間)
String message = messageEditText.getText().toString();
anychat.SendTextMessage(-1, 0, message);

只有在同一房間的使用者才能進行音視訊互交、文字聊天與檔案傳輸。新房間成員進入或有人下線時,都會透過非同步訊息通知上層應用更新狀態。

五、請求對方的影音流

anychat.UserCameraControl(userID, 1);   // 請求對方視訊流
anychat.UserSpeakControl(userID, 1);    // 請求對方音訊流

六、視訊的顯示與播放

Android 客戶端只需提供一個 SurfaceView 容器,SDK 內核會把畫面直接渲染上去並播放聲音:

if (!bOtherVideoOpened) {
    if (anychat.GetCameraState(userID) == 2
        && anychat.GetUserVideoWidth(userID) != 0) {
        SurfaceHolder holder = otherView.getHolder();
        holder.setFormat(PixelFormat.RGB_565);
        holder.setFixedSize(anychat.GetUserVideoWidth(userID),
                            anychat.GetUserVideoHeight(userID));
        Surface s = holder.getSurface();
        anychat.SetVideoPos(userID, s, 0, 0, 0, 0);
        bOtherVideoOpened = true;
    }
}

本地畫面的處理完全對稱,只要把 userID 換成 -1(代表自己)即可。

七、釋放資源

protected void onDestroy() {
    anychat.LeaveRoom(-1);   // 離開房間
    anychat.Logout();        // 登出
    anychat.Release();       // 釋放資源、關閉 SDK
}

順序是有講究的:離開房間後可以再次進入,但一旦登出並釋放資源,SDK 就不再工作。請把這段放在 Activity 生命週期結束時執行。

選型時該問的幾個問題

不管你最後選哪一套方案,評估時建議確認:是否提供 iOS 原生 API(而非只有 Android 版)、是否支援背景執行與來電中斷恢復、弱網下的抗丟包與動態碼率策略、以及私有化部署的可能性。這些才是實際上線後最常被使用者抱怨的部分——「能不能通話」通常不是難題,「通話品質穩不穩」才是。

  1. 上一篇文章:
  2. 下一篇文章:
蘋果刷機越獄教程| IOS教程問題解答| IOS技巧綜合| IOS7技巧| IOS8教程
Copyright © IOS教程網 All Rights Reserved