用過 QQ 的語音視訊對話,跟「自己動手做一個跨平台的音視訊即時通訊 App」是兩件完全不同的事。後者牽涉到採集、編解碼、傳輸、抖動緩衝、回声消除、顯示與播放等一整條管線,每一段都有大量學問。
一個能用的音視訊通訊方案,通常至少要滿足:
要在 iOS 上快速實現,最實際的兩條路是:找成熟開源專案,或串接廠商封裝好的 SDK。以下以 AnyChat SDK 為例,說明典型 API 的呼叫順序。
初始化是第一步,用來設定 SDK 行為並註冊回呼:
// 初始化 SDK public native int InitSDK(int osver, int flags); // 連接伺服器 public native int Connect(String serverip, int port); // 登入系統 public native int Login(String username, String password); // 進入房間(房間 ID) public native int EnterRoom(int roomid, String password); // 進入房間(房間名稱) public native int EnterRoomEx(String roomname, String password); // 離開房間 public native int LeaveRoom(int roomid); // 設定視訊顯示位置 public native int SetVideoPos(int userid, Surface surface, int left, int top, int right, int bottom); // 登出 public native int Logout(); // 釋放資源 public native int Release();
private void InitialSDK() {
if (anychat == null) {
anychat = new AnyChatCoreSDK();
// 設定基本事件回呼
anychat.SetBaseEvent(this);
if (configEntity.useARMv6Lib != 0)
anychat.SetSDKOptionInt(AnyChatDefine.BRAC_SO_CORESDK_USEARMV6LIB, 1); // 使用 ARMv6 指令集
anychat.InitSDK(android.os.Build.VERSION.SDK_INT, 0);
bNeedRelease = true;
}
}
初始化完成後即可連線伺服器、驗證身分:
anychat.Connect("211.155.25.90", 8906);
anychat.Login("android", "");
連線與登入都是非同步的,呼叫後立即返回,真正的結果要在回呼中依回傳碼判斷。
// 進入 1 號房間 anychat.EnterRoom(1, ""); // 發送文字訊息(-1 表示發送給全房間) String message = messageEditText.getText().toString(); anychat.SendTextMessage(-1, 0, message);
只有在同一房間的使用者才能進行音視訊互交、文字聊天與檔案傳輸。新房間成員進入或有人下線時,都會透過非同步訊息通知上層應用更新狀態。
anychat.UserCameraControl(userID, 1); // 請求對方視訊流 anychat.UserSpeakControl(userID, 1); // 請求對方音訊流
Android 客戶端只需提供一個 SurfaceView 容器,SDK 內核會把畫面直接渲染上去並播放聲音:
if (!bOtherVideoOpened) {
if (anychat.GetCameraState(userID) == 2
&& anychat.GetUserVideoWidth(userID) != 0) {
SurfaceHolder holder = otherView.getHolder();
holder.setFormat(PixelFormat.RGB_565);
holder.setFixedSize(anychat.GetUserVideoWidth(userID),
anychat.GetUserVideoHeight(userID));
Surface s = holder.getSurface();
anychat.SetVideoPos(userID, s, 0, 0, 0, 0);
bOtherVideoOpened = true;
}
}
本地畫面的處理完全對稱,只要把 userID 換成 -1(代表自己)即可。
protected void onDestroy() {
anychat.LeaveRoom(-1); // 離開房間
anychat.Logout(); // 登出
anychat.Release(); // 釋放資源、關閉 SDK
}
順序是有講究的:離開房間後可以再次進入,但一旦登出並釋放資源,SDK 就不再工作。請把這段放在 Activity 生命週期結束時執行。
不管你最後選哪一套方案,評估時建議確認:是否提供 iOS 原生 API(而非只有 Android 版)、是否支援背景執行與來電中斷恢復、弱網下的抗丟包與動態碼率策略、以及私有化部署的可能性。這些才是實際上線後最常被使用者抱怨的部分——「能不能通話」通常不是難題,「通話品質穩不穩」才是。