客觀來說,哪種會議和通話解決方案能提供最優質的體驗?

Zoom 過去十年來努力不懈,希望能在符合直覺的使用者體驗中提供優秀的音訊與視訊。 客戶告訴我們,他們選用 Zoom 是因為我們提供優質的會議與通話服務,不過會議與通話品質要如何量化?
為了從分析的觀點回答這個問題,我們委託獨立第三方組織 Wainhouse Research,根據其他雲端會議與電話供應商的服務評估 Zoom 體驗。 Wainhouse 根據目前用於評量音訊與視訊品質的產業標準,設計出一套評估解決方案的方法。 雖然這項研究是由 Zoom 委託執行,我們並未參與 Wainhouse 方法或評分系統的設計。
對 Wainhouse Research 來說,這項研究從一個問題開始:我們要如何客觀地評估會議及通話在音訊、視訊及表現上的品質?
評估焦點
Wainhouse Research 評估了六個廠商,共 10 個解決方案的會議與電話品質。 執行了超過 2,000 項測試。

資料來源:Wainhouse Research 2021 年 1 月的 企業會議及通話品質評估報告
企業會議 – 視訊品質
在這次的研究中,有一組關鍵測試是以 VMAF 分數為重點。VMAF 分數是一套標準,會透過比較傳送 (對照) 及收到 (經過處理) 的視訊檔案,評估視訊編碼系統的表現及效果。 VMAF 使用經過 AI 訓練的模型來預測使用者在 0 – 100 的量表上 (0 為極差,100 為極佳),會如何為每個測試視訊評分。

資料來源:Wainhouse Research 2021 年 1 月的 企業會議及通話品質評估報告
此圖表顯示在基準 (正常)、5%、20%、40% 及 70% 封包遺失率 (X 軸) 下,平均的 VMAF 分數 (Y 軸)。此平均為 3 個 (明亮、黑暗及動作) 對照視訊的平均。
Wainhouse 評估的原始 VMAF 分數平均:

資料來源:Wainhouse Research 2021 年 1 月的 企業會議及通話品質評估報告
此表格顯示的資料與 VMAF 平均分數圖表相符:在基準 (正常)、5%、20%、40% 及 70% 封包遺失率下,3 個 (明亮、黑暗及動作) 對照視訊的平均。
重點摘要:
- 在每個供應商提供的標準服務中,Zoom 一開始即測得最高的視訊品質。
- 封包遺失率為 20% 時,Zoom 的視訊品質仍在 EXCELLENT (極佳) 的範圍。
- 封包遺失率為 40% 時,Zoom 仍在 EXCELLENT (極佳) 的範圍內,但所有其他供應商的服務已降至 GOOD (良好) 或更低。*
*編輯註記:為保證準確性,這項數據已在 1 月 13 日更新。
企業通話 – 噪音抑制
Wainhouse 也執行了一些測試來評估企業通話解決方案的噪音抑制表現。 由於有更多人在辦公室環境外工作,噪音抑制功能也愈顯重要。 許多供應商都已經改進了噪音抑制功能,因此這項研究將橫向比較這些供應商的噪音抑制功能。

資料來源:Wainhouse Research 2021 年 1 月的 企業會議及通話品質評估報告
此測試使用強大布朗噪音做為對照檔案,這個檔案聽起來就像是大聲的空調全速運轉。 這項測試在每個解決方案中啟用抑制功能 (若有),再使用解決方案傳送此對照噪音,然後在於接收端錄製音訊,並根據原始對照檔案測量錄製音訊中的噪音量。 橘色的波形代表每個測試中的布朗噪音。上方顯示未經過濾的噪音檔案,下方顯示相較於原始噪音檔案 (灰色波形),每個解決方案在錄製內容中的噪音抑制表現。
雖然在現實世界中,重點會放在背景噪音抑制功能如何讓人聲更清楚,這項測試的目的則是測試每個通話服務供應商,其服務所提供之噪音抑制功能的極限,以瞭解噪音抑制功能的有效程度,以及開始抑制所需的時間。
下圖顯示每個供應商的通話服務如何抑制同一個對照檔案的布朗噪音。

資料來源:Wainhouse Research 2021 年 1 月的 企業會議及通話品質評估報告
- Webex Calling – 音訊播放約 11 秒後才開始辨識出背景噪音,而且僅稍微降低噪音。
- 8×8 – 不到一秒前即辨識出背景噪音,並稍微降噪,但約 12 秒時才開始增強抑制程度。
- RingCentral – 同樣不到一秒前即辨識出噪音,不過約在 9 秒時即開始增強抑制程度。
- Microsoft Teams – 與前幾個供應商相較,Microsoft Teams 立即辨識出背景噪音並加以抑制,不過降噪程度在這段時間中的變化較大。 請注意,此測試使用的是 Microsoft 最新的噪音抑制技術更新。
- Webex Teams – 同樣立即辨識出噪音,但噪音抑制程度較一致。
- Zoom – 同樣立即辨識出噪音,不僅大幅降低背景噪音,且降低程度最多,而且也是這組樣本中,持續維持最高噪音抑制程度的項目, 甚至隨著時間經過,繼續進一步降低噪音。
為了協助回答「客觀來說,哪個解決方案供應商能提供最優質的會議與通話體驗?」這個問題,Wainhouse Research 執行了數千項測試,這兩項評估的發現成果只代表其中的一小部分。
如要深入瞭解 Wainhouse Research 如何設計測試方法、控制變數、設定評分加權及計算答案,歡迎參加 1 月 28 日舉行的非常有趣的 Zoom 網路研討會。 該網絡研討會中也會提供其他評估結果的概要說明,包含企業會議音訊品質、企業會議系統表現、主觀與客觀測試的比較,以及企業 VoIP 音訊品質等。
立即註冊 1 月 28 日的網路演討會「服務品質至關重要:Wainhouse Research 探討會議與電話方面的近期發現成果」!