會議召開時,會議使用720P或者1080P,帶寬2M或者4M,全省均會出現卡頓現象,卡頓時,個別地市的個別會場嚴重丟包(丟包率達30%-50%)。問題并不是必現現象,通過SMC上查看告警,個別地市區縣會場會出現嚴重丟包現象。
故障出現時,各地視頻出現卡頓現象,通過SMC告警信息查看,個別會場顯示視頻丟包率18%(±5%間抖動)
一.精簡省級設備側局域網
操作過程1:
在省級設備MCU交換機和終端交換機之間新建光路并直連2臺設備,跳過樓層匯聚交換設備,召開會議,無明顯變化,未出現大量丟包現象,丟包保持在0.3%左右。
結論1:
說明省級側設備之前不存在網絡問題,丟包會場主要出現在各個地市。
二.省級設備側測試
操作過程2:
1.通過查看NLog日志發現25日會議出現卡頓情況時丟包率比較大的會場均為下屬A市區縣的幾個會場,丟包率達20%~30%影響整個視頻會議卡頓。
2.按照正常開會模式,卡頓問題(各個模板均能出現)復現,所有會場入會,當A市區縣個別會場出現大量丟包時,問題出現,將丟包的個別區縣會場手動離會后,丟包現象消失。
結論2:
A市區下的會場存在大量丟包影響全網視頻會議,產生卡頓。
三.A市設備側操作
操作過程3:
分析A市設備側消息包
1. 分析終端側消息:由于終端檢測到有丟包,所以會申請重傳,重傳的包都是之前網絡上丟包的包, 統計重傳包,確認終端側有大量丟包。
圖1
選其中兩個異常點如下:
2.從MCU側分析,終端有丟包的地方,MCU發送是正常的,可以判斷出包丟在網絡上了,選其中兩個包分析如下圖
可以看出,MCU到終端方向網絡有短時間內的極大丟包。
結論3:
A市區與下級會場之間網絡情況較差,網絡質量不好導致MCU與終端之間丟包嚴重,造成大量I幀重傳導致全網卡頓。
由于現場使用的是全交換MCU,某市區與下級會場之前網絡異常或網絡質量差,導致某個(至少一個)分會場存在明顯的連續丟包現象時,會申請大量I幀重傳,MCU會將重傳I幀轉發給所有會場,造成全網卡頓。
1、出現視頻會議卡頓時,首先考慮精簡視頻會議網絡結構,選取問題嚴重局點試點,將終端和MCU均接入到核心設備上,減少MCU與終端之間的網絡距離。
2、針對丟包嚴重且反復出現的局點進一步分析數據包進行定位。
3、選用全適配MCU,解決個別會場丟包嚴重影響全網卡頓問題。