金山雲打造AI黑科技:集智高清創造視訊新體驗
對於國內的移動視訊使用者來說,從2015年到現在,可謂是“視界大開”,VR、短視訊、移動直播紛至沓來,移動視訊的廣闊前景讓人們浮想聯翩,也成就了一個又一個的商業傳奇。
視訊雲服務在其中功不可沒,其不斷降低移動視訊的准入門檻,讓視訊與各行各業的融合成為常態。與此同時,隨著移動終端的升級和網路環境的改變,使用者對視訊的上傳和播放提出了更高要求,產生了新的痛點。對此,在最近的LiveVideoStackCon 2018音視訊技術大會上,金山雲高階總監武愛敏發表主題演講,與聽眾分享了目前如火如荼的人工智慧技術,是如何為金山雲的視訊雲服務賦能,解決視訊行業痛點的。
金山雲高階總監武愛敏發表主題演講
人工智慧:破除視訊業痛點的利器
視訊行業的繁榮,催生了專業化的服務,雲服務商的入場就是典型的例子。從早期的儲存、CDN,到現在的大資料、人工智慧,服務內容的多樣化,讓視訊行業企業專注於自身的核心業務,更加靈活地應對行業變化。
但這並不代表視訊行業可高枕無憂,行業的三個痛點仍然待解。首先,內容越來越豐富、清晰度不斷提升,使得使用者對觀看體驗的要求近乎無止境,高畫質、零卡頓、超低延時、安全穩定......有資料顯示,遇到視訊播放卡頓或載入時間太長,66%的使用者會直接退出當前的播放,嚴重的卡頓會使使用者的滿意程度從接近滿分跌到幾乎為零。
第二,對於視訊行業而言,頻寬是無法忽視的問題。昂貴的頻寬費用,讓許許多多想在視訊行業一展拳腳的公司望而卻步,對於視訊行業巨頭來說,從他們的成本結構中可以看到,頻寬成本如果居高不下,長期處於“燒錢”狀態,也會對他們在行業中的口碑和地位造成影響。
第三,視訊行業有著非常豐富的內容,但同時也有著內容的紅線。為了確保平臺上的內容不會出現有害資訊,視訊平臺需要對內容進行嚴格稽核,完善內容管控機制,改善內容推薦演算法,這也需要耗費大量人力成本。
這些痛點需要依靠技術上的不斷突破才能緩解。“依靠演算法、算力和大資料支撐的人工智慧技術,將成為賦能視訊雲、解決視訊行業客戶痛點的重要工具”,武愛敏表示。
四大黑科技加持金山雲集智高清
“一直以來,金山雲通過不斷加大人工智慧技術的研發投入,推動相關的應用不斷落地”,武愛敏介紹了金山雲最新推出的集智高清(Kingsoft smart high definition,簡稱KSHD),“集智高清圍繞人眼結構特性,將編碼、影象處理和人工智慧進行整合,通過自研演算法和深度神經網路,對視訊內容進行感知,為客戶節省20%—40%視訊傳輸頻寬,為使用者帶來更好的視覺感受”。
集智高清之所以能夠提升視覺效果,為客戶節省成本,是因為有四大黑科技加持,首先是燈光建模。由於我國的用電頻率是50Hz,燈光頻閃很難完全避免。人眼的視錐細胞負責感光,視錐細胞在經歷一次刺激之後,無法對二次刺激產生反應。
但對室內場景來說,多光源的頻閃照射到物體上引起的反射,將會對視訊編碼帶來極大的負擔。集智高清的研發團隊對室內光源位置進行建模,將人眼感受不到的燈光和反光消除,將紋理儲存下來,幫助直播平臺節省更多頻寬。
第二,畫質增強。人眼的視錐細胞負責感受亮視覺,視杆細胞負責感受暗視覺,在明暗轉換過程中,細胞的啟用需要時間。針對人眼對光的感受特性,集智高清提供了多種模型進行畫質增強,包括暗場增強、細節恢復、去除拍攝或壓縮產生的噪聲、超解析度等等,並將最優結果進行融合操作,實現使用者無感知下對各種不同場景的自動應對。
第三,視訊聚焦。集智高清的ROI處理技術,可根據人眼最敏感最關注的內容做視覺感知保護,實現畫質增強的同時節省至少20%的頻寬。
第四,恰可感知失真。人眼視覺系統能夠適應的光強度(朗伯)級別範圍很寬,從暗閾值到強閃光閾值可以達到10的10次方量級。然而,當背景光保持恆定的時候,人眼能夠感受到的範圍是有限的,典型的觀察者可以分辨總共12級到24級的不同光強度變化,而觀察者可以分辨的級數會根據其環境光源強度、高頻/低頻區域有著很大的差異。通過大量的統計建模,集智高清集成了最符合人眼視覺系統的恰可感知失真技術,可以做到同畫質下節省5%—25%的位元速率。
破除技術和成本壁壘,更好應對需求
有了黑科技的護持,集智高清在遊戲、體育賽事、秀場直播以及VR、短視訊等多種場景和形態上,有著廣泛的應用。在視訊場景識別方面,集智高清針對遊戲、新聞、秀場、動漫、體育、短視訊等多種型別內容,分別建立視訊模型,以便根據不同的視訊場景進行分類實時識別,根據不同場景的識別結果,配置適合此類場景的編碼引數,根據紋理和運動變化幅度等,選擇最優編碼模板引數。
在視訊場景分類上,集智高清通過深度學習,形成了十餘大類,幾十種小類視訊場景模型庫。客戶在使用集智高清服務時,可實時分析直播流,匹配相應的視訊場景模型,根據客戶對視訊畫質的要求,對畫質進行實時處理。
“我們希望集智高清能夠成為視訊行業的加速器,為客戶的業務創新和行業的技術演進貢獻力量”,武愛敏表示,視訊雲服務受到移動視訊行業的驅動,但是反過來也能促進移動視訊行業的繁榮,金山雲作為視訊雲服務的領軍企業,將幫助客戶更好應對移動視訊日益複雜多樣的場景和需求,破除技術和成本壁壘,幫助客戶建立競爭優勢,為使用者提供更加多元化和個性化的服務。