NVIDIA Maxine平臺將視頻通話(huà)帶寬消耗降低了10倍

2020-10-06 13:29:03    來(lái)源:新經(jīng)網(wǎng)    作者:阿威

NVIDIA Maxine旨在解決互聯(lián)網(wǎng)上最主要的流量,視頻流內容,它可能只是視頻會(huì )議平臺所需的。

NVIDIA Maxine是一個(gè)云原生流視頻AI平臺,服務(wù)提供商可以將其支持AI的新功能帶入預計每天舉行的超過(guò)3000萬(wàn)次Web會(huì )議中。

NVIDIA Maxine平臺將視頻通話(huà)帶寬消耗降低了10倍

在云端的NVIDIA GPU上運行平臺的視頻會(huì )議服務(wù)提供商可以為用戶(hù)提供新的AI效果-包括面部對齊(您似乎面對著(zhù)相機),凝視校正(即使您的相機未對齊也可以模擬眼神接觸)到屏幕),超分辨率,降噪,面部重新照明等等。

其他可能性包括具有逼真的動(dòng)畫(huà)的動(dòng)畫(huà)化身實(shí)時(shí)地由您的聲音和情感語(yǔ)調驅動(dòng),以及自動(dòng)取景,即使有人離開(kāi)屏幕,視頻輸入也可以跟隨揚聲器。

數據是在云中而不是在本地系統上處理的,因此可以享受所有新添加的功能,而對客戶(hù)端系統沒(méi)有任何新要求。

NVIDIA Maxine平臺將視頻通話(huà)帶寬消耗降低了10倍

除了最重要的新功能外,NVIDIA Maxine還承諾通過(guò)使用AI分析通話(huà)中每個(gè)人的主要面部表情并在另一端為觀(guān)看者重新制作視頻動(dòng)畫(huà),來(lái)節省大量帶寬。與每個(gè)幀傳輸整個(gè)像素屏幕相比,這使視頻會(huì )議可以在互聯(lián)網(wǎng)上傳輸更少的數據。

結合在NVIDIA GPU上運行的新視頻壓縮算法,帶寬消耗減少到了通常的H.264流視頻壓縮標準的十分之一。這最終意味著(zhù)服務(wù)提供商的成本將大大降低,接收端的視頻會(huì )議體驗將更加流暢。

NVIDIA Maxine平臺將視頻通話(huà)帶寬消耗降低了10倍

Maxine平臺集成了多個(gè)NVIDIA AI SDK和API的技術(shù)。除了NVIDIA Jarvis,Maxine平臺還利用NVIDIA DeepStream高通量音頻和視頻流SDK和NVIDIA TensorRT SDK進(jìn)行高性能的深度學(xué)習推理。Maxine平臺的AI音頻,視頻和自然語(yǔ)言功能是通過(guò)在NVIDIA DGX系統上進(jìn)行數十萬(wàn)次培訓而開(kāi)發(fā)的。

NVIDIA Maxine平臺現在可用于早期訪(fǎng)問(wèn)計算機視覺(jué)AI開(kāi)發(fā)人員,軟件合作伙伴,初創(chuàng )公司和創(chuàng )建音頻和視頻應用程序及服務(wù)的計算機制造商。目前,獲得認可的云服務(wù)是Google Cloud,Amazon AWS,騰訊云,Oracle和Microsoft Azure。

同樣在協(xié)作主題上,對于3D設計內容協(xié)作者和數字藝術(shù)家來(lái)說(shuō),我們去年報道的NVIDIA的Omniverse現在可以在公開(kāi)Beta中使用。

鄭重聲明:本文版權歸原作者所有,轉載文章僅為傳播更多信息之目的,如作者信息標記有誤,請第一時(shí)間聯(lián)系我們修改或刪除,多謝。