NVIDIA推出視頻會議平台超低帶寬且支持多項AI雲處理
今日,NVIDIA宣布推出一款名為NVIDIA Maxine的視頻會議平台,據稱該平台將允許開發者利用NVIDIA的雲端AI處理能力,提供諸如超分辨率、噪聲消除、面部優化、實時翻譯等AI功能,並且所需帶寬極低。在官方的視頻演示中,NVIDIA介紹了該視頻會議平台的多項功能,除了我們常見的背景替換、環境噪音消除、虛擬面部追踪等功能外,還有多項創新功能出現。比如面部對齊、照明調整、目光對準和實時翻譯,它們都基於基於AI雲端建模,為視頻中的人物實現了常規條件下不可能的處理。不僅提高了分辨率還消除了噪點優化了面部光照並進行了目光對準
面部調整可以通過AI建模使人物在視頻中調整頭部角度始終正對鏡頭
此外,利用AI的視頻壓縮技術,NVIDIA的視頻會議平台運行所需的帶寬也大幅減少。就30FPS的H.264視頻而言,常規來說其所需帶為2918KB/s,但在NVIDIA的平台下,所需帶寬將被縮小至十分之一,也就是所292KB/s即可正常視頻。
NVIDIA表示,該壓縮功能基於AI在雲端重建了視頻者的面孔,類似我們常見的DeepFake所使用的技術。軟件不再傳輸整個屏幕的像素,而是只需傳輸面部關鍵點即可在視頻端生成整個面部。、此次NVIDIA大舉進軍視頻會議平台,一方面是結合現實來看視頻通話確有市場,另一方面則是要繼續擴大自身在雲計算領域的影響力。該技術並非消費者可以直接使用,而是面向開發者提供的平台。目前僅有通信公司Avaya宣布合作,NVIDIA此舉能否成功還要看後續與其它公司合作的進展。
消息來源
頁:
[1]