今日,NVIDIA宣布推出一款名為NVIDIA Maxine的視頻會議平臺,據(jù)稱該平臺將允許開發(fā)者利用NVIDIA的云端AI處理能力,提供諸如超分辨率、噪聲消除、面部優(yōu)化、實時翻譯等AI功能,并且所需帶寬極低。
在官方的視頻演示中,NVIDIA介紹了該視頻會議平臺的多項功能,除了我們常見的背景替換、環(huán)境噪音消除、虛擬面部追蹤等功能外,還有多項創(chuàng)新功能出現(xiàn)。比如面部對齊、照明調(diào)整、目光對準(zhǔn)和實時翻譯,它們都基于基于AI云端建模,為視頻中的人物實現(xiàn)了常規(guī)條件下不可能的處理。
此外,利用AI的視頻壓縮技術(shù),NVIDIA的視頻會議平臺運行所需的帶寬也大幅減少。就30FPS的H.264視頻而言,常規(guī)來說其所需帶為2918KB/s,但在NVIDIA的平臺下,所需帶寬將被縮小至十分之一,也就是所292KB/s即可正常視頻。
NVIDIA表示,該壓縮功能基于AI在云端重建了視頻者的面孔,類似我們常見的DeepFake所使用的技術(shù)。軟件不再傳輸整個屏幕的像素,而是只需傳輸面部關(guān)鍵點即可在視頻端生成整個面部。、
此次NVIDIA大舉進軍視頻會議平臺,一方面是結(jié)合現(xiàn)實來看視頻通話確有市場,另一方面則是要繼續(xù)擴大自身在云計算領(lǐng)域的影響力。該技術(shù)并非消費者可以直接使用,而是面向開發(fā)者提供的平臺。目前僅有通信公司Avaya宣布合作,NVIDIA此舉能否成功還要看后續(xù)與其它公司合作的進展。
關(guān)鍵詞: