今日,NVIDIA宣布推出一款名為NVIDIA Maxine的視頻會(huì)議平臺(tái),據(jù)稱該平臺(tái)將允許開發(fā)者利用NVIDIA的云端AI處理能力,提供諸如超分辨率、噪聲消除、面部?jī)?yōu)化、實(shí)時(shí)翻譯等AI功能,并且所需帶寬極低。
在官方的視頻演示中,NVIDIA介紹了該視頻會(huì)議平臺(tái)的多項(xiàng)功能,除了我們常見的背景替換、環(huán)境噪音消除、虛擬面部追蹤等功能外,還有多項(xiàng)創(chuàng)新功能出現(xiàn)。比如面部對(duì)齊、照明調(diào)整、目光對(duì)準(zhǔn)和實(shí)時(shí)翻譯,它們都基于基于AI云端建模,為視頻中的人物實(shí)現(xiàn)了常規(guī)條件下不可能的處理。
不僅提高了分辨率 還消除了噪點(diǎn) 優(yōu)化了面部光照并進(jìn)行了目光對(duì)準(zhǔn)
面部調(diào)整可以通過AI建模使人物在視頻中調(diào)整頭部角度 始終正對(duì)鏡頭
此外,利用AI的視頻壓縮技術(shù),NVIDIA的視頻會(huì)議平臺(tái)運(yùn)行所需的帶寬也大幅減少。就30FPS的H. 264 視頻而言,常規(guī)來(lái)說(shuō)其所需帶為2918KB/s,但在NVIDIA的平臺(tái)下,所需帶寬將被縮小至十分之一,也就是所292KB/s即可正常視頻。
NVIDIA表示,該壓縮功能基于AI在云端重建了視頻者的面孔,類似我們常見的DeepFake所使用的技術(shù)。軟件不再傳輸整個(gè)屏幕的像素,而是只需傳輸面部關(guān)鍵點(diǎn)即可在視頻端生成整個(gè)面部。、
此次NVIDIA大舉進(jìn)軍視頻會(huì)議平臺(tái),一方面是結(jié)合現(xiàn)實(shí)來(lái)看視頻通話確有市場(chǎng),另一方面則是要繼續(xù)擴(kuò)大自身在云計(jì)算領(lǐng)域的影響力。該技術(shù)并非消費(fèi)者可以直接使用,而是面向開發(fā)者提供的平臺(tái)。目前僅有通信公司Avaya宣布合作,NVIDIA此舉能否成功還要看后續(xù)與其它公司合作的進(jìn)展。
(舉報(bào))