11.11云上盛惠!海量產(chǎn)品 · 輕松上云!云服務(wù)器首年1.8折起,買1年送3個月!超值優(yōu)惠,性能穩(wěn)定,讓您的云端之旅更加暢享。快來騰訊云選購吧!
MiniGPT4-Video是什么?MiniGPT4-Video是為視頻理解設(shè)計的多模態(tài)大模型,能處理時態(tài)視覺數(shù)據(jù)和文本數(shù)據(jù),配標(biāo)題、宣傳語,適用于視頻問答。用戶可以上傳視頻,讓模型生成標(biāo)題與宣傳語,理解特效處理,或作超美抒情詩。
【新智元導(dǎo)讀】秒懂視頻的AI誕生了!KAUST和哈佛大學(xué)研究團(tuán)隊提出MiniGPT4-Video框架,不僅能理解復(fù)雜視頻,甚至還能作詩配文。OpenAI官方賬號發(fā)布了第一支由Sora制作的MV——Worldweight,引全網(wǎng)圍觀。下一步研究將模型能力擴(kuò)展到處理更長視頻的能力。