可靈大模型(Kling)是由快手大模型團(tuán)隊(duì)自研打造的視頻生成大模型,具備強(qiáng)大的視頻生成能力,可靈大模型的采用了原生的文生視頻技術(shù)路線,替代了圖像生成+時(shí)序模塊的組合,這也是可靈生成時(shí)間長(zhǎng)、幀率高,能準(zhǔn)確處理復(fù)雜運(yùn)動(dòng)的核心,從而讓用戶可以輕松高效地完成藝術(shù)視頻創(chuàng)作,由于采用了與Sora類似的模型架構(gòu),據(jù)說(shuō)在效果上可以對(duì)標(biāo)Sora。
可靈大模型的主要特點(diǎn):
合理運(yùn)動(dòng)生成:可靈大模型能夠生成大幅度且合理的運(yùn)動(dòng),采用3D時(shí)空聯(lián)合注意力機(jī)制,更好地建模視頻中的復(fù)雜時(shí)空運(yùn)動(dòng)。
物理世界模擬:它能夠模擬真實(shí)物理世界的特性,包括光影反射、重力影響下的流體運(yùn)動(dòng)等,構(gòu)建起一個(gè)無(wú)限逼近現(xiàn)實(shí)的想象空間。
概念組合與想象力:具備強(qiáng)大的概念組合能力和想象力,能夠生成符合物理規(guī)律的視頻內(nèi)容。
視頻質(zhì)量:生成的視頻具有1080p的分辨率,時(shí)長(zhǎng)可達(dá)到2分鐘(幀率30fps),并且支持多種寬高比。
的應(yīng)用方面,基于“可靈”大模型,未來(lái)將無(wú)法有更多應(yīng)用方向落地,比如即將首發(fā)的“AI 唱跳”新玩法,可以僅需一張照片就能驅(qū)動(dòng)表情和肢體動(dòng)作,生成“唱跳”視頻。
如何使用可靈大模型?
訪問(wèn)官方網(wǎng)站:訪問(wèn)可靈大模型的官方網(wǎng)站。
注冊(cè)并登錄賬號(hào):在官網(wǎng)上注冊(cè)一個(gè)用戶賬號(hào),并使用該賬號(hào)登錄。
選擇視頻生成參數(shù):根據(jù)需求選擇視頻生成的相關(guān)參數(shù),如視頻長(zhǎng)度、分辨率等??伸`大模型支持生成長(zhǎng)達(dá)2分鐘、幀率30fps的視頻,分辨率高達(dá)1080p,并且支持自由調(diào)整寬高比。
輸入或上傳視頻創(chuàng)作內(nèi)容:可以直接輸入文本描述來(lái)指導(dǎo)AI生成視頻,或者上傳預(yù)先制作的素材作為參考。
生成視頻:提交所有設(shè)置后,可靈大模型將開(kāi)始生成視頻。該模型具備強(qiáng)大的概念組合能力和想象力,能夠生成大幅度的合理運(yùn)動(dòng)和模擬物理世界特性的視頻。
下載和編輯視頻:生成的視頻可以直接下載到本地。如果需要進(jìn)一步編輯,可以使用快影App中的AI創(chuàng)作功能進(jìn)行調(diào)整和優(yōu)化。
可靈在哪里可以找到?
基于“可靈”的文生視頻功能位于“快影”App 首頁(yè)的“AI 玩法”模塊下的“AI 生視頻”頁(yè)面,目前處于限時(shí)內(nèi)測(cè)免費(fèi)的狀態(tài),用戶可以申請(qǐng)?bào)w驗(yàn)。

申請(qǐng)流程:下載快影APP - AI玩法 - AI生視頻模塊 - 填問(wèn)卷申請(qǐng)。
除了視頻生成模塊,快手大模型團(tuán)隊(duì)還向其中加入了自研3D人臉重建技術(shù),以及背景穩(wěn)定性和重定向模塊,更生動(dòng)地展現(xiàn)表情和運(yùn)動(dòng)效果,同時(shí)可靈大模型還計(jì)劃開(kāi)放圖生視頻功能,用戶可以期待更多創(chuàng)新的視頻生成工具。
















