昆侖萬維推出全球首款A(yù)I短劇平臺SkyReels，短劇進入“無人區(qū)”(4)

小大

用微信掃描二維碼
分享至好友和朋友圈

關(guān)鍵詞：

2024-08-19 13:36:29 人民號

SkyScript

，替代了傳統(tǒng)短劇人工式的內(nèi)容研發(fā)。昆侖萬維首先構(gòu)建了億級的高質(zhì)量短劇結(jié)構(gòu)化數(shù)據(jù)集SkyScript-100M，該數(shù)據(jù)集針對海量精彩短劇的劇情節(jié)奏、爽點、情緒變化進行了高質(zhì)量標(biāo)注；此外，算法團隊設(shè)計了漸進式生成的劇本生成框架，實現(xiàn)了模型能夠輸出高度結(jié)構(gòu)化的精彩劇本，不論是新手還是資深編劇，都可以通過這套模型創(chuàng)作出吸引人的短劇劇本。(SkyScript劇本大模型技術(shù)原理圖)擁有一個動人的故事之后，下一步是將這些故事轉(zhuǎn)化成分鏡頭劇本，在傳統(tǒng)的生產(chǎn)模式中，這個環(huán)節(jié)需要邀請演員、線下設(shè)置場景，導(dǎo)演需要和演員溝通要領(lǐng)，再進行拍攝，涉及到人力和布景成本。但這些都可以通過AI大模型替代，SkyReels在這個環(huán)節(jié)使用的是昆侖萬維

自研分鏡大模型StoryboardGen，

該模型對影視動畫數(shù)據(jù)進行逆向處理，從而得到高質(zhì)量的工業(yè)級分鏡數(shù)據(jù)集，并且設(shè)計了分鏡多智能體框架，高質(zhì)量實現(xiàn)場景、鏡頭、角色和動作的生成。在圖像生成效果上，昆侖萬維使用自研首創(chuàng)的DiT-Moe模型，提升圖像質(zhì)量。就如在正式拍攝的過程中一樣，需要將分鏡頭有機融合在一起，才能得到一個完整的故事體系。

SkyReels使用WorldEngine，它是業(yè)界首個將AI 3D引擎與視頻大模型深度融合的創(chuàng)新平臺，實現(xiàn)了3D 生成、視頻生成、3D與視頻混合創(chuàng)作

。WorldEngine創(chuàng)新平臺包含多個子環(huán)節(jié)，每個環(huán)節(jié)又分別使用了不同的模型。

在3D生成模塊中，

使用的是自研的Sky3DGen大模型，它能夠生成多樣化的3D元素和場景，從自然景觀到未來都市，從靜態(tài)物體到動態(tài)角色，并且提供了實時的3D場景交互能力，使得用戶可以即時看到調(diào)整和編輯的效果，加快創(chuàng)作流程。在WorldEngine的加持下，用戶可以構(gòu)建3D虛擬影棚，實現(xiàn)虛擬拍攝體驗。

首頁上一頁 1 2 345 6 全文共 6 頁下一頁

關(guān)閉

昆侖萬維推出全球首款A(yù)I短劇平臺SkyReels，短劇進入“無人區(qū)”(4)

相關(guān)新聞

今日熱點

頻道熱點