昆侖萬(wàn)維推出全球首款A(yù)I短劇平臺(tái)SkyReels，短劇進(jìn)入“無(wú)人區(qū)”(4)

小大

用微信掃描二維碼
分享至好友和朋友圈

關(guān)鍵詞：

2024-08-19 13:36:29 人民號(hào)

SkyScript

，替代了傳統(tǒng)短劇人工式的內(nèi)容研發(fā)。昆侖萬(wàn)維首先構(gòu)建了億級(jí)的高質(zhì)量短劇結(jié)構(gòu)化數(shù)據(jù)集SkyScript-100M，該數(shù)據(jù)集針對(duì)海量精彩短劇的劇情節(jié)奏、爽點(diǎn)、情緒變化進(jìn)行了高質(zhì)量標(biāo)注；此外，算法團(tuán)隊(duì)設(shè)計(jì)了漸進(jìn)式生成的劇本生成框架，實(shí)現(xiàn)了模型能夠輸出高度結(jié)構(gòu)化的精彩劇本，不論是新手還是資深編劇，都可以通過(guò)這套模型創(chuàng)作出吸引人的短劇劇本。(SkyScript劇本大模型技術(shù)原理圖)擁有一個(gè)動(dòng)人的故事之后，下一步是將這些故事轉(zhuǎn)化成分鏡頭劇本，在傳統(tǒng)的生產(chǎn)模式中，這個(gè)環(huán)節(jié)需要邀請(qǐng)演員、線下設(shè)置場(chǎng)景，導(dǎo)演需要和演員溝通要領(lǐng)，再進(jìn)行拍攝，涉及到人力和布景成本。但這些都可以通過(guò)AI大模型替代，SkyReels在這個(gè)環(huán)節(jié)使用的是昆侖萬(wàn)維

自研分鏡大模型StoryboardGen，

該模型對(duì)影視動(dòng)畫數(shù)據(jù)進(jìn)行逆向處理，從而得到高質(zhì)量的工業(yè)級(jí)分鏡數(shù)據(jù)集，并且設(shè)計(jì)了分鏡多智能體框架，高質(zhì)量實(shí)現(xiàn)場(chǎng)景、鏡頭、角色和動(dòng)作的生成。在圖像生成效果上，昆侖萬(wàn)維使用自研首創(chuàng)的DiT-Moe模型，提升圖像質(zhì)量。就如在正式拍攝的過(guò)程中一樣，需要將分鏡頭有機(jī)融合在一起，才能得到一個(gè)完整的故事體系。

SkyReels使用WorldEngine，它是業(yè)界首個(gè)將AI 3D引擎與視頻大模型深度融合的創(chuàng)新平臺(tái)，實(shí)現(xiàn)了3D 生成、視頻生成、3D與視頻混合創(chuàng)作

。WorldEngine創(chuàng)新平臺(tái)包含多個(gè)子環(huán)節(jié)，每個(gè)環(huán)節(jié)又分別使用了不同的模型。

在3D生成模塊中，

使用的是自研的Sky3DGen大模型，它能夠生成多樣化的3D元素和場(chǎng)景，從自然景觀到未來(lái)都市，從靜態(tài)物體到動(dòng)態(tài)角色，并且提供了實(shí)時(shí)的3D場(chǎng)景交互能力，使得用戶可以即時(shí)看到調(diào)整和編輯的效果，加快創(chuàng)作流程。在WorldEngine的加持下，用戶可以構(gòu)建3D虛擬影棚，實(shí)現(xiàn)虛擬拍攝體驗(yàn)。

首頁(yè)上一頁(yè)1 2 345 6 全文共 6 頁(yè)下一頁(yè)

關(guān)閉

昆侖萬(wàn)維推出全球首款A(yù)I短劇平臺(tái)SkyReels，短劇進(jìn)入“無(wú)人區(qū)”(4)

相關(guān)新聞

今日熱點(diǎn)

頻道熱點(diǎn)

昆侖萬(wàn)維推出全球首款A(yù)I短劇平臺(tái)SkyReels，短劇進(jìn)入“無(wú)人區(qū)”(4)