在3D與視頻混合創(chuàng)作模塊,昆侖萬維以圖層融合技術(shù)為核心,打造3D與視頻混合創(chuàng)作模式。視頻中的任意元素都可以自由選擇使用3DAI引擎生成或者視頻大模型生成。此外,針對(duì)混合中遇到的光照和風(fēng)格差異細(xì)節(jié),昆侖萬維單獨(dú)訓(xùn)練了融合生成模型,使得圖層融合后的視頻呈現(xiàn)較好的一致性。
由于引擎的使用,與傳統(tǒng)的視頻生成相比,WorldEngine實(shí)現(xiàn)了成本下降,同時(shí),生成速度也提升了數(shù)個(gè)量級(jí)。雖然一個(gè)短視頻到這里基本完成生成了,但常常刷劇的群體也會(huì)感受到,好的臺(tái)詞功底和BGM對(duì)劇情的展示,有著事半功倍的效果。在臺(tái)詞上,SkyReels的AI文本理解技術(shù),經(jīng)過上萬本小說的深度學(xué)習(xí),能夠自動(dòng)化地從文本中識(shí)別角色對(duì)話、情感表達(dá),并預(yù)測(cè)出合理的句間停頓。在旁白方面SkyReels通過情感化語音合成技術(shù),幫助旁白用抑揚(yáng)頓挫的韻律,讓角色對(duì)話充滿豐富充沛的情感。昆侖萬維透露,SkyReels的智能體不僅能理解文字,更能智能分析劇本中的場(chǎng)景氛圍,“基于先進(jìn)的多模態(tài)檢索和背景音樂(BGM)生成能力,我們能夠?yàn)橐曨l智能配上合理的背景音樂,讓每一幀畫面都與音樂完美融合。”昆侖萬維AI短劇平臺(tái)SkyReels這一革命性的工具,有望帶來AI短劇用戶生成內(nèi)容(UGC)與專業(yè)用戶生成內(nèi)容(PUGC)的爆發(fā)式增長(zhǎng),為短劇內(nèi)容生態(tài)注入前所未有的活力,推動(dòng)短劇內(nèi)容創(chuàng)作與消費(fèi)市場(chǎng)的進(jìn)一步快速增長(zhǎng)。一個(gè)由AI技術(shù)驅(qū)動(dòng)的短劇創(chuàng)作與消費(fèi)的時(shí)代,正在到來。昆侖萬維AI UGC的全球布局國(guó)海證券研報(bào)提到,AI有望提高短劇產(chǎn)能,降低成本。短劇出海市場(chǎng)空間保守預(yù)測(cè)約為360億美元。SkyReels是昆侖萬維出海布局策略中的一個(gè)縮影,背后是他們All in AIGC的戰(zhàn)略思考。2020年,昆侖萬維創(chuàng)始人周亞輝就看到了AIGC的潛力,他們預(yù)判AI體系之下將會(huì)迎來新的內(nèi)容的黃金時(shí)代。昆侖萬維董事長(zhǎng)兼CEO方漢回顧移動(dòng)互聯(lián)網(wǎng)時(shí)代的機(jī)遇,總結(jié)爆紅內(nèi)容產(chǎn)品的規(guī)律,發(fā)現(xiàn)大多數(shù)都是“免費(fèi)+To C”的模式,因?yàn)槿后w基數(shù)足夠大,只要產(chǎn)品能夠戳中用戶的需求點(diǎn),就能獲得指數(shù)級(jí)的用戶增長(zhǎng),打造“AI UGC”平臺(tái)成為昆侖萬維的核心策略,即給1%的內(nèi)容創(chuàng)作者提供服務(wù)、讓99%的用戶消費(fèi)內(nèi)容。那么,AIGC時(shí)代爆紅的產(chǎn)品畫像是怎樣的?方漢認(rèn)為,適配AI的端側(cè)新硬件、新手機(jī)誕生的時(shí)候,或許就是AIGC獲得顛覆性成果的時(shí)候,但這個(gè)過程還需要3~5年,而當(dāng)下的核心任務(wù)是找準(zhǔn)機(jī)會(huì)點(diǎn),做好預(yù)判并占據(jù)AIGC的風(fēng)口。按照移動(dòng)互聯(lián)網(wǎng)時(shí)代的規(guī)律,每個(gè)國(guó)家都可能有自己的超級(jí)App,也可能一個(gè)超級(jí)App同時(shí)在多個(gè)國(guó)家劃分地盤。方漢經(jīng)過一番思考后,認(rèn)為應(yīng)該先占據(jù)用戶性價(jià)比和接受程度高的國(guó)家,比如歐美、日韓和中國(guó),再逐步擴(kuò)散到中東、東南亞、南美等地區(qū)。圈定國(guó)家之后,昆侖萬維的管理層開始思考能夠誕生超級(jí)App的垂類,他們不斷問自己“怎么樣才能變成巨頭?”上一個(gè)時(shí)代至今還活著的內(nèi)容巨頭,基本都深耕某一個(gè)垂直娛樂品類,比如網(wǎng)文、短劇、動(dòng)畫,同樣的邏輯在AIGC上也會(huì)重演。目前,昆侖萬維已經(jīng)針對(duì)“AI UGC”策略在國(guó)內(nèi)進(jìn)行系統(tǒng)布局,在大模型、AI搜索、AI音樂等板塊均已構(gòu)建產(chǎn)品矩陣。其中,昆侖萬維的大模型已歷經(jīng)多次迭代:2月份推出新版
5月27日,昆侖萬維集團(tuán)在公眾號(hào)宣布,其產(chǎn)品天工AI的日活躍用戶數(shù)突破100萬,展現(xiàn)出用戶對(duì)該平臺(tái)的高度熱情
2024-05-27 15:47:02昆侖萬維:天工AI日活用戶超過100萬近期,國(guó)產(chǎn)第一款3A游戲《黑神話:悟空》的上線,激起了一股“西游熱”和人人爭(zhēng)當(dāng)“悟空”的激情。
2024-09-03 21:59:01張?zhí)鞇叟亩虅?/span>昆侖萬維回應(yīng)OpenAI對(duì)中國(guó)API停服 對(duì)公司影響不大
2024-06-26 17:34:52昆侖萬維回應(yīng)OpenAI對(duì)中國(guó)API停服豎屏短劇作為一種新興的文化傳播形式,正在全球范圍內(nèi)迅速崛起,成為中華文化輸出的新窗口。
2024-06-04 15:47:53周星馳王晶請(qǐng)注意4月17日,昆侖萬維發(fā)布重要消息:其自主研發(fā)的“天工3.0”基座大模型及“天工SkyMusic”音樂大模型已面向公眾開放公測(cè)
2024-04-17 15:00:08昆侖萬維宣布天工3.0大模型開啟公測(cè)近期,“王媽”這一角色因在手機(jī)社交平臺(tái)上頻繁為職場(chǎng)人士發(fā)聲而受到廣泛關(guān)注
2024-06-04 09:29:21王媽被指無資質(zhì)短劇已完成備案