![]()
新智元報(bào)道
編輯:定慧 KingHZ
【新智元導(dǎo)讀】把創(chuàng)作玩成了魔法,SkyReels新版重構(gòu)AI創(chuàng)作生態(tài):無限畫布融合圖片、音頻、視頻,一鍵啃下多主體互動(dòng)的硬骨頭,讓創(chuàng)意無限延展。
如果年老的喬布斯碰到年輕的喬布斯,他們會(huì)說什么?
這就是爆火的AI數(shù)字人視頻制作~
不管是制作商業(yè)視頻,還是影視級(jí)制作,或者二創(chuàng)視頻,AI已經(jīng)徹底顛覆了過去的生產(chǎn)體系。
上面視頻效果令人驚訝,角色的口型和發(fā)音完美同步,毫無違和感。
而下面這種電影級(jí)別的多人多輪對(duì)話已經(jīng)幾乎看不出AI的痕跡,太自然了!
以上就是我們用SkyReels最新版制作的多人多輪對(duì)話視頻。
2024年7月上線后,SkyReels曾迅速風(fēng)靡海外,這次發(fā)布的是最新版本,使用后的感受只有兩個(gè)字:強(qiáng)大。
作為業(yè)內(nèi)首個(gè)支持單鏡頭多人多輪對(duì)話的數(shù)字人模型,SkyReels在識(shí)別主體人物、角色一致性等能力都來到新的高度。
你甚至可以直接用SkyReels「拍一部」MV。
就在不到一個(gè)月前的國慶期間,OpenAI發(fā)布了他們最新的AI視頻生成產(chǎn)品Sora 2,著實(shí)讓AI視頻又火了一把。
AI視頻生成,已經(jīng)不是什么新鮮事。
但是如何在最真實(shí)、最高頻的場(chǎng)景需求中,讓普通人輕松創(chuàng)作出高質(zhì)量?jī)?nèi)容,才是核心競(jìng)爭(zhēng)力。
這次SkyReels新版本重構(gòu)了用戶——AI——作品三者之間的關(guān)系,讓每個(gè)人都能更好地塑造和表現(xiàn)自我。
一句話簡(jiǎn)單說就是:這次SkyReels打通「圖片—音頻—視頻」全棧,把多主體、多人對(duì)話、電影運(yùn)鏡這三個(gè)「硬骨頭」同時(shí)啃到行業(yè)第一。
一張畫布,無限可能
本次SkyReels更新后,全部的AI功能和多個(gè)全球頂尖AI模型都集成于同一個(gè)創(chuàng)作空間。
一張畫布即是所有工具,一張畫布融合圖片、視頻、音樂等多模態(tài)。
在無限畫布上,你看到的每一個(gè)內(nèi)容,都是一個(gè)活的、可交互的積木——
所見即所得,效果實(shí)時(shí)呈現(xiàn)。
SkyReels的這種全新的交互模式,讓創(chuàng)作告別線性步驟,用戶直接進(jìn)行網(wǎng)狀探索。
比如,你只需在同一張畫布內(nèi),就可以完成上述喬布斯跨時(shí)空對(duì)話視頻的制作。
![]()
一站式創(chuàng)作體驗(yàn)
如何將AI創(chuàng)作體驗(yàn)集成到一起,融為一體,而不是割裂的AI生成內(nèi)容、生成圖片、生成視頻?
SkyReels在一張畫布中集成了靈感、模板、圖片、視頻和音頻所有功能。
先對(duì)話碰撞靈感,再出圖,然后直接把圖片傳入Avatar中實(shí)現(xiàn)最終效果。
![]()
SkyReels會(huì)自動(dòng)上傳圖片中的人物,準(zhǔn)確定位角色位置。
![]()
然后就可以給每個(gè)角色分配他們「要說的話」,在分配前,你還可以選擇角色的配音音色。
![]()
值得一提的是,SkyReels數(shù)字人的強(qiáng)大之處在于,你可以選擇13個(gè)國家的語言,包括了:
漢語、英語、法語、德語、意大利語、日語、葡萄牙語等。
還可以選擇性別、年齡和語言風(fēng)格,比如:
冷淡的/高傲疏離的、親切的/友善的、迷人的/富有魅力的、優(yōu)雅的/高雅的、幽默的/詼諧等。

通過頭像、對(duì)話提示詞和配音三管齊下,SkyReels可以精確控制每個(gè)角色的說話時(shí)機(jī)與節(jié)奏,讓多角色互動(dòng)自然流暢,具備真實(shí)的對(duì)話感。
在這種精確控制下,不管是影視級(jí)對(duì)話場(chǎng)景、電商雙人口播或者二創(chuàng)影視和游戲素材,都變得簡(jiǎn)單,普通人也可以打造出作品。
除了選擇配音,還可以選擇錄音等自制音頻文件,這樣生成的視頻更具個(gè)性化及真實(shí)感。
![]()
除了可以用Avatar讓角色進(jìn)行對(duì)話。
SkyReels也可以讓靜態(tài)的梵高的名畫《星月夜》動(dòng)起來:

看到別人的新創(chuàng)意,但苦于自己沒有靈感,不知如何創(chuàng)作出類似的視頻?
對(duì)話「Chat」功能內(nèi)置超級(jí)智能體「SuperAgent」,用AI激發(fā)新靈感。
支持圖像、視頻等多模態(tài)輸入,比如輸入《星月夜》原圖和已有視頻:
智能體從主題、設(shè)定、構(gòu)圖、色彩等多角度思考,生成了另一個(gè)版本的《星月夜》:
事實(shí)上,與其他AI視頻工具定位不同,SkyReels更聚焦工作場(chǎng)景、更加簡(jiǎn)單易用。
多種方式,真AI生成力工具
針對(duì)自媒體、市場(chǎng)營(yíng)銷、電商推廣、教育宣傳等工作場(chǎng)景,SkyReels集多模態(tài)于一身、以AI為先。
他們背后有哪些考量?他們認(rèn)為,
視覺/音頻等GenAI工具還會(huì)保持高速發(fā)展,而創(chuàng)意永遠(yuǎn)是連接人與AI的橋梁。
與此同時(shí),創(chuàng)意工具產(chǎn)品復(fù)雜度會(huì)進(jìn)一步降低,自然語言與編輯工具會(huì)更加無縫融合。
他們希望用戶無需學(xué)習(xí)AI,而只需要使用AI。
SkyReels將復(fù)雜的模型調(diào)用、參數(shù)設(shè)置都裝入了簡(jiǎn)單的操作,甚至只需點(diǎn)擊,就能完成創(chuàng)作。
除了圖像變視頻、讓圖中人物開口說話外,在畫布中還可以音樂轉(zhuǎn)畫面、圖像風(fēng)格遷移、給視頻中人物配音。
而且整個(gè)工作流是流動(dòng)的,多種素材、多種需求,一張畫布,全部滿足。
比如,想做一個(gè)「游戲世界觀預(yù)告」,但現(xiàn)在只有一張概念圖:
直接和AI對(duì)話,讓SkyReels給出建議:
這是一張游戲概念圖,如何基于這張圖制作「游戲世界觀預(yù)告」?
在SkyReels的引導(dǎo)下,幾乎只要確認(rèn)一下是否滿足需求,就能生成預(yù)告:

此外,還可以生成環(huán)境音。
音效+視頻一結(jié)合,效果一下出來了:
圖像生成、音頻生成、視頻生成……一張畫布集成了多種功能,使用體驗(yàn)對(duì)小白來說相當(dāng)絲滑:

Web端功能更加豐富易用
除了對(duì)模型底層能力的升級(jí),這次SkyReels的全面升級(jí)帶來了全新的Web端UI設(shè)計(jì),使用更加方便和快捷。
上面提到的無限畫布就是其中一項(xiàng),SkyReels還提供了豐富的模板和智能體。
專業(yè)的事,交給專業(yè)的智能體
創(chuàng)作沒有思路,怎么辦?
針對(duì)28個(gè)應(yīng)用場(chǎng)景,SkyReels推出了專家智能體(Expert Agent),只要根據(jù)智能體的提示,輸入自己的需求,就能得到最終的創(chuàng)意結(jié)果。
比如,新店開業(yè),需要一套宣傳物料,直接使用「創(chuàng)意活動(dòng)」(Campaign Creatives),即可快速設(shè)計(jì)營(yíng)銷活動(dòng)宣傳材料。
![]()
比如,下列3種類型的海報(bào):
![]()
28位專家Agent,精準(zhǔn)聚焦高價(jià)值的市場(chǎng)營(yíng)銷 、電子商務(wù)、創(chuàng)意故事、虛擬形象等領(lǐng)域。
![]()
![]()
比如,電子商務(wù)智能體,直出可商用的廣告:

生成故事情節(jié)也不在話下:
每個(gè)Agent內(nèi)置專業(yè)領(lǐng)域知識(shí)庫和成熟工作流程,能深度理解行業(yè)術(shù)語,提供可執(zhí)行的專業(yè)方案。
無需學(xué)習(xí)復(fù)雜提示詞,你只需補(bǔ)充關(guān)鍵信息、設(shè)定限定條件,如目標(biāo)受眾、視頻比例、風(fēng)格偏好等。
在每個(gè)專家場(chǎng)景中,Agent可自動(dòng)執(zhí)行多步驟任務(wù),一鍵生成可直接交付的完整成果,告別零散半成品。
每個(gè)Agent都經(jīng)過深度優(yōu)化,專注高價(jià)值領(lǐng)域,讓你:
? 無需浪費(fèi)時(shí)間調(diào)試通用工具
? 開箱即用,精準(zhǔn)高效
? 顯著提升任務(wù)效率與質(zhì)量
專業(yè)的事,交給專業(yè)的Agent。
如果需求較為明確,SkyReels讓內(nèi)容生產(chǎn)更簡(jiǎn)單——
得益于AI驅(qū)動(dòng)的視覺內(nèi)容引擎,無論是智能海報(bào)、商品B-Roll,還是音畫同出的廣告大片,在SkyReels模板中都可一鍵生成。
海報(bào)、服裝圖、視頻廣告 , AI一鍵直出
針對(duì)功能海報(bào)設(shè)計(jì)、電商服裝圖制作、商品演示視頻以及數(shù)字人口播講解等主流應(yīng)用場(chǎng)景,SkyReels模板庫提供了近10個(gè)大類、150余種模板,支持圖片與視頻的快速生成。
![]()
SkyReels橫跨圖片與視頻,專為提升產(chǎn)品的營(yíng)銷轉(zhuǎn)化率與品牌表現(xiàn)力而設(shè)計(jì)。
圖片功能主要為一鍵「AI海報(bào)」和「AI試穿」。
「AI商品海報(bào)」可直接復(fù)用流行的、高轉(zhuǎn)化的爆款海報(bào),一鍵套用。
而且和常見的其他模型不同,SkyReels可修改文字——
標(biāo)題、賣點(diǎn)、價(jià)格等文字,均可編輯,完美貼合新需求,靈活調(diào)整營(yíng)銷節(jié)點(diǎn)。
而「AI試穿」功能,不變形、不失真。不僅效果行業(yè)頂尖, 而且支持多件服飾同時(shí)試穿——
AI自動(dòng)推薦「套裝」,買家遠(yuǎn)程即可體驗(yàn)穿衣效果,有效提升客單價(jià)。

AI數(shù)字人、動(dòng)態(tài)展示視頻、電影級(jí)創(chuàng)意廣告等商業(yè)需求,SkyReels一站全搞定。
此外,SkyReels還提供輔助創(chuàng)意工具箱,讓創(chuàng)意不受限制。
一些常用的PS功能,比如商品換背景(智能摳圖)、圖片風(fēng)格轉(zhuǎn)換等直接可用。
![]()
不止是PS,利用AI還能自動(dòng)生成特寫、環(huán)繞鏡頭、視頻特效(添加濾鏡、轉(zhuǎn)場(chǎng))。
![]()
SkyReels一站式制作商業(yè)廣告
由于可以對(duì)角色視頻和音頻的精確控制,這給很多商業(yè)場(chǎng)景帶來無限想象力,比如廣告制作。
想象一個(gè)場(chǎng)景,讓擎天柱為我們推銷一款汽油。
首先,使用SkyReels的生圖功能生成一系列素材圖片。
![]()
在畫布中,你可以設(shè)置圖片比例,還能設(shè)置圖片風(fēng)格。
![]()
值得一提的是,在全新的SkyReels上,集成了全球頂尖的AI模型,比如在文生圖上就可以調(diào)用谷歌最新的Nano Banana模型。
在視頻生成模塊就可以直接調(diào)用Sora 2,還能調(diào)用Sora 2 Pro;還有谷歌最新的Veo 3.1等等。
![]()
然后,就可以直接在數(shù)字人制作Avatar中直接在生成素材中選擇合適的圖片,無需脫離當(dāng)前工作流,操作非常方便。
這就是SkyReels全新升級(jí)的無限畫布功能,之前已介紹過。
![]()
最終,只需要通過兩段提示詞+幾次鼠標(biāo)點(diǎn)擊,就可以制作一個(gè)非常像樣的商業(yè)化廣告。
以上只是一個(gè)快速的流程演示,還可以根據(jù)需求,在畫布上繼續(xù)微調(diào)。
除了多人多輪對(duì)話,針對(duì)單人的視頻也做到極致的控制。
更夸張的是,SkyReels提供了32個(gè)運(yùn)鏡組合與鏡頭運(yùn)動(dòng)選項(xiàng)。

一鍵延長(zhǎng)視頻和風(fēng)格化轉(zhuǎn)換
SkyReels這次更新充分考慮了創(chuàng)作者的諸多創(chuàng)作痛點(diǎn)。
無限畫布讓我們無需開啟多個(gè)對(duì)話打斷思路,而且點(diǎn)擊圖片和視頻結(jié)果時(shí),頂部都會(huì)出現(xiàn)不同的快捷功能欄。
![]()
可以一步直達(dá)所需功能,比如圖片可以擴(kuò)充、移除背景等,下面就是一鍵將1:1的照片擴(kuò)充為16:9的照片。
SkyReels會(huì)主動(dòng)理解圖片內(nèi)容,并進(jìn)行補(bǔ)全。
![]()
而視頻則可以繼續(xù)延長(zhǎng),或者換一個(gè)風(fēng)格,也就是風(fēng)格化。
![]()
此次SkyReels模型不再局限于「單鏡頭」的拉長(zhǎng)模式,而是基于視頻語義和用戶 Prompt,智能預(yù)測(cè)下一個(gè)鏡頭的合理延續(xù)與場(chǎng)景內(nèi)容。
比如原視頻為1秒的視頻,使用提示詞「固定鏡頭,聚焦女人的面部,抬頭面無表情地看著鏡頭」來進(jìn)行視頻延長(zhǎng)。

經(jīng)過導(dǎo)出后的視頻,就具備了電影級(jí)別的運(yùn)鏡效果。

風(fēng)格化功能,則可以一鍵將視頻的風(fēng)格轉(zhuǎn)化為辛普森風(fēng)格、動(dòng)森風(fēng)格、樂高風(fēng)格或者剪紙風(fēng)格等,滿足多樣化創(chuàng)作需求。
比如先制作一個(gè)身穿粉色披風(fēng)的蝙蝠俠騎機(jī)車的鏡頭。

一鍵就可以把他轉(zhuǎn)變?yōu)闃犯唢L(fēng)格。

還可以轉(zhuǎn)變?yōu)殍蟾唢L(fēng)格。

或者是剪紙風(fēng)格。

還能轉(zhuǎn)化為辛普森風(fēng)格。

創(chuàng)作體驗(yàn)非常亦可賽艇,絲般順滑~
昆侖萬維的愿景
當(dāng)最后一幀畫面渲染完成,當(dāng)普通人也能用自然語言導(dǎo)演「大片」,當(dāng)創(chuàng)意不再被技術(shù)門檻束縛。
這一刻,昆侖萬維的愿景已悄然照進(jìn)現(xiàn)實(shí):未來,無論是個(gè)體創(chuàng)作者,還是千行百業(yè),只需輕點(diǎn)鼠標(biāo),就能調(diào)用AI的無窮算力,讓靈感即刻成片,讓故事全球同步。
SkyReels認(rèn)為每個(gè)人都能更好地塑造自我,表達(dá)自我。
這也是昆侖萬維的使命,在All in AGI與AIGC去實(shí)現(xiàn)通用人工智能的同時(shí),依然不忘記讓每個(gè)人更好地塑造和表現(xiàn)自我。
參考資料:
https://www.skyreels.ai/home
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.