一次性生成5個(gè)8秒視頻，用AI做抖音短視頻不是夢？
相信很多大家對(duì)一次性生成5個(gè)8秒視頻，用AI做抖音短視頻不是夢？還不知道吧，今天菲菲就帶你們一起去了解一下~.~！
最近的AI視頻賽道，在玩法上“卷”出了新高度。
有用戶用它完善視頻細(xì)節(jié):
還有人用它創(chuàng)作了科幻大片:
甚至讓馬斯克微笑點(diǎn)頭:
還有大魚吃小魚，實(shí)現(xiàn)普通攝像頭難以拍攝的效果:
較強(qiáng)的靈活性和視頻可控性，一下讓人難以分辨虛實(shí)，而這些鏡頭都是靠愛詩科技的AI視頻工具PixVerse實(shí)現(xiàn)的。
PixVerse繼4月更新運(yùn)動(dòng)筆刷功能之后，今日又重磅上線了PixVerse V2模型。V2支持直接生成長達(dá)8秒的視頻，甚至可以一次性生成1-5個(gè)視頻片段，并保證風(fēng)格、主體和場景的一致性。
PixVerse已經(jīng)率先朝著AI視頻生成的一致性方向發(fā)力。這是要進(jìn)軍AIGC短片嗎?此次更新的PixVerse V2實(shí)力究竟如何?“AI新榜”從角色一致性、想象力、控制力維度上，第一時(shí)間給各位玩家實(shí)測了一番。
實(shí)測PixVerse新功能:一次性生成5個(gè)8秒視頻
據(jù)了解，PixVerse突破了時(shí)長技術(shù)限制，能單次生成8秒的視頻。但要知道AI視頻生成的時(shí)長越長越容易“露怯”，出現(xiàn)瑕疵。那么，其文本理解能力還能穩(wěn)定發(fā)揮嗎?我們先用V2簡單測了一下文生視頻和圖生視頻。
文生視頻
PixVerse V2版本
PixVerse V1版本
從生成效果來看，動(dòng)物類的表現(xiàn)很不錯(cuò)，幾秒內(nèi)可以動(dòng)的細(xì)節(jié)更多，比如狗狗的耳朵，毛發(fā)。雖然動(dòng)作幅度依舊比較小，但整體視頻呈現(xiàn)得更完整，在視頻質(zhì)量以及清晰度上都有明顯的進(jìn)步。
另外，PixVerse V2升級(jí)了模型理解和表達(dá)能力，在真實(shí)性和細(xì)節(jié)表達(dá)上進(jìn)一步加強(qiáng)。
PixVerse V2版本
PixVerse V1版本
可以看到，人物類鏡頭方面，畫面主體沒有出現(xiàn)特別大的技術(shù)瑕疵，光影效果也做得很好。相比前一個(gè)版本，V2生成的人物動(dòng)作幅度更大，也更真實(shí)。
但遺憾的是，和其他的AI視頻工具一樣，仍然是無法理解提示詞當(dāng)中的鏡頭術(shù)語，如“走向鏡頭”，畫面中主體的運(yùn)動(dòng)只是簡單轉(zhuǎn)了下頭。
圖生視頻
圖生視頻怎么能少得了這張經(jīng)典梗圖:
在圖生視頻模式下，我們沒有輸入任何提示詞，想看看PixVerse V2的“聯(lián)想”能力如何。
PixVerse V2并沒有讓圖中男生變成“渣男”，而是轉(zhuǎn)過頭與紅衣女孩錯(cuò)過，看多了其他AI視頻工具的戲劇效果，PixVerse V2展現(xiàn)的反而有點(diǎn)淡淡的憂傷。
三個(gè)人的動(dòng)作幅度都不大，但難能可貴的是唯一出現(xiàn)臉部的紅衣女孩沒有出現(xiàn)“變臉”，犧牲了戲劇效果但保證了角色的一致性。
相比之下，這張“房子著火我微笑”的梗圖生成效果就比較一般了。
轉(zhuǎn)頭離去，但“變臉”速度巨快:
控制住了變臉，但場景突然切換:
要說整活，還是AI在行啊。但總的來說，圖生視頻參考了我們上傳的圖片元素，玩梗能力在線，做二創(chuàng)是個(gè)不錯(cuò)的選擇。
在此前“AI新榜”的短片嘗試，以及大量用戶反饋和社區(qū)討論反饋中，AI視頻的一致性一直是一個(gè)難題，更不用說單次生成長達(dá)40秒的視頻片段了，一起看看PixVerse V2的多片段生成能力。
生成多片段40秒視頻
在PixVerse首頁點(diǎn)擊右側(cè)“PixVerse V2”，就可以進(jìn)入多片段生成頁面，同樣支持文生和圖生視頻。
在這里，需要我們選擇“Scene1”，輸入相應(yīng)提示詞，再添加“Scene2”，輸入第二個(gè)場景想要呈現(xiàn)的畫面，以此類推，最多添加5個(gè)不同的場景后，一次性生成完整片段。
換句話說，就是把短片的視頻分鏡，通過自然語言的形式呈現(xiàn)出來。
從官網(wǎng)發(fā)布的信息看，在PixVerse V2模式下，5個(gè)場景的畫面風(fēng)格都會(huì)與第一個(gè)場景保持一致。
如果我們還上傳了圖片，那么這些圖片會(huì)參考場景1的圖片風(fēng)格進(jìn)行重繪，保證生成視頻風(fēng)格的一致性。
比如，我們輸入的提示詞如下:
大約等待5分鐘左右，V2一次性生成了長達(dá)16秒的視頻片段。可以看到，在視頻主體、場景以及畫面色調(diào)上盡量保持了一致性，還省去了我們單個(gè)片段不斷“抽卡”的時(shí)間。
只不過，最終生成的畫面在精細(xì)度上還有待提高，依舊會(huì)出現(xiàn)小提琴、漢堡微變形的畫面瑕疵。
如果我們對(duì)某個(gè)片段熊貓的動(dòng)作、環(huán)境、鏡頭運(yùn)動(dòng)不滿意，還可以選擇替換相應(yīng)的角色元素，進(jìn)行二次編輯。
我們繼續(xù)嘗試一下人物類鏡頭一致性，將上述提示詞中的“panda”換成了“the woman”，測試了一波V2的角色控制能力。
沒想到的是，PixVerse V2直接規(guī)避了短板，生成了全是近景特寫的片段，壓根沒出現(xiàn)人物。
考慮到是“the woman”太過寬泛，我們又將主體替換成確切的人物角色“Harry Potter”，測試結(jié)果顯示，在多片段生成時(shí)，人物手指等細(xì)節(jié)瑕疵無可避免，但場景、風(fēng)格一致性上發(fā)揮穩(wěn)定。
1秒只需0.1元，AI視頻的成本競賽
今年下半年，AI視頻領(lǐng)域掀起了一波應(yīng)用間的較量，快手可靈、Runway Gen-3等陸續(xù)面向公眾開放使用。
幾家產(chǎn)品的問世，都向我們傳遞了一個(gè)信息“AI視頻生成技術(shù)更適合短視頻制作”。
除了效果表現(xiàn)之外，陸續(xù)有AI工具開始采取付費(fèi)訂閱制，快手可靈同樣結(jié)束了免費(fèi)試用期，正式邁入了“收費(fèi)時(shí)代”。
快影App內(nèi)公告
作為AI領(lǐng)域向來繞不開的問題，商業(yè)化的困境同樣出現(xiàn)在了視頻應(yīng)用上。
當(dāng)生成越長的視頻，是否成本就越貴?
據(jù)調(diào)查機(jī)構(gòu)Factorial Funds發(fā)文表示， Sora約30億參數(shù)的訓(xùn)練成本，比1.8萬億參數(shù)的GPT-4還要多。
Factorial Funds對(duì)Sora的相關(guān)報(bào)道
對(duì)于AI視頻而言，一些生成服務(wù)會(huì)根據(jù)視頻的時(shí)長、所需處理的視頻復(fù)雜性以及使用技術(shù)等因素來定價(jià)。
如果AI視頻還包括了高度定制化的內(nèi)容，對(duì)視頻生成的質(zhì)量、連貫程度以及真實(shí)性有要求，實(shí)際所用的推理成本自然就會(huì)更高。
曾有媒體報(bào)道，國內(nèi)AI企業(yè)做過一個(gè)估算，大約兩分鐘的AI視頻實(shí)際要花掉180元。
盈利，是擺在所有AI視頻工具面前的共同問題。哪怕是PixVerse也扛不住相應(yīng)的推理成本。
目前，PixVerse推出了訂閱套餐方案，基礎(chǔ)會(huì)員每月5美元，可以獲得1150個(gè)積分。
PixVerse每生成8秒的視頻，需要消耗30個(gè)積分，這樣算來，1150個(gè)積分大約能生成20條完整的15秒短視頻，一條短視頻的成本折合人民幣1.5元，是Runway Gen-3費(fèi)用的1/3。
當(dāng)然，背后的技術(shù)以及生成視頻結(jié)果的不確定性，導(dǎo)致實(shí)際使用的成本會(huì)驟升。
費(fèi)用之外，對(duì)于大多數(shù)普通用戶而言，短短幾秒的視頻時(shí)間，如果只是簡單的鏡頭移動(dòng)，除了獲得體驗(yàn)感，很難有真正的使用場景。
愛詩科技創(chuàng)始人王長虎在年初接受采訪時(shí)也提到:“在未來6-12個(gè)月里，我們希望用AI制作出15秒長的可消費(fèi)內(nèi)容。只有當(dāng)普通人都能用AI生成出好看、好玩的內(nèi)容，才是AI視頻的ChatGPT時(shí)刻”。
目前看來，高算力、高成本依舊是商業(yè)化的主要障礙，但不少視頻玩家也從中找到了用戶留存的新方法，“AI整活”“老照片動(dòng)起來”“AI修復(fù)”等抽象玩法在互聯(lián)網(wǎng)上層出不窮。
在大多數(shù)用戶對(duì)AI視頻工具的新鮮感褪去之后，如何用新玩法留住用戶，摸索出新的賺錢方法，或許會(huì)是視頻內(nèi)容玩家下一個(gè)競爭賽道。
以上就是關(guān)于【一次性生成5個(gè)8秒視頻，用AI做抖音短視頻不是夢？】的相關(guān)內(nèi)容，希望對(duì)大家有幫助！