來不及解釋了,大家玩Seedance 2.0都玩瘋了,
我凌晨四點(diǎn)都還在排隊(duì),每當(dāng)我以為玩法總結(jié)差不多的時(shí)候,就又看到了一堆好玩的。這篇文章我就直接把十種玩法要的素材和提示語都做出來了,開袋即食。
![]()
所有玩法我們都打包放文檔里了,公眾號回復(fù)“即夢2“。
先超簡單回顧一下Seedance 2.0是怎么用的,
在即夢里使用視頻生成模式,打開全能參考,就可以上傳文件生成了,豆包和小云雀的互動(dòng)邏輯也都差不多。
![]()
Seedance 2.0現(xiàn)在支持圖像,視頻,音頻,文本四種模態(tài)輸入,混合輸入總上限是 12 個(gè)文件,量大管飽,更加具體的一些操作方法,大家可以看我上次寫的這篇文章。
這兩天即夢還上線了圖片5.0 Preview(也就是Seedream 5.0 Lite)圖片模型,4k版本目前只有在即夢上才能體驗(yàn),這次我結(jié)合在一起玩了一下。
![]()
Gogogo,快來看看這一大筐玩法,以及Seedream 5.0 Lite和Seedance 2.0的組合用法,
首先就是我一直想做的,讓我家小貓和奧特曼對戰(zhàn)的一個(gè)場景,之前要用兩個(gè)模型,一個(gè)Banana2生成九宮格,一個(gè)sora2在九宮格基礎(chǔ)上生成視頻,但現(xiàn)在Seedance 2.0也可以做出九宮格分鏡圖生成連貫視頻的操作了,動(dòng)作和運(yùn)鏡轉(zhuǎn)換超級絲滑,論導(dǎo)演的分鏡思維這塊。。。
操作過程so easy,
先用我的小貓生成一張和我想用的角色對戰(zhàn)的場景圖,5.0 Lite 現(xiàn)在目前對于角色的復(fù)刻做得還是不錯(cuò)的。然后我可以直接用這張圖片,讓 5.0 Lite給我做一張九宮格的分鏡圖,
使用這張圖作為第一個(gè)分鏡,給我生成一張兩個(gè)角色對戰(zhàn)打斗的大動(dòng)作九宮格分鏡圖,每個(gè)分鏡使用不同的景別,電影分鏡的對戰(zhàn)動(dòng)作設(shè)計(jì),把九個(gè)分鏡圖放在一張圖中,保證每一個(gè)分鏡圖沒有物理規(guī)律上的錯(cuò)誤
![]()
然后這張圖可以直接通過生成視頻的小窗跳轉(zhuǎn)到即夢下方的生成視頻功能,步驟非常方便,
![]()
再用這個(gè)提示語就能做出上面給到那個(gè)帶有動(dòng)作和運(yùn)鏡的連貫打斗鏡頭了。
根據(jù)這張九宮格分鏡圖,給我直接做出一段非常連貫絲滑的擬人巨貓和紅色巨人對戰(zhàn)的視頻片段,連貫的動(dòng)作展現(xiàn)出精彩的打斗
如果你不知道這些動(dòng)作要怎么寫,我們也可以直接給 Seedance 2.0 提供一個(gè)帶有動(dòng)作的視頻,給出人物形象圖片還有場景圖,讓這些人物出現(xiàn)在視頻中,并按照你提供的視頻動(dòng)作進(jìn)行打斗對戰(zhàn)。
這里需要注意的是,上傳的視頻素材必須在 15 秒以內(nèi)。而且即夢對于素材的尺寸有很高的要求,我這里實(shí)測,只要提供 720p 左右的視頻素材基本上都是可以的。
![]()
我這里直接做了一個(gè)對比,將我提供的原始打斗動(dòng)作視頻與生成的視頻進(jìn)行了演示。我提供的原始視頻實(shí)際上只是一個(gè)沒有經(jīng)過渲染、類似建模畫面。
但是,它可以直接把我想要的人物按照視頻中的形象和風(fēng)格渲染上去。人物動(dòng)作,分鏡和運(yùn)鏡幾乎與原視頻保持的非常一致。
說實(shí)話,以前要是按照提示語去寫這樣的一個(gè)分鏡圖或者畫面內(nèi)容,不知道要寫多少提示詞才能做到。但今天 Seedance 2.0只要給個(gè)視頻就可以了。
當(dāng)然,如果你想自己輸入一段非常簡單的提示詞,它也可以做出一段非常精彩的打斗效果。
![]()
這里我嘗試讓自己和我家的貓進(jìn)入到最近很火的“邵氏兄弟武俠電影風(fēng)格”場景中,實(shí)現(xiàn)了一段非常流暢絲滑的打斗。
這三天測試下來,我發(fā)現(xiàn)如果只是提供圖片作為參考,所消耗的積分要比同時(shí)提供圖片和視頻素材給模型參考時(shí)要少一半。
或者你就是想復(fù)刻某一段動(dòng)畫里的運(yùn)鏡鏡頭,也只需要把想要復(fù)刻的片段上傳上去,這里我用到的人物、大鳥坐騎以及場景圖片,都是用Seedream 5.0 Lite圖片模型生成的,不同的主體也能保持一致的畫風(fēng)。
![]()
![]()
![]()
然后寫好下面這個(gè)提示語,其實(shí)主要就是把每一張圖片中的人物,對應(yīng)視頻中的哪一個(gè)元素寫清楚,然后就可以直接生成了。
![]()
我同樣是做了一個(gè)原視頻和生成視頻的對比效果,
雖然不是百分百完全復(fù)刻,但是這個(gè)效果至少已經(jīng)能夠做到七八成。而且,整個(gè)鏡頭中比較明顯、比較突出的運(yùn)鏡也已經(jīng)做到了。就這個(gè)效果放在之前,我是會有質(zhì)疑到底能不能通過提示詞做到這種運(yùn)鏡效果的。
還有一個(gè)很好玩的是,我們其實(shí)可以直接用 Seedream 5.0 Lite圖片模型去做一個(gè)四格漫畫,提示語這里我有一個(gè)模板,大家可以根據(jù)這個(gè)劇情去修改,這個(gè)5.0圖片模型的文字效果稍微有點(diǎn)弱,但是他們會在年后對這個(gè)版本進(jìn)行一個(gè)更新。
請生成一張豎版四格搞笑漫畫,四格從上到下排列,畫風(fēng)為簡潔國產(chǎn)條漫風(fēng),大頭小身、圓眼睛、表情夸張但線條干凈,背景簡單,顏色清爽,文字為清晰中文氣泡,像印刷漫畫一樣可讀。
角色設(shè)定
同一位男主角,普通打工人,黑短發(fā),灰色衛(wèi)衣或灰色T恤,背單肩包
同一位上司,深色西裝或襯衫,表情嚴(yán)肅
四格分鏡與臺詞
第一格,辦公室門口,男主探頭進(jìn)來,滿頭汗,上司站在門邊盯著他
男主氣泡:不好意思我遲到了,路上堵車
上司氣泡:你家到公司三分鐘路
第二格,鏡頭更近,上司皺眉,男主認(rèn)真解釋
男主氣泡:電梯壞了,我走樓梯上來的
上司氣泡:你在一樓
第三格,男主表情更緊張,突然靈機(jī)一動(dòng),抬手比劃
男主氣泡:我在路上還見義勇為了
上司氣泡:你救了誰
第四格,反轉(zhuǎn),場景切到公司樓下花園,男生和另一個(gè)老頭聊天,那個(gè)老頭說:“你好,我叫義勇為”
畫面要求
四格邊框清晰,氣泡不要遮臉,字要清晰不糊,上司表情要有那種無語凝噎的停頓感,整體節(jié)奏輕快。
然后我們就可以得到這樣的一張四格漫畫圖。
![]()
把這張圖片放到 Seedance 2.0 中,再給他一個(gè)你想要展示的動(dòng)畫視頻類型,讓他學(xué)習(xí)這段動(dòng)畫的風(fēng)格,再給他這段提示詞,
![]()
他就可以直接幫你復(fù)刻,把四格漫畫做成一段連貫的小動(dòng)畫。我宣布AI漫劇這塊我承包了!
或者我可以讓他直接給我復(fù)刻抖音上很火的 @陶阿狗 的特效視頻,我直接用它做了一個(gè)小貓版本的。
![]()
實(shí)話實(shí)說,如果是讓我自己手摳的話,我是做不出來的,但是現(xiàn)在Seedance 2.0做到了。
還有一個(gè)很牛的就是 Seedance 2.0 還可以做出文字或者logo的釋出動(dòng)畫,我還直接用提示詞讓他給我做了一個(gè)我自己的 logo 文字視頻動(dòng)畫。這要是放在以前,絕對是要會AE的人才能做出這種效果。。。
![]()
之前即使我用 AI 去做這種類型的文字動(dòng)畫,給到的版本其實(shí)還是稍微有些粗糙的。但是現(xiàn)在Seedance 2.0給到的版本,幾乎和AE渲染的沒差別了。
更厲害的點(diǎn)是,Seedance 2.0可以直接根據(jù)我們提供圖片中的文字去生成一段視頻。
我測試了很多遍,提供的文字內(nèi)容我們要判斷一下能不能在15秒內(nèi)呈現(xiàn)出來,塞的內(nèi)容不要太多。
這里我給 Seedance 2.0 提供了三張十日終焉開頭的小說截圖,然后它就給我生成了對應(yīng)的劇情。
![]()
![]()
![]()
根據(jù)圖中的文字內(nèi)容做出相應(yīng)的畫面
你們可以看到,它對應(yīng)這些圖中的文字,呈現(xiàn)了一整段的內(nèi)容(雖然時(shí)鐘的時(shí)間錯(cuò)位了),我覺得看過這本小說的人就能發(fā)現(xiàn),這個(gè)味道是特別對的。尤其文字中會有很多對于環(huán)境氛圍的描述詞,包括人數(shù)、整體的氛圍感,它都拿捏得很到位,而且還能自動(dòng)生成文字不崩壞的字幕。
這里有一個(gè)小 tips,
如果大家在使用 Seedance 2.0 的時(shí)候,會發(fā)現(xiàn)它在 80% 以上的情況下,都會自動(dòng)給視頻加上 BGM 和字幕。如果大家不需要音樂和字幕,可以直接在提示詞中告訴它“不要 BGM”,“不要字幕”就可以了。
甚至不只是這種純文字圖片,如果我做好了一個(gè)腳本,我甚至可以把這種表格形式的腳本圖片發(fā)給 Seedance 2.0,讓它直接根據(jù)腳本中的分鏡去做一個(gè)完整的視頻。
![]()
整個(gè)視頻呈現(xiàn)出來的效果讓我非常震驚,它真的能夠識別每一個(gè)鏡頭對應(yīng)的畫面景別,人物對白等細(xì)節(jié),然后直接輸出一個(gè)成片給我。
![]()
說實(shí)話,這個(gè)真的讓我有點(diǎn)驚到了。如果你是一個(gè)做廣告的公司,甚至可以不需要預(yù)拍了,去給甲方提案的時(shí)候可以做個(gè)成片,讓他們看預(yù)覽效果。
如果你提供了一個(gè)完整的產(chǎn)品圖片,這甚至能作為一個(gè)幾乎可以完整使用的小片。目前唯一需要提升的就是 Seedance 2.0 的清晰度。如果清晰度能再進(jìn)一步,我覺得甚至可以直接拿去用了。
最后就是藏師傅發(fā)現(xiàn)的,可以直接上傳一些我們平時(shí)旅行時(shí)拍的照片,讓 Seedance 2.0給我們做出一段Vlog。
![]()
我年底去馬來西亞拍的照有救了,
它沒有改動(dòng)原圖,而且還會卡點(diǎn),加一些小特效。我沒有告訴它我去游玩的地方是哪里,它竟然能夠識別出來,說明它是有一定的世界知識的。
平時(shí)分享生活肯定夠用了,甚至彌補(bǔ)了一些朋友在出去玩回來后,想做動(dòng)態(tài)視頻展現(xiàn)卻覺得花時(shí)間、麻煩、有難度的痛點(diǎn)。
沒想到這一圈盤下來,排隊(duì)就排到晚上十點(diǎn)了,但隔壁老外比我更慘,排都排不上,
![]()
這兩天還有人發(fā)現(xiàn)有的時(shí)候不能傳真人素材,
我去驗(yàn)證了,目前在web端確實(shí)提醒了暫不支持真人人臉,但在app端,完成真人校驗(yàn)后,你依然可以讓自己出演AI視頻。
這是一個(gè)必然的過程,
一方面,像Seedance 2.0這樣強(qiáng)大的模型,它在技術(shù)上追求生成內(nèi)容的極致真實(shí)。
因?yàn)樗溃鼜?qiáng)的復(fù)刻能力,意味著更強(qiáng)的藝術(shù)表現(xiàn)力,能為我們創(chuàng)作者帶來更大的創(chuàng)作自由。
但另一方面,平臺也在積極地探索,如何為這種強(qiáng)大的能力,建立起必要的護(hù)欄。在鼓勵(lì)創(chuàng)作和保護(hù)個(gè)人信息安全之間,尋找一個(gè)微妙的平衡。
當(dāng)AI生成的內(nèi)容,在像素層面,在物理規(guī)律層面,甚至在情感表達(dá)層面,都達(dá)到了與真實(shí)世界難以分辨的程度時(shí),我們該如何與之共存?
今天的Seedance 2.0,
其實(shí)已經(jīng)給了我們一個(gè)答案的雛形。
平臺和我們創(chuàng)作者要做的,
就是共同去建立一套成熟理性的規(guī)則。
我們追求AI的真,
是為了讓我們的想象力,以最逼真的方式呈現(xiàn)
同時(shí),我們也需要一個(gè)清晰的邊界,
來守護(hù)真實(shí)世界里,
每一個(gè)人的權(quán)利和尊嚴(yán)。
@ 作者 / 阿湯 & 卡爾
最后,感謝你看到這里如果喜歡這篇文章,不妨順手給我們點(diǎn)贊|在看|轉(zhuǎn)發(fā)|評論
如果想要第一時(shí)間收到推送,不妨給我個(gè)星標(biāo)
如果你有更有趣的玩法,歡迎在評論區(qū)和我聊聊
更多的內(nèi)容正在不斷填坑中……
![]()
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.