進行了 成語詞典配圖 以後,按照原來的想法,嘗試做連環畫和視頻。
用ChatGPT生成劇本非常簡單,效果也很不錯,基本上都是一次性合格,例如:
為了制作一段基于“刻舟求劍”成語的短視頻,我們将分成以下畫面,并為每個畫面編寫提示詞以便後續生成靜态圖片:
場景一:楚人登船
- 詳細描述:春日的早晨,陽光明媚,一位穿著灰色長衫的楚人走向停靠在平靜江邊的木質小船。船夫,一位穿著藍色服裝、戴著鬥笠的中年男子,站在船頭迎接。背景是清澈的江水和遠處的群山。
- AI生成圖片提示詞:春日早晨的江邊景色,一位穿灰色長衫的中國古代楚人走向一艘木質小船,一位穿藍色衣服戴鬥笠的老船夫在迎接,背景有平靜的江水和遠處的群山。
- 靜態圖片停留時間:5秒
場景二:劍落水中
- 詳細描述:在移動的小船上,楚人突然驚慌失措,因為他的佩劍從手中滑落,落入江中。水面出現波紋,劍逐漸沉入水底。船夫轉身關注,表情露出同情。
- AI生成圖片提示詞:在平靜的江面上移動的木質小船中,一位驚慌失措的楚人目睹他的佩劍落入清澈的水中,水面波紋擴散,船夫轉身以同情的眼光望向他。
- 靜態圖片停留時間:7秒
場景三:刻舟記號
- 詳細描述:楚人拿出小刀,在小船的木質船舷上刻下一個記號。船夫旁邊站立,一臉疑惑地觀看。周圍的景色依然美麗,但楚人的臉上布滿焦慮。
- AI生成圖片提示詞:一位焦急的楚人在移動的木質小船的船舷上用小刀刻下一個記號,旁邊的老船夫一臉疑惑地看著,周圍是美麗的江景。
- 靜態圖片停留時間:6秒
場景四:尋找佩劍
- 詳細描述:楚人焦急地在江岸上尋找他的劍,他位於他記號的直線位置,但手中空無一物。周圍聚集了一些好奇的村民,他們交頭接耳,表情從困惑到驚訝。
- AI生成圖片提示詞:一位焦急的楚人在江邊尋找他的劍,周圍聚集了好奇的村民,他們表情從困惑到驚訝,背景是平靜的江水和遠處的山脈。
- 靜態圖片停留時間:8秒
場景五:教訓
- 詳細描述:日落時分,楚人坐在岸邊,頭低沉思,表情沮喪。幾位村民圍在他周圍,一位年長的村民伸出手在解釋某事。背景是黃昏的天空和寧靜的江面。
- AI生成圖片提示詞:在日落時分,一位沮喪的楚人坐在江邊沉思,周圍幾位村民圍觀,其中一位年長的村民伸手解釋,背景是黃昏的天空和寧靜的江面。
- 靜態圖片停留時間:10秒
但如果直接拿這些提示詞去繪圖,會發現每幅圖中的角色都不統一,這是最大的問題,因此我去專門創建了一個GPTs,對人物、物品、動作、背景等都做了很詳細的文字描述并不斷更新補充,這樣再不斷修改繪圖提示詞,繪制了幾十幅圖,最後才勉強挑選出來6幅,做成下面的視頻:
刻舟求劍(配音版)
成語故事:刻舟求劍,含字幕和配音。
我用AI做的第一個視頻😄
技術和工具:
- ChatGPT生成劇本、繪圖提示詞和字幕。
- GPT4+Dall-E 3生成靜態圖片。
- MacOS的say命令從字幕生成語音。
- MacOS的iMovie軟件編輯視頻。(第一次用)
- 上傳到youtube頻道。
差不多用了兩個半天的時間,測試一下這種AI生成靜態圖片,然後合成視頻的辦法,最大的難點在於人物、物品、背景等元素繪畫的統一性。當成一次試水吧,了解過程、難點、效果...
我給這個視頻打60分,勉強及格,但質量遠達不到自己期望的。如果要讓AI來更好生成視頻,還要等到Sora、Runway、Pika等文生視頻、圖生視頻的工具更成熟。
评论