漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

編輯:LRS

來源:新智元

導讀:不會畫畫也能當藝術家!用心講故事,讓AI做你的畫手!

去年11月首播的《英雄聯盟:雙城之戰》讓各位老召喚師直呼爺青回,主題曲《孤勇者》也成了小學生的新暗號。

漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

《雙城之戰》由中、美、法三國開發製作,內容包含7000多個鏡頭和上萬個手繪原畫,但製作耗費了六年時間,小學生都等成了大學生。

漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

隨着DALL-E 2等圖像生成神器的上線,設計師或許不必再從頭開始繪製,只需要在草稿上進行修改即可。

更重要的是,要是你也想通過漫畫講述「自己的故事」,即便完全不懂繪畫,你也能圓夢!

最近在Midjourney官方的Discord服務器上,網友KrisKashtanova發布了幾頁用Midjourney(類似於DALL-E 2的程序)製作的漫畫小說Zarya of the Dawn,瞬間引發了激烈的討論,很快就登上了AI項目的熱榜。

漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

雲盤地址:https://drive.google.com/drive/folders/1bm8xHxYKlrYDd8BGa5tbu9esg8CLwN5Y

引起熱議的原因並非是內容精彩(畢竟只有17頁),而是作者提供了一種全新的方式來利用基於文本的圖像生成模型,讓每個人都有用圖文講述自己故事的機會!Zarya of the Dawn也是首部AI生成的圖文小說(graphic novel)。

而且作者還解決了諸多生成上的技術問題,例如主人公的一致性問題等。

漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

作者Kristina Kashtanova出生和成長於俄羅斯北高加索地區,在紐約居住。她擁有軟件工程背景,在計算機圖形領域擁有十年工作經驗。離開軟件行業后,成為了一名記者和專業攝影師。目前從事用戶體驗和運動設計相關的工作。

漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

用AI講圖文故事

Kristina在學習使用Cinema4D 開發3D時萌生了一個想法,即通過圖像來講述故事,內容是關於一個人訪問不同的世界來理解她的情緒和感受。

漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

從2021年開始,Kristina陸陸續續做了一些內容,但這件事非常耗時,並且對於新手來說也很難。由於空閑時間非常有限,所以進展很慢。

直到AI加入戰場,Kristina只需要1個小時就能完成一整頁的圖文小說,再使用Comic Life 3為圖片添加文本和分格即可,在工作日的下班時間也能輕鬆完成,整個過程「輕鬆加愉快」。

Kristina選擇了一個關於始於紐約市未來的不同世界的故事,因為作者住在紐約,她覺得用科幻來想象身邊的地點很有趣。

漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

在Zarya of the Dawn發布的10天里,大約有1000個人受到啟發,開始利用Midjouney創建自己的故事。

不過一個關鍵問題是,基於文本來生成圖像的人物形象在不同的生成中可能會有所變化,要是主人公的形象換來換去的,那讀者難免理不清頭緒。

剛開始Kristina選擇用名人的名字作為提示文本,這也是最簡單的方法,作者選用的公眾人物為美國女演員Zendaya,但這種行為實際上已經違反了AI道德準則,在未經授權的情況下生成人臉,所以Kristina只能放棄這個方案。

漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

第二種方法則是使用MetaHuman自己捏臉,並把該形象傳入到Midjourney

漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

小說中的第一個自設計主角為Kristina的祖母Raya,作者也是用這種方式表達懷念。

漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

Kristina將MetaHuman的截圖餵給MidJourney,並生成不同表情的彩色鉛筆草圖。MJ在處理表情方面做的不是特別好,但MetaHuman可以生成一個有表情的角色作為源圖像。

目前Midjourney仍然有一些限制,比如不能很好地處理畫面中的多人場景或指定人物的動作,這對小說創作來說是很必要的。雖然有一些方法可以繞過該機制,但並不能保證一定成功,而且會花費很多時間。

這也是AI繪製漫畫下一步要解決的主要問題。

Midjouney還有一個歷史功能,可以根據想象和使用的詞,然後以某種相同方式產生圖像,這也是為什麼漫畫中的環境和風格是一致的。

當然,Kristina肯定不是唯一想出這個主意的人,Elvis Deane也是Midjourney用戶,正在創作他的第一部圖文小說。

漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

Elvis 有20多年的漫畫創作經驗,但還是被AI創作漫畫的能力給驚艷到了,直接開通了MidJourney的會員繼續生成圖像。

在解決主角一致性上,Elvis同樣使用知名演員來友情客串。

漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

整個過程十分順利,僅花費幾個小時生成了幾百張圖像后,就獲得了一個完整的故事,Elvis自述:這是我一生中最令人驚奇的創作時光之一。用AI創作真是太舒服了。

在接下來的兩周時間裡,Elvis慢慢開始生成更多圖像並進行測試,他認為整個創作過程更像是「即興表演」,AI模型會對你提的任何要求返回一個結果,然後你再根據這個結果進行反饋,不斷修正,直到圖像達到滿意的效果,只不過AI並不能完全理解人類的語言。

比如你說,「我希望這個角色出現在書架前的書店裡」,生成的圖像有時候主角的頭會在書架上,有時她的頭會漂浮在某個地方,有時兩個頭會出現在同一個鏡頭裡,儘管提示文本已經描述得很清晰了,但生成結果完全是不可預測的,大概率也不是你想要的。

漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

更困難的是指定角色的行為,比如說某個角色被殺了,或者主角從反派手中逃走,MidJourney幾乎不可能返回結果;再比如輸入「跑步」命令時,角色的一條腿可能會離開地面,但更多的情況是站在原地;最最困難的是「躲避」動作,不論作者如何嘗試,總是得不到想要的結果。

漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

總的來說,Elvis對短時間內創作的漫畫小說還算滿意,在goats發布到reddit上后,網友的反應也都是驚嘆。不過也有一位網友表達了悲觀情緒:作為剛入行的漫畫書作家,我想知道自己未來是不是要失業了?

漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

在AI圖像生成器的討論中,另一個重要問題就是版權。根據 Midjourney 的服務協議,輸入prompt的人享有生成圖像的版權,但對於prompt版權的歸屬卻沒有定論。

畢竟掌握了prompt的人,也就掌握了圖像,尤其是現在已經有交易軟件開始販賣文本prompt。

再比如,Elvis使用知名演員作為主角是否會影響到版權?

漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

雖然目前主流藝術界對於使用AI工具生成漫畫的態度都是「你做得不錯,但你不是藝術家」。

毋庸置疑,圖像生成很好用,但也要警惕:藝術家的核心是思想和創造力,否則工具反而會限制作品的表現力。

新賽道已開

8月16日,亞馬遜上架了一本特別的童書,售價8.99美元,特別之處在於所有內容都是由AI生成的。

漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

免費電子書:https://drive.google.com/file/d/1ho-pAC_U_TVPLYn_FoPFEJVJHXhsubEe/view

書的圖片通過DALL-E製作,內容為經典的敲門笑話,幫助兒童學習各種蔬菜的單詞。

敲門笑話的笑點通常為雙關語,由兩人對答組成,例如

甲:Knock, knock!(敲門,咚咚咚!)

乙:Who's there?(何人?)

甲:Doctor.(博士)

乙:Doctor Who?(哪個博士?/ 何博士?)

甲:How did you know?!(你怎麼知道?!)

漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

該書目前已經收穫了三個五星好評(不知道是否為親戚朋友),都表示「小孩子很愛這些笑話」,內容很有意思。

漫畫拖更將成歷史?首部AI圖文小說問世:一小時畫一頁

不過這本書的篇幅不長,只包含六個變化的場景,作者表示生成不斷變化的場景、對內容進行替換、DALL-E的語義理解上仍然存在缺陷。

參考資料:

The first AI generated graphic novels are here

本文鏈接:https://www.8btc.com/article/6774288

轉載請註明文章出處

(0)
上一篇 2022-08-30 17:07
下一篇 2022-08-30 18:06

相关推荐