來源:新智元公眾號
作者:新智元
B站up主大谷最近又整了一個新活兒:用AI「畫」了一首音樂MV。
瑰麗玄妙,宛如夢境
據大谷介紹,這個視頻自己耗時10天才完工。
這期間,大谷全程負責「監工」,盯着AI幹活,並提供給AI需要的攝像機鏡頭位移坐標,補充一點場景文字信息。
到後期再填上字幕和微調剪輯,就完成了這個作品。
而他做這個視頻的動機很簡單,
想要研究一下AI的繪畫潛力怎麼樣。
那麼這個AI作畫的能力究竟如何?我們來個「慢鏡頭」欣賞一下…
「轉身那一刻,世界崩落」這句歌詞一出,
開場畫面中,粉色的童話世界瞬間變成了萬丈深淵的魔域世界,讓人有一種很大的視覺反差。
再來看,AI根據歌詞「天空如同被雷鳴閃電劃破、玫瑰盛開」填畫的表現力也很不錯。
其中像「閃電」和「玫瑰」這樣的關鍵信息都在畫面中生成了。
但是,當你仔細盯着這個動畫不要眨眼睛時,是不是真有種自己吃了雲南毒蘑菇的感覺。
天旋地轉,簡直太魔幻了…
Boom,Boom,Boom,Boom歌詞一出,AI作畫的風格就很詭異了…
很明顯歌詞中都在說的是,心跳Boom。
而AI卻把炸彈、煙花、氣球,白色框框雜糅到一個畫面中。
這畫風,這調調和整首歌的意境不太相融了。
可以說,AI的智商在理解句子上沒問題,而理解整首歌詞內涵還是不太夠(doge)。
到了最後收尾,AI從前面很有意境的風格轉化成了賽博朋克風。
星際飛船、行星、宇宙…
就比如下面這個場景很類似「黑客帝國」中尼奧從母體誕生周圍環境的一幕。
可以看到,AI根據輸入的文字歌詞和場景描述生成了每一幀畫面中的世界。
每一幅畫面亦真亦幻,似夢非夢。
可是,你知道製作這個視頻背後技術嗎?
大谷表示,「使用了開源AI繪畫項目Disco Diffusion」。
技術介紹:AI作畫「卷」出新高度
在介紹這個工具之前,先來看兩張圖片。
看完這兩張圖片,你可能會覺得,這是哪個大牛插畫師的作品。估摸着,這麼精良的作品,放到市場上賣個幾千不是啥大問題。
如果真是大牛畫的,那還真沒什麼亮點了。雖然很好看,但也不是不能完成的。
可如果,這兩幅畫,還有一大堆別的一樣好看的畫,都出自AI之手呢?
你會不會覺得不可思議?
真相是:這兩幅畫的作者都是Liliia Sitailo。準確來講,Sitailo只負責輸入指令,作畫部分完全交由AI完成。
如果你讓我說,這麼完美的構圖、清晰的思路,還有身臨其境的氛圍、抓人眼球的色彩,都是AI完成的,我還真不一定信。
事實證明,這款谷歌開發的名為Disco Diffusion的AI作畫工具非常之成功。目前,這個工具已經更新到了第五代,V5版本。
這是一款由谷歌Colab平台開發的,利用人工智能深度學習進行數字藝術創作的工具,基於MIT許可協議,目前已開源。
用戶可以在谷歌Drive直接運行。
有了這個工具,不需要用戶懂什麼構圖知識,也不需要有任何藝術細胞,只要想點子就可以了。
另外,大家熟知的DALL-E也同樣在4月迎來了更新。
Open AI對畫圖界的扛把子DALL-E進行了2.0版的全面升級。讓自然語言生成圖像達到了全新的高度。
比如下面這幅很有穿越感的畫。
還有之前佔據AI畫畫老大哥地位的Imagen,做了一副「有點怪,我再看看」的畫。
谷歌除了上面提到的Disco Diffusion,最近也有一款名叫Parti的畫畫AI問世了。
Parti,全名叫「Pathways Autoregressive Text-to-Image」,是谷歌大腦老大Jeff Dean提出的多任務AI大模型藍圖Pathway的一部分。
我們來看看Parti的作品:
看完后,是不是頓時感覺,會畫畫的AI都這麼卷了…
大谷是誰?
提到大谷,你一定會立馬想到「AI復活」系的專業戶。
大谷1991年生於北京,獲得了紐約視覺藝術學院電腦藝術碩士學位。
作為一個藝術家,音樂家,程序員和獨立的遊戲設計師,生產力真是爆炸。
此前,我們已經看到過很多由他創作的一些作品。
最出名的就是用AI修復100年前老北京影像。發布后,這段修復Vlog爆火,引來許多網友的關注。
另外,像他用AI修復讓李大釗、陳延年等老先輩們露出笑容也得到網友一致好評。
還有AI還原宋明清三朝皇帝、泰戈爾、梅蘭芳,百年前上海時裝秀….
所以說稱其為「AI復活專業戶」也不為過。
不過,這次大谷卻為我們帶來了不一樣的創作。
網友:AI吃毒蘑菇了
對於大谷新作,網友有好多話要說。
一位網友肯定了AI作畫能力,
然而有人反駁道,有審美疲勞的,而且很多隨機離散的結果「藝術」其實是無意義的,因為人根本看不懂這個作品。
有小夥伴看完視頻感覺像是吃了雲南蘑菇中毒出現幻覺一樣,還將其稱為「雲南AI」
還有網友給這個畫音樂MV的AI一些建議:
看着害怕,像逃離不了的夢境
參考資料:
https://www.bilibili.com/video/BV18v4y1M74U?spm_id_from=333.999.0.0
http://dgspitzer.my-style.in/gameportfolio/?page_id=2&i=1
https://www.bilibili.com/read/cv16525687/
https://36kr.com/p/1719274187848967
https://cloud.tencent.com/developer/article/2007432
本文鏈接:https://www.8btc.com/article/6760890
轉載請註明文章出處