B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

來源:新智元公眾號

作者:新智元

B站up主大谷最近又整了一個新活兒:用AI「畫」了一首音樂MV。

瑰麗玄妙,宛如夢境

據大谷介紹,這個視頻自己耗時10天才完工。

這期間,大谷全程負責「監工」,盯着AI幹活,並提供給AI需要的攝像機鏡頭位移坐標,補充一點場景文字信息。

到後期再填上字幕和微調剪輯,就完成了這個作品。

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

而他做這個視頻的動機很簡單,

想要研究一下AI的繪畫潛力怎麼樣。

那麼這個AI作畫的能力究竟如何?我們來個「慢鏡頭」欣賞一下…

「轉身那一刻,世界崩落」這句歌詞一出,

開場畫面中,粉色的童話世界瞬間變成了萬丈深淵的魔域世界,讓人有一種很大的視覺反差。

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

‍再來看,AI根據歌詞「天空如同被雷鳴閃電劃破、玫瑰盛開」填畫的表現力也很不錯。

其中像「閃電」和「玫瑰」這樣的關鍵信息都在畫面中生成了。

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

但是,當你仔細盯着這個動畫不要眨眼睛時,是不是真有種自己吃了雲南毒蘑菇的感覺。

天旋地轉,簡直太魔幻了…

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

‍Boom,Boom,Boom,Boom歌詞一出,AI作畫的風格就很詭異了…

很明顯歌詞中都在說的是,心跳Boom。

而AI卻把炸彈、煙花、氣球,白色框框雜糅到一個畫面中。

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

這畫風,這調調和整首歌的意境不太相融了。

可以說,AI的智商在理解句子上沒問題,而理解整首歌詞內涵還是不太夠(doge)。

到了最後收尾,AI從前面很有意境的風格轉化成了賽博朋克風。

星際飛船、行星、宇宙…

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

就比如下面這個場景很類似「黑客帝國」中尼奧從母體誕生周圍環境的一幕。

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

可以看到,AI根據輸入的文字歌詞和場景描述生成了每一幀畫面中的世界。

每一幅畫面亦真亦幻,似夢非夢。

可是,你知道製作這個視頻背後技術嗎?

大谷表示,「使用了開源AI繪畫項目Disco Diffusion」。

技術介紹:AI作畫「卷」出新高度

在介紹這個工具之前,先來看兩張圖片。

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境
B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

看完這兩張圖片,你可能會覺得,這是哪個大牛插畫師的作品。估摸着,這麼精良的作品,放到市場上賣個幾千不是啥大問題。

如果真是大牛畫的,那還真沒什麼亮點了。雖然很好看,但也不是不能完成的。

可如果,這兩幅畫,還有一大堆別的一樣好看的畫,都出自AI之手呢?

你會不會覺得不可思議?

真相是:這兩幅畫的作者都是Liliia Sitailo。準確來講,Sitailo只負責輸入指令,作畫部分完全交由AI完成。

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

如果你讓我說,這麼完美的構圖、清晰的思路,還有身臨其境的氛圍、抓人眼球的色彩,都是AI完成的,我還真不一定信。

事實證明,這款谷歌開發的名為Disco Diffusion的AI作畫工具非常之成功。目前,這個工具已經更新到了第五代,V5版本。

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

這是一款由谷歌Colab平台開發的,利用人工智能深度學習進行數字藝術創作的工具,基於MIT許可協議,目前已開源。

用戶可以在谷歌Drive直接運行。

有了這個工具,不需要用戶懂什麼構圖知識,也不需要有任何藝術細胞,只要想點子就可以了。

另外,大家熟知的DALL-E也同樣在4月迎來了更新。

Open AI對畫圖界的扛把子DALL-E進行了2.0版的全面升級。讓自然語言生成圖像達到了全新的高度。

比如下面這幅很有穿越感的畫。

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

還有之前佔據AI畫畫老大哥地位的Imagen,做了一副「有點怪,我再看看」的畫。

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

谷歌除了上面提到的Disco Diffusion,最近也有一款名叫Parti的畫畫AI問世了。

Parti,全名叫「Pathways Autoregressive Text-to-Image」,是谷歌大腦老大Jeff Dean提出的多任務AI大模型藍圖Pathway的一部分。

我們來看看Parti的作品:

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

看完后,是不是頓時感覺,會畫畫的AI都這麼卷了…

大谷是誰?

提到大谷,你一定會立馬想到「AI復活」系的專業戶。

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

大谷1991年生於北京,獲得了紐約視覺藝術學院電腦藝術碩士學位。

作為一個藝術家,音樂家,程序員和獨立的遊戲設計師,生產力真是爆炸。

此前,我們已經看到過很多由他創作的一些作品。

最出名的就是用AI修復100年前老北京影像。發布后,這段修復Vlog爆火,引來許多網友的關注。

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

另外,像他用AI修復讓李大釗、陳延年等老先輩們露出笑容也得到網友一致好評。

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

還有AI還原宋明清三朝皇帝、泰戈爾、梅蘭芳,百年前上海時裝秀….

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

所以說稱其為「AI復活專業戶」也不為過。

不過,這次大谷卻為我們帶來了不一樣的創作。

網友:AI吃毒蘑菇了

對於大谷新作,網友有好多話要說。

一位網友肯定了AI作畫能力,

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

然而有人反駁道,有審美疲勞的,而且很多隨機離散的結果「藝術」其實是無意義的,因為人根本看不懂這個作品。

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

有小夥伴看完視頻感覺像是吃了雲南蘑菇中毒出現幻覺一樣,還將其稱為「雲南AI」

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

還有網友給這個畫音樂MV的AI一些建議:

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

看着害怕,像逃離不了的夢境

B站大谷新作:10天用AI畫了一首愛情MV!瑰麗玄妙,宛如夢境

參考資料:

https://www.bilibili.com/video/BV18v4y1M74U?spm_id_from=333.999.0.0

http://dgspitzer.my-style.in/gameportfolio/?page_id=2&i=1

https://www.bilibili.com/read/cv16525687/

https://36kr.com/p/1719274187848967

https://cloud.tencent.com/developer/article/2007432

本文鏈接:https://www.8btc.com/article/6760890

轉載請註明文章出處

(0)
上一篇 2022-06-27 10:16
下一篇 2022-06-27 10:45

相关推荐