【演算法——音像藝術】
大學時,除了音樂之外,我最喜歡的另一件事就是做視覺和網頁設計。畢業之後也就一邊玩團一邊做設計工作,那時候我每個月都會買 IDN 雜誌,記得某一期裡面介紹當時剛問世的 Processing —— 一個專門為了視覺藝術所開發的程式語言,那些碎形圖像讓我第一次見識到程式和數學之美,隨後我開始試著用自己熟悉的工具 Flash 來編寫類似的動態繪圖程式。
我第一次嘗試的作品其實 Echo 的樂迷都看過,就是在《少年的最後旅行》精裝封面上的那些黑色線條,那是一些簡單的正弦曲線和隨機函式所畫出來的,原本生成的是一整幅密密麻麻的線條,最後我只選了局部放在角落。那支程式其實只有幾行,算是新手的入門嘗試,但我自己真的好喜歡。
後來樂團和工作越來越忙碌,荒廢了好一陣子,直到 2006 的「心電回聲」計畫,我嘗試用演出者和聽眾心電圖的資料,來搭配 live 影像製作互動式藝術,我過濾出心臟的搏動訊號,用來驅動程式繪製出圖案和動態,記得我在那次巡迴結束後有好一段時間都窩在房間寫程式。
開始做《巴士底之日》和 iNDIEVOX 之後,就更沒有時間玩這些了,轉眼十年過去,2017 年我做完〈知的所有〉那陣子,在臉書上看到 DigiLog 的一則貼文, 介紹藝術家 王連晟 的作品〈演算風景〉,那不只是「演算法藝術」而已,而是用聲音去驅動的「音像藝術」,我之前做的東西比起來根本是幼稚園程度,當下我心想:「幹,我一定要找這個人合作。」
然後我就丟他訊息約他喝咖啡了。他說大家都叫他「蝦爸」,除了做音像藝術也做動力裝置和玩噪音,當時怎麼一起創作的想法還不夠清楚,但內心知道總有一天要找他玩些什麼。
《42》發表前,我想要基於專輯的科技和政治主題做一套特別的發表會,腦中立刻浮現蝦爸,幾年沒見他已經進入北藝大擔任教職,於是我和以潔前往關渡找他,幾次討論之後,決定不要只是一次發表會而已,而是發展成一套特別的演出。正巧當時正要去 貴人散步音樂節 表演,而且場地就是有巨大屏幕的全美戲院,根本是上天註定要讓我們玩這次的音像藝術實驗。
演出形式是:音樂部分由我和吉他手 建文林 加上一台鼓機,共四軌音訊送到蝦爸的電腦,蝦爸則寫了多支程式來聽取音訊,並即時生成動態影像,每次表演的聲音差異都會讓生成的影像有所不同,因此不論「影」和「音」都是真正的 live 演出。
那天的結果我們都很滿意,於是開始思考把這套演出發展成一個系列的巡迴,經過數個月的準備,從下週開始我們會開始在各個校園演出,上半場是我和蝦爸的對談,分享音像藝術和這次合作的概念,下半場就是 live 演出,希望讓更多對這樣藝術形式有興趣的同學能夠有所認識並實際體驗,當然校外人士也都歡迎。
「演算 42」音像藝術巡迴
4/14(三) 19:00 北藝大 國際會議廳
4/20(二) 19:00 政大傳院劇場 (報名:https://bit.ly/3mt4kaZ )
5/04(二) 19:00 台大怡仁堂(報名:https://bit.ly/2Qbg4TT)
繪王驅動程式 在 Facebook 的最佳貼文
今早發的鬧元宵小短片,背後的AI技術。
下方文章來自「量子位」微信公眾號,經授權轉載來揭秘:
▎當網路圈大佬們集體唱歌,會擦出怎樣的火花?
現在,火爆一些短視頻網站的AI特效,一鍵就可以實現夢幻聯動。瞧!馬雲、馬化騰、馬斯克等大佬們,正在集體演唱神曲《螞蟻呀嘿》。不光演唱,表情也是十分的賣力(傲嬌的小眼神很是傳神啊)。完全看不出是被迫的樣子呢(手動狗頭)。
效果之魔性,引得網友直呼:短短的幾秒,要用一生去治癒…..
▎大家一起「蚂蚁呀嘿」神曲!
這款AI特效,只需要一張照片,就可以火速讓anyone「螞蟻呀嘿」。正因為這麼便捷,果不其然,馬上成為了抖音網友們的“新寵”。各路名人開始搞起!首先登場的是四大天王:劉德華、張學友、郭富城和黎明!或許天王們太久沒有同框過了,網友們用這種方式將他們「召集」在一起,也是別有一番風味。不知道是不是因為特效太過逼真、還是脖子有點短(不是),竟然還有人以為是真的。
OK,各種效果、各種玩法已經展示完畢。
▎如何制作专属的“蚂蚁呀嘿”?
第一步,蘋果手機下載APP:Avatarify
第二步,打開這款Avatarify,選擇一張照片即可進入選擇特效頁面(臉正一點效果更佳)。然後向下拉,找到布拉德·皮特的特效即可。 是不是很簡單?不過有點遺憾的是,暫時只有蘋果手機才OK(安卓用戶淚目)
一個人演唱「螞蟻呀嘿」的效果就已經實現了。如果想要多人演唱、九宮格那樣式兒的,那就需要剪映來加持了,這裡就不詳細展開了。當然,這款軟體除了「螞蟻呀嘿」之外,還有很多範本可選。
例如,李開復博士便在元宵節一早友情上演了一首「Only You」,傳遍朋友圈。
隨著這波潮流,Avatarify及其他相關軟體,已經超過微信、拼多多、抖音的下載量,登頂蘋果App Store免費榜前三!什么原理?
▎AI,是如何搞定各位大佬來唱歌的呢?
讓一張照片動起來,人臉跟著音樂一起擠眉弄眼,需要一個叫做一階運動模型 (First Order Motion Model)來搞定。技術原理借鑒了去年義大利特倫托大學的一項研究,入選了NIPS 2019。
模型框架主要由2部分構成,運動估計模組和圖像生成模組。運動估計模組的目的,是預測一個密集的運動場。研究人員假設存在一個抽象的參考框架,並且獨立估計兩個變換,分別是「從參考到源」和「從參考到驅動」,這樣就能夠獨立處理源幀和驅動幀。
而這兩種變換,通過使用以自監督方式學習的關鍵點來獲得。利用局部仿射變換對每個關鍵點附近的運動進行建模。隨後,密集運動網路結合局部近似得到密集運動場。
這個網路還能輸出遮擋的mask,指示哪些圖像的驅動部分可以通過源圖像的扭曲(warping)來重建,哪些部分應該被繪製(根據上下文推斷)。
在生成模組按照驅動視頻中,提供的源物件移動的圖像進行渲染。
此處,研究人員還使用一個生成器網路,根據密集的運動對源圖像進行扭曲,並對源圖像中被遮擋的圖像部分進行著色。
訓練階段,研究人員採用了大量的視頻序列集合來訓練模型,這當中包含了相同類別的物件。隨後在測試階段,研究人員將模型應用於由源圖像和驅動視頻的每一幀組成的對,並執行源物件的圖像動畫。
最終在品質評估中,這一方法在所有基準上都明顯優於當前先進技術。此前类似研究也很火爆,這種AI特效能夠如此火爆,甚至“破圈”,讓大家玩得不亦樂乎,最主要的原因是方便——不需要任何程式設計知識,便可完成。
但在此之前,其實這種AI特效在圈裡也是有火過,但都需要一定的電腦能力才可以實現。比如,一張名人照片和一個你說話的視頻,就可以讓夢露學你說話。還有,印度程式師開發即時動畫特效。你一動,蒙娜麗莎跟著你一起動~
那麼現在,你被「螞蟻呀嘿」一曲洗腦了嗎?自己試試吧!
繪王驅動程式 在 Reiko的畫畫本 Facebook 的最佳解答
繪王 Mamvas 13在
2020/12/31 到貨,邊開箱邊看五月天的跨年電視直播。直到現在1月底才有時間寫開箱跟使用心得文😃(中間都在沉迷五月天演唱會XD )
我在PChome 網購,覺得不需要繪圖螢幕架子所以沒買"全配",價差大約在2000元,贈品我因為不需要設計雜誌所以選筆芯,原廠筆架就有之外另附贈大概5~6支還不錯,網站還有贈送電腦包,但我不需要,有興趣的人可以私訊或留言便宜賣。
繪圖螢幕(以下簡稱板子)打開覺得很輕,厚度大約不到1公分,筆電需要上繪王官網下載驅動程式,接線有點複雜,3頭龍的線2個插筆電,一個要插電源(充滿電就不必插電)
繪圖的效果不錯,感壓完美,原廠就有附紙膜,畫起來質感不錯,筆劃過時有一點刷刷聲個人覺得很喜歡。
說到紙膜,我在撕保護層時,沒看清楚英文標示,結果把2層都撕起來,幸好我撕得很輕柔,分開後把紙膜貼回去,但悲劇在怎麼貼都有小氣泡了😅😫
因為這一款重量和厚度不高,我用書店賣的看書鐵架,可以調高度,而且大概只要200元,是原廠架的十分之一價格。
原本在平板和手機習慣使用愛筆思畫,電腦上改用Medipaint 之後需要一段時間適應軟體,還有板子無法用手指控制,換橡皮擦,放大縮小,筆刷大小,全部要用按鍵和筆來控制,不能用手勢點兩下上一步,這點需要一些時間習慣,再查查看怎麼連接手機畫畫,跟各位分享。
整體來說很滿意,性能和價格比算相當不錯,推薦給各位參考。
#繪圖螢幕
#開箱文
#繪王Mamvas13
附上繪王官網介紹
https://www.huion.com/tw/pen_display/Kamvas/Kamvas_13.html