還記得是誰在里約奧運閉幕式打造出如夢似幻的「東京八分鐘」嗎?MOT TIMES 在7月初專訪了日本科技藝術團隊真鍋大度&石橋素&編舞家 MIKIKO 後,再次深入在西門町 Woolloomooloo 所舉辦的工作坊。這場匯聚業界專業人員、長達四小時的實作 Demo,MOT TIMES 看著艱澀難懂的音樂鋪排、影像特質與燈光效果,與舞蹈動作律動節奏結合,最後進行軟體程式參數設定,我們看得眼花撩亂,卻也收穫豐富!想知道他們運用何種技術或工具嗎?MOT TIMES 幫想要深入現場卻無緣與會的設計迷們紀錄了精華片段,不可錯過的創意現場,一同來瞧瞧!
「 Rhizomatiks Research 是一個沉默的團隊,他們都只盯著電腦,很安靜」,如同編舞家 MIKIKO 在 2018臺北流行音樂國際論壇《 Live/ in the Moment 創意現場 》所說的,真鍋大度與石橋素都是不太說話的典型工程師,然而在7月4日為專業人士所開設的工作坊中,MOT TIMES 卻也見識到三人間極佳的默契。當全世界都驚豔於里約奧運閉幕式「東京8分鐘」的創意與科技藝術,這些創意的背後究竟有著多複雜的溝通過程?而舞台背後又牽涉著何種設計思維與專業技術呢?

以結合程式、聲音設計、互動設計等開發製作多項知名大型專案與娛樂演出等而享譽國際的 Rhizomatiks Research,從真鍋大度的發想規劃、石橋素的硬體實踐到 MIKIKO 的人體表現,一種理性與感性的相互結合,在業界鮮少有這樣的完美組合,因此國際邀約總是不斷。左圖 2016 年里約奧運閉幕式,右圖為 Perfume 的演出片段。(Photo Credit:左圖 Getty Images、右圖Amuse) 

想要創新 你必須要先了解過往

對新技術的追求腳步沒有停歇,真鍋大度與石橋素所率領的團隊總是採用嶄新的技術,例如 3D 列印,全像投影等等。他認為一場成功的演唱會,不只是歌手要負責所有的表演效果,透過電腦系統的運算能力,演唱會應該要呈現更好的虛實整合,讓觀眾有耳目一新的感受。例如他曾在藝人手上安裝了小型發訊器,透過影像捕捉與即時運算,可以讓炫目的色彩跟隨著藝人舞蹈動作在舞台上呈現,創造出更好的舞臺效果。抑或是 2012 年所參與名為「Eclipse Blue」的演出,與 MIKIKO 合作為藝人量身打造,採用全息投影技術,在舞者的影子處做投影,所以觀眾看見的不只是舞者的身體動作,還包括與投影影像互動的合成效果。於是透過相機不斷捕捉舞者的動作,電腦的即時運算,投影就可以形成投像,與舞者互動出一場精彩的表演。
 

真鍋認為成功的演唱會,一定是個跨領域科技整合的成果,當中包括服裝材質、運算能力、投影技術,以及鉅細靡遺的整合集成。他喜歡事前研究調查,將每個案子的經緯徹底分析,因為他相信閱讀歷史對於承先啟後的重要性。而石橋則主要負責硬體,他們很早就導入無人機技術,現在已經成為演唱會中非常普遍使用的一項設備。當無人機進場後則是 MIKIKO 的編舞與無人機的搭配,也因為彼此的合作將舞蹈與數位技術融合,創造出充滿幻想的藝術。(Photo Credit:2018 臺北流行音樂國際論壇)
 
實際操作 試行錯誤

為了增加國內流行音樂產業從業人才與國際實務交流的機會,由文化部指導,臺北市文化局、臺北流行音樂中心主辦,必應創造承辦的 2018 臺北流行音樂國際論壇《 Live/ in the Moment 創意現場》第一場實作工作坊,主辦單位於西門町的 Woolloomooloo 搭建出真實的模擬環境,在 Work Demo 中讓團隊能將真實的工作流程依序展示。

首先,工作坊開始真鍋大度表示會先以編輯軟體 Ableton Live10 把音樂鋪排好,作為整個作品的基底,接下來把影像依序加在音樂裡,下一步則是配合影像特質,將燈光變換效果加入,當初步的工作完成,則是負責編舞的 MIKIKO 進場時刻。MIKIKO 先要求聽16小節的音樂,透過反覆聆聽與討論,一方面把音樂做出區段,再者也可藉此找到舞蹈動作的律動節奏。把一整首音樂分段編號完成後,就可以進入軟體程式進行參數設定,以此發想無人機如何飛行。


由石橋素示範如何編輯無人機飛行的設定、與 AR 串接,藉由 Discrete figures 製作的 AR 模型,先把現場的舞台大小、影像捕捉攝影機、舞者、無人機的位置都安置後,就可以透過 AR 環繞著舞者做出燈光環繞的效果。(Photo Credit:2018 臺北流行音樂國際論壇)

影像捕捉環境是所有效果的基本
 
當無人機進場時,藉由已架設好的影像捕捉攝影機(motion capture),運用軟體設定座標從起點到目的地,就可以從電腦把編輯好的飛行軌跡分送給無人機,當然,石橋素也提到有時在戶外大型演出時,無人機需要做大範圍的飛行,此時則適宜透過 GPS 系統來取代影像捕捉器。
 
透過 Max 7 這套軟體,石橋素示範如何把編曲順序、影像捕捉與無人機的控制程式相連結,並設定無⼈機移動的路徑,其後由 MIKIKO 手捧無人機,配合配置好的音樂進行緩慢的舞蹈動作,讓電腦將 MIKIKO 設定的無人機飛行路徑輸入 Alembic 3D 程式進行編碼轉換後,再把路徑數據輸入無人機飛行程式,第二台無人機就可以隨著音樂節奏,並按照路徑飛行。經由確認後,再使用 Dmxusbpro 軟體進行 LED 燈光設定、與樂曲編排程式連動結合就能大致完成設定。


MIKIKO 邀請了現場 4 位學員一起參與,進行簡單的編舞,由舞台上的 5 位舞者控制 5 台無人機並即興共舞。(Photo Credit:2018 臺北流行音樂國際論壇)
 
現場有趣之處是 MIKIKO 邀請了4位學員一同參與簡單的編舞,在控制好人與人之間的距離,以及機台本身之間的安全控制,不讓兩台無人機撞在一起。當人們退場,石橋讓系統試行運作軌跡的可行性後,5 台無人機即按照舞動路徑一同飛舞。而我們也看見,在充滿邏輯的設定中,學員們展現自我意識操控 5 台無人機的移動軌跡,理性的規範下隨性的舞蹈著,可說是一種人機合一的共舞體現。當然,在面對過去 Perfume 的大型演唱的操作中,為了讓兩者保持良好的互動,無人機與舞者之間必須將設定軌跡調高一公尺;而更多舞者與無人機的互動時,亦可排出水平、金字塔、交叉等隊形,只要搭配音樂特性,透過編寫程式設定,就能表現出不同變化。


日本女子天團 Perfume 曾經在電視採訪中提到,MIKIKO 就像是團員中的第四位成員一樣重要。這次 MIKIKO 在2018 年為 Perfume 創作的「Reframe」,則是把 Perfume 過去15 年的表演作為素材,重新為 Perfume 定型。真鍋大度導入機器學習,找出 15 年來 MIKIKO 最喜歡編排的舞蹈動作,當 15 年的時間一次呈現在眼前,會發現某些動作貫穿了15 年,呈現出不同的趣味。(Photo Credit:2018 臺北流行音樂國際論壇)

在實際操作當中,可以看到團隊對危機處理的步驟,在進行實作時,其中一台無人機失去訊號落地,此時真鍋大度與石橋素也很熟練的找尋問題出在哪裡,依序檢查無人機的電力供給是否充足,影像捕捉器是否曾失去訊號,再盤查路徑編程的設定是否完整、現場環境因素等干擾來重新調整。
 

真鍋提到,Rhizomatiks Research 背後有許多工程師本身是學藝術的,然後才開始學寫程式,抑或是在學校時就是藝術與程式開發一起學習。到底是視覺先行還是技術先行,以無人機打聚光燈為例,研發者都知道目的是讓舞者身上出現不同的光影,這種藝術呈現的手法必須要有美學方向,但是具體會在研發接近完成的時候才能明確,因此前置作業團隊都在進行無人機整合技術的研究。(Photo Credit:2018 臺北流行音樂國際論壇)

在工作坊後,主辦單位亦安排了團隊與學員的對談,平常在日本媒體面前較沈默寡言的真鍋與石橋在現場聊天時,意外地侃侃而談,當中他們多次提到,所採用的設備幾乎是大家自行購買也都垂手可得的,但重點還是先確認好自己創意發想的每一個細節與執行面。同時宛如兩位發言人的 MIKIKO 也表示,比資金比硬體設備這是永遠比不完的,他們可以在市場中獲得認同的關鍵並非單單只是科技,科技只是工具,融合人性的自我意識在其中,才能凸顯出價值。
 
這場 Workshop 的詳細步驟與最終成果,也可前往 taipeiworkdemo 內有詳盡的紀錄。


接下來還有兩場重量級的講者即將來台,包含(左圖)現在正在華山展出、企劃製作「TOKYO ART CITY BY NAKED in TAIPEI(光影東京!360°夢幻視覺系特展)」的日本創意公司 NAKED Inc. 創辦人兼 CEO 村松亮太郎即將在8月24日來台演講。而9月4日則是(右圖)為 瑪丹娜打造音樂錄影帶、演唱會視覺到演唱會電影的英國知名導演、影像剪輯師 Danny Tull。(Photo Credit:2018 臺北流行音樂國際論壇)

在 7 月結束了第一場的國際論壇,接下來 8 月與 9 月都還有兩場重量級人物即將訪台參與論壇,有英國知名導演 Danny Tull,他與 Madonna、U2、Taylor Swift、Jamiroquai、Justin Timberlake 等共同創作出許多無與倫比的作品;還有現在正在華山展出、企劃製作「TOKYO ART CITY BY NAKED in TAIPEI(光影東京!360°夢幻視覺系特展)」的日本創意公司 NAKED Inc. 創辦人兼 CEO 村松亮太郎。這是音樂現場工作者絕不容錯過的國際論壇,將在全台最美的演講廳帶來更多的創意交流,而 MOT TIMES 亦將進行深入訪談,想知道的設計迷們,千萬不可錯過。
 

編輯/廖淑鳳

▌延伸閱讀
-全台最美演講廳, MVRDV 與 Alexandra Kehayoglou 打造忠泰講廳獲 The Frame Awards 最佳手工藝提名 

▌2018 臺北流行音樂國際論壇
「演唱會製作」為主題,邀請國際大師分享設計思維與專業技術,以對談、工作坊、作品展示與解析,帶給國內演出製作職人領先全球的知識及創造力。
主辦單位:臺北市文化局、臺北流行音樂中心
 
▌2018臺北流行音樂國際論壇《Live/ in the Moment 創意現場》
-主題:虛實之間 光影沈浸
講者:村松亮太郎 | NAKED Inc. 新媒體藝術家
時間:8月28日(8/7 開放線上報名)
 
-主題:視覺脈動 流行解構
講者:Danny Tull | 瑪丹娜演唱會電影導演 
時間:9月4日(8/14 開放線上報名)
 
 

更多文章推薦

精選國內外設計與藝文大事、設計大師最新訪談,每週最新資訊定期遞送給您。