「軀體畫(huà)筆」流動(dòng)的虛擬藝術(shù)
城大電腦科學(xué)系系主任葉豪盛講座教授成功研製出一項(xiàng)創(chuàng)新的電腦動(dòng)作分析系統(tǒng)，能夠?qū)⑷梭w的動(dòng)作即時(shí)轉(zhuǎn)為三維空間畫(huà)作。這項(xiàng)稱(chēng)為「軀體畫(huà)筆」的新發(fā)明，在城大創(chuàng)意媒體學(xué)院以及香港
葉教授過(guò)去主要從事圖像分析和電腦圖形的研究工作，他發(fā)展出來(lái)的技術(shù)可以分析圖像及了解其組成。他說(shuō)：「我曾為一個(gè)外科手術(shù)計(jì)畫(huà)系統(tǒng)，完成多項(xiàng)人體臉孔醫(yī)學(xué)圖像分析及圖形模擬。」不過(guò)，他以往的工作著重以圖像處理或電腦圖形科技作技術(shù)方面的應(yīng)用，而「軀體畫(huà)筆」則相當(dāng)不同。因此，他與楊先生商討如何合作時(shí)，對(duì)於有可能將藝術(shù)與科技結(jié)合，感到特別興奮。「我喜歡跟人合作，以往亦曾做過(guò)模擬中國(guó)書(shū)法的電腦圖形技術(shù)。因此，當(dāng)我跟楊先生談到『軀體畫(huà)筆』時(shí)，我馬上覺(jué)得那是可行的，我們現(xiàn)有的技術(shù)已可將這個(gè)意念化為現(xiàn)實(shí)。」
將動(dòng)作轉(zhuǎn)化為藝術(shù)
所有人體動(dòng)作都是立體的，因?yàn)槲覀兏揪突钤谝粋€(gè)三維空間的世界裡。雖然藝術(shù)界曾嘗試打破平面的局限，可是我們還是一直用平面的畫(huà)布繪畫(huà)。「軀體畫(huà)筆」正是要突破這個(gè)限制，捕捉藝術(shù)家反映在三維空間裡的動(dòng)作和表情。觀眾只要戴上三維立體眼鏡，便可看到立體的形象。這種作品不再以畫(huà)筆和調(diào)色板來(lái)創(chuàng)作，而是以藝術(shù)家的身體為畫(huà)筆，將動(dòng)作化為藝術(shù)。
技術(shù)上，要電腦捕捉身體動(dòng)作和表情，需先設(shè)計(jì)照相機(jī)系統(tǒng)捕捉圖像，再輸入電腦。葉教授說(shuō)：「我們?cè)谶@方面下了不少功夫，因?yàn)槲覀冃枰O(shè)計(jì)一個(gè)不會(huì)干擾人體動(dòng)作的照明系統(tǒng)。」現(xiàn)行的一些捕捉動(dòng)作裝置需要特製的衣服和感應(yīng)器，會(huì)妨礙藝術(shù)家的動(dòng)作。「我們希望免除這些限制，讓藝術(shù)家可以穿著任何質(zhì)料的布料。結(jié)果我們發(fā)明了紅外線(xiàn)照明系統(tǒng)和紅外線(xiàn)感應(yīng)照相機(jī)。」
不過(guò)，一個(gè)照相機(jī)並不足以捕捉三維空間，最少需要兩個(gè)，一個(gè)在天花板，另一個(gè)在地下旁邊。由於用上紅外線(xiàn)，圖像的反差較好，方便電腦作分析，計(jì)算三維空間內(nèi)人物的三維位置。
電腦不但要看見(jiàn)藝術(shù)家的動(dòng)作，還要畫(huà)出來(lái)，並重新投放到藝術(shù)家正在移動(dòng)的空間。倘若採(cǎi)用一般的照明系統(tǒng)，光線(xiàn)太亮，投影的效果就不會(huì)好。紅外線(xiàn)圖像系統(tǒng)這時(shí)就可發(fā)揮作用。葉教授說(shuō)：「我們的眼睛對(duì)紅外線(xiàn)沒(méi)有反應(yīng)，所以可以在黑暗的空間裡照亮人物，從事三維立體繪畫(huà)。這是對(duì)紅外線(xiàn)圖像系統(tǒng)的一個(gè)創(chuàng)新應(yīng)用。」
葉教授和研究小組接下來(lái)要解決的另一難題，是要想辦法讓電腦在三維空間內(nèi)找到藝術(shù)家的位置，然後分析他的姿勢(shì)，並將數(shù)據(jù)資料轉(zhuǎn)化為繪畫(huà)的各種元素，例如顏色、筆觸的粗細(xì)以及在何處著筆。「這一切都必須即時(shí)處理，因?yàn)橄到y(tǒng)要實(shí)時(shí)反應(yīng)。我們必須在系統(tǒng)收到視像圖像的同時(shí)，就同步處理大量的圖像和圖形。」
為此，小組必需跟藝術(shù)家合作。他們跟楊曦一起研究如何將藝術(shù)家的姿態(tài)表情和數(shù)據(jù)轉(zhuǎn)換為美學(xué)與繪畫(huà)的元素，經(jīng)過(guò)18個(gè)月的努力後，「軀體畫(huà)筆」終於成功誕生了。
「軀體畫(huà)筆」的其他用途
雖然「軀體畫(huà)筆」似乎最順理成章應(yīng)用於繪畫(huà)藝術(shù)，但葉教授更有興趣讓兒童運(yùn)用該項(xiàng)科技表達(dá)自我。「香港的學(xué)童一般比較害羞，初到實(shí)驗(yàn)室時(shí)，都不敢試用軀體畫(huà)筆。不過(guò)，當(dāng)有些比較大膽的孩子開(kāi)始移動(dòng)一下手臂，而他們看到移動(dòng)手臂的結(jié)果後，大家就不再羞怯，而開(kāi)始四處蹦跳了。這是他們表達(dá)自我的好方法。」
葉教授相信「軀體畫(huà)筆」也可以讓精神病人表達(dá)內(nèi)心世界，有助醫(yī)治他們的病情。「軀體畫(huà)筆」不但可以創(chuàng)作繪畫(huà)，也可利用電腦捕捉三維空間內(nèi)的所有動(dòng)作。葉教授說(shuō)：「將病人的動(dòng)作捕捉後再作分析，可重組病人的心理狀態(tài)。」
葉教授也希望利用「軀體畫(huà)筆」了解不同民族的動(dòng)作是否有異。中國(guó)人是否有獨(dú)特的中國(guó)式動(dòng)作？西班牙人和意大利人又怎樣呢？「讓不同文化種族的人試用『軀體畫(huà)筆』一定很有趣，我們將會(huì)得到能呈現(xiàn)不同民族特質(zhì)的立體畫(huà)作。」
「軀體畫(huà)筆」之後，將會(huì)是「軀體樂(lè)棒」。葉教授得到城大媒體科技中心的撥款，將與他的研究小組嘗試把身體動(dòng)作轉(zhuǎn)化為音樂(lè)。現(xiàn)在的系統(tǒng)雖已可捕捉圖像，但音樂(lè)方面的問(wèn)題卻仍有待解決。葉教授解釋說(shuō)：「某些研究機(jī)構(gòu)已成功研製出類(lèi)似產(chǎn)品，可是音樂(lè)卻是預(yù)先錄音或隨意的樂(lè)章。我們希望按照音樂(lè)的原理，製作出更有音樂(lè)感的樂(lè)章。」葉教授的研究小組目前與創(chuàng)意媒體學(xué)院一位具備音樂(lè)訓(xùn)練的同事合作，將來(lái)會(huì)邀請(qǐng)更多本地音樂(lè)家提供協(xié)助。
「軀體畫(huà)筆」也引來(lái)海外人士的極大興趣。在CNN詳細(xì)報(bào)導(dǎo)之後，美國(guó)不少個(gè)別人士和團(tuán)體紛紛向葉教授查詢(xún)有關(guān)該系統(tǒng)的其他應(yīng)用用途，例如現(xiàn)代舞。今年九月，「軀體畫(huà)筆」更在奧地利Linz舉辦的著名藝術(shù)節(jié)Ars Electronica的互動(dòng)藝術(shù)項(xiàng)目中，取得榮譽(yù)Prix Ars大獎(jiǎng)。葉教授說(shuō),藝術(shù)節(jié)舉辦的首日，就有超過(guò)400位訪(fǎng)客嘗試使用『軀體畫(huà)筆』。世界各地的電視臺(tái)，包括日本、意大利和奧地利等前來(lái)做採(cǎi)訪(fǎng)及報(bào)導(dǎo)。」目前韓國(guó)、日本和瑞士的藝術(shù)圖形研討會(huì)相繼邀請(qǐng)葉教授展出「軀體畫(huà)筆」，葉教授期望收集更多意見(jiàn)後，能為這項(xiàng)創(chuàng)新的媒介發(fā)掘更多用途。