看見聲音 豐富影像 崑山科技大學所與美國羅德島大學跨界合作

      聲音/影像如何被計算並看見？崑山科技大學視傳所與美國羅德島大學讓聲音影像有了更豐富的變化。透過美國國家科學基金會(National Science Foundation) 研究計畫(Research Experience of undergraduates)，Jean-Yves教授帶領5位來自美國羅德島大學三、四年級的學生，在崑山科技大學展開為期8週的研究交流，這也是該校師生首次與台灣媒體設計學校合作。

羅德島大學Jean-Yves教授表示，以往他們曾受邀至德國進行3-4週的研究交流，這次自發性地選擇自費來台，乃由於去年暑假他到台灣度假，走過不同城市，同時拜訪不同媒體藝術學校，當他看到崑山科大創媒學院的網頁資訊，發現許多跨領域的成果，特別對視傳系林子邦老師將科技媒體、表演藝術透過視覺設計進而結合音樂的學術研究大感興趣，因而開啟了資訊科學與設計藝術人合作的第一步。

 視傳系林子邦老師表示，羅德島大學研究團隊主要專精於資訊運算及分析，雙方合作是對聲音及影像進行運算，以有用的數據，處理影像及照片的變化，透過數據的產生，能精準地計算出動作的速度。進一步組合不同數字，轉化成各種影像/聲音，影像的數字化將帶來不同的藝術表現手法，進一步與表演藝術團體進行合作，如舞蹈、音樂家等。舞台上透過人體表達肢體動作，利用投影的方式及視覺與即時移動，表現音樂的可能性，讓聲音聽的到也看的到，大眾能輕易感受聲音的各類組合與變化，與表演者產生互動。

 羅德島大學charles同學表示，這是一次很特別的研究經驗，第一次與設計藝術家合作，看到不同事物表現在藝術上的多樣化，且有不同意義的呈現，也讓他產生了許多更富創造性的想法。Ronald同學形容台灣學生非常和善，即便語言溝通稍有困難，但在不同的學術領域中，卻能包容不同的想法，並樂於聆聽他們的意見並給予回饋，整個合作的過程可以說是非常地順暢且開心。學生JOEL透過3D平台及物理的數據，模擬兩個物件的物理變化，如碰撞或拋球等反應，將聲音或動作的運算結果轉化成藝術創作，這些創造力是學資訊工程的他從來未曾觸及的領域。

崑山科大視傳所蔡禾莉同學表示，參與的外國學生也非常認真且勇於表達自已的觀點，讓她有機會學習國外的思維方式以及如何將音樂結合影像、圖像，彼此透過程式語言溝通，互動討論，讓視覺創作有了更豐富的視野與可能。

這些外國學生，在他們來台灣之前，雖然做了很多影像辨識的技術及處理各種不同影像的研究，但來台灣後發現原來影像是可以連結聲音，透過動態影像的擷取，創造音樂，是非常創新的發現，所以他們常常在實驗室一待便是12個小時以上。此次的合作，除了豐富學生彼此間的研究經驗外，美國學生Stacie等人，也對台灣的人、事、物覺得相當有趣，如24小時不打烊的商店，任何時間都可以購物、吃飯，特別是台南不像大城市，反像是他們從小居住的環境，雖身處異鄉，但能感受到人與人間的親近距離。

照片

圖說1：美國羅德島大學Jean-Yves教授帶領該校學生與崑大同學合影

資料來源：崑山科技大學 http://www.ksu.edu.tw/cht/