102級:Make Sense! 個人派對 以行動裝置媒合數位藝術實現音樂與影像集體創作研究

張貼日期:Jul 17, 2013 1:43:54 PM

學生:王將仰、王政傑、林言翰

中文摘要 本研究以派對場景為使用情境,針對 Android作業系統做觸控平板行動裝置的 軟體設計,並融合數位藝術與集體創作概 念,整合而成的一個互動裝置,創造出一 個類似智慧型派對的互動情境。 在互動方面主要分為三個部分:人機 介面、聲音和影像,分項陳述如下。 1.人機介面: 一個運行在Android上的觸控平板 行動裝置的軟體,其介面為一鋼琴畫 面,主要用於接收並紀錄派對內使用者 彈奏的琴鍵資訊,將其轉換為Max跟 Processing可處理的資料並傳送之,作 聲音與影像的變化。 2.聲音: 將鋼琴介面接收到的資訊,以Max 做音階分析、擷取部分音訊並依權重值 機制配置自動產生和弦,而不同次產生 的和弦也會依紀錄權重值而略有變化。 3.影像: 將鋼琴介面接收到的資訊,透過 Processing設計影像變化的機制,呈現 出類似隨手塗鴉的效果,投影在大螢幕 上就變成了一面數位塗鴉牆。 透過本研究設計之互動裝置,每個使 用者在單獨使用時,彈奏觸控平板上的鋼 琴畫面就好像真正在彈鋼琴一樣,除了所 彈琴鍵的音階聲音外,也會自動配置和諧 適合的和弦一起即時反饋給使用者,讓使 用者彈奏樂曲主音就可以變成旋律。另外 在影像的視覺效果方面,會根據彈奏琴鍵 的不同而有不同塗鴉而呈現在數位塗鴉 牆上。而在派對的環境中,同時有許多的 使用者使用此裝置時,將可輕鬆達成聲音 與影像的集體創作。 關鍵詞:數位藝術、互動科技、音訊數值 分析、Max、Processing、數位音樂