新網專題數位技術編織音樂畫卷音樂結合AI科技與樂齡共創成果發表

數位技術編織音樂畫卷音樂結合AI科技與樂齡共創成果發表

大中小

〔新網記者歸鴻亭台北特稿〕　文化部今(19)日於國家音樂廳辦理「NSO《琴響．心世界》交響樂遇上AI：數位技術編織音樂畫卷」成果發表音樂會，展示文化部114年度高齡科技計畫成果，現場體驗透過繪圖即時互動串流技術，將樂齡長輩親手繪製圖樣即時轉化為動態影像，並結合音樂演奏，以AI科技打造可以「看見」的交響曲。

文化部綜合規劃司長魏秋宜致詞。(錢大同攝影)
　文化部綜合規劃司長魏秋宜表示，臺灣預計在今年邁入超高齡社會，每5位國人當中，就有1位是65歲以上的長者，因此，如何促進長輩健康、推動長期照顧，是刻不容緩課的議題。AI的應用不只在產業發展，也可以運用在公共服務，文化部正朝此方向努力，與NSO等攜手合作，透過文化與藝術，逐步實踐全齡社會共融理念。

國家交響樂團執行長郭玟岑致詞。(錢大同攝影)
　國家交響樂團(NSO)執行長郭玟岑表示，自108年起NSO愛樂實驗室，結合科技展開長者照護計畫，在繪畫與音樂的創作中，看見長輩與青年藝術家的交流與激盪，也期待今晚的音樂會給大家帶來滿滿的感動。

　因應臺灣進入「超高齡社會」，文化部配合行政院自去(113)年起推動「高齡科技產業行動計畫」，發展樂齡社交數位化活動或課程體驗方案，促進樂齡及高齡族群走出戶外、參與社交，文化部委託NSO於今年8月舉辦4場次「《繪響新世界》聽！憶起畫當年：以數位活化回憶創作分享會」，帶領臺北、雲林、臺中、高雄地區高齡者聆賞《新世界》，並融入長輩的生命經驗進行創作，總計吸引300餘位長者、家屬與樂齡工作者參與，在古典音樂的浸染中，共同繪製記憶中的難忘時刻，參與的樂齡者回饋表示音樂與繪畫的結合很新奇、感到療愈，並希望增加類似的活動。

AI科技與現場室內樂演出實時互動。(錢大同攝影)
　創作分享會以德沃札克第9號交響曲《新世界》為鑑賞曲目，藉由平易近人的導聆課程及室內樂現場演奏，作為音樂會的前導活動，並以各個樂章主題意象繪製圖樣，於活動現場導入模組化「繪圖即時互動串流技術」系統，技術整合Grab Cut、Threshold、Morphology等影像辨識演算法，可在無邊框、無QR code情境下，精準擷取參與者的原創圖像，讓每幅作品透過即時掃描，在10秒內轉換為動態影像，並與現場室內樂演出實時互動。

經濟部產業技術司長郭肇中(右起）、文化部綜合規劃司長魏秋宜、臺北市立聯合醫院神經內科與失智症中心主任劉建良共演繪畫儀式。(錢大同攝影)
　今晚舉行成果發表音樂會，由NSO與目前擔任奧勒岡交響樂團副指揮楊書涵攜手呈現德沃札克E小調第9號交響曲《新世界》，融合前導分享會樂齡參與者創作內容進行後製整合，結合資訊工業策進會技術與影像設計師王奕盛的設計，演出整合音訊分析(Audio Feature Extraction)、視覺生成映射(Generative Visual Mapping)及人機互動設計3大技術面向，讓樂音與影像透過現代科技相互呼應，打造一場跨域、共感、多維的藝術饗宴。

「NSO《琴響．心世界》交響樂遇上AI：數位技術編織音樂畫卷」成果發表大合照。(錢大同攝影)
　計畫導入「AI聲波擷取與聲音視覺化技術」，以AI音訊分離模型（如Demucs）即時分析現場演奏聲音，從整體音訊中拆解8種亮點樂器的獨立頻譜訊號，包括：小提琴、長笛、單簧管、小號、大提琴、法國號、低音提琴與定音鼓，由各樂器頻譜經過傅立葉轉換(FFT)與正規化處理，再藉WebSocket協定即時串流，驅動視覺引擎渲染出對應的動態視覺效果，搭配樂章中10個視覺亮點段落，將長者繪畫創作與音樂深度融合，共同創造視覺化的音樂畫卷，展現科技賦能的藝術文化新體驗同時，也讓音樂跨越場域界線，以多元形式走入民眾生活，成為推動高齡者文化參與及社會共融的重要力量。