交響樂遇上AI!音樂結合AI科技與樂齡共創成果發表音樂會
文化部昨(19)日於國家音樂廳辦理「NSO《琴響.心世界》交響樂遇上AI:數位技術編織音樂畫卷」記者會及成果發表音樂會,展示文化部114年度高齡科技計畫成果,現場體驗透過繪圖即時互動串流技術,將樂齡長輩親手繪製圖樣即時轉化為動態影像,並結合音樂演奏,以AI科技打造可以「看見」的交響曲。

文化部綜合規劃司長魏秋宜表示,臺灣預計在今年邁入超高齡社會,每5位國人當中,就有1位是65歲以上的長者,因此,如何促進長輩健康、推動長期照顧,是刻不容緩課的議題。AI的應用不只在產業發展,也可以運用在公共服務,文化部正朝此方向努力,與NSO等攜手合作,透過文化與藝術,逐步實踐全齡社會共融理念。

國家交響樂團(NSO)執行長郭玟岑表示,自108年起NSO愛樂實驗室,結合科技展開長者照護計畫,在繪畫與音樂的創作中,看見長輩與青年藝術家的交流與激盪,也期待今晚的音樂會給大家帶來滿滿的感動。
因應臺灣進入「超高齡社會」,文化部配合行政院自去(113)年起推動「高齡科技產業行動計畫」,發展樂齡社交數位化活動或課程體驗方案,促進樂齡及高齡族群走出戶外、參與社交,文化部委託NSO於今年8月舉辦4場次「《繪響新世界》聽!憶起畫當年:以數位活化回憶創作分享會」,帶領臺北、雲林、臺中、高雄地區高齡者聆賞《新世界》,並融入長輩的生命經驗進行創作,總計吸引300餘位長者、家屬與樂齡工作者參與,在古典音樂的浸染中,共同繪製記憶中的難忘時刻,參與的樂齡者回饋表示音樂與繪畫的結合很新奇、感到療愈,並希望增加類似的活動。
(左4)、客席指揮楊書涵(右3)及國家青年交響樂團(NSYO)演奏家群合影。.jpg)
創作分享會以德沃札克第九號交響曲《新世界》為鑑賞曲目,藉由平易近人的導聆課程及室內樂現場演奏,作為音樂會的前導活動,並以各個樂章主題意象繪製圖樣,於活動現場導入模組化「繪圖即時互動串流技術」系統,技術整合Grab Cut、Threshold、Morphology等影像辨識演算法,可在無邊框、無QR code情境下,精準擷取參與者的原創圖像,讓每幅作品透過即時掃描,在10秒內轉換為動態影像,並與現場室內樂演出實時互動。
、臺北市立聯合醫院神經內科與失智症中心主任劉建良(左)、經濟部產業技術司長郭肇中(右)共演繪畫儀式。.jpg)
今日晚間舉行成果發表音樂會,由NSO與目前擔任奧勒岡交響樂團副指揮楊書涵攜手呈現德沃札克E小調第九號交響曲《新世界》,融合前導分享會樂齡參與者創作內容進行後製整合,結合資訊工業策進會技術與影像設計師王奕盛的設計,演出整合音訊分析(Audio Feature Extraction)、視覺生成映射(Generative Visual Mapping)及人機互動設計3大技術面向,讓樂音與影像透過現代科技相互呼應,打造一場跨域、共感、多維的藝術饗宴。
、文化部綜合規劃司長魏秋宜、臺北市立聯合醫院神經內科與失智症中心主任劉建良共演繪畫儀式。.jpg)
計畫導入「AI聲波擷取與聲音視覺化技術」,以AI音訊分離模型(如Demucs)即時分析現場演奏聲音,從整體音訊中拆解8種亮點樂器的獨立頻譜訊號,包括:小提琴、長笛、單簧管、小號、大提琴、法國號、低音提琴與定音鼓,由各樂器頻譜經過傅立葉轉換(FFT)與正規化處理,再藉WebSocket協定即時串流,驅動視覺引擎渲染出對應的動態視覺效果,搭配樂章中10個視覺亮點段落,將長者繪畫創作與音樂深度融合,共同創造視覺化的音樂畫卷,展現科技賦能的藝術文化新體驗同時,也讓音樂跨越場域界線,以多元形式走入民眾生活,成為推動高齡者文化參與及社會共融的重要力量。