浸大AI獻歌舞 賀回歸25載

  音樂會將呈現藝術科技成果 自編芭蕾舞唱《東方之珠》

  藝術與科技融合,有助發掘無限可能性。浸會大學下周四(14日)晚舉行周年音樂會,將結合該校最新AI藝術科技研究成果,以「重聚」為主題慶祝香港回歸25周年。負責項目及指揮的浸大協理副校長(跨學科研究)潘明倫指,音樂會包括由AI舞蹈家Daphnis及Chloe表演、由浸大收集動作數據後自行編排的芭蕾舞,及由逾300個聲音組成的AI人虛擬合唱團唱出《東方之珠》,與浸大真人交響樂團互動演出,是全球首場同類的人機合作表演,為觀眾帶來嶄新跨界交響樂體驗。

  浸大的「香港人機共生藝術創造平台技術建設」項目去年獲研資局撥款5,283萬元,開展為期5年的藝術科技研究。潘明倫形容今次演出是「第一張成績表」,「但不是以『硬蹦蹦』的科學論文形式,而是一場實際的音樂會,向大家報告。」他指今次採用的人工智能具備一定的理解、學習、自主能力,「能學習人類藝術的本質,讓它自主創作,再回來跟人合作。」

  邀香港舞蹈團派員任「老師」

  負責AI舞蹈家項目的浸大計算機科學系助理教授陳杰介紹,團隊邀得香港舞蹈團派員擔任「舞蹈老師」,透過動作捕捉技術(Motion Capture)讓人工智能學習舞者對音樂的理解和表現方式後,就會開始自行編舞。陳杰指團隊今次還加入了浸大團隊在香港新發現的一種箱型水母動態數據,作為編舞意念,使舞蹈更具特色。

  學系另一助理教授雪巍續介紹,其負責的AI虛擬合唱團有約300道人聲,但最初供學習的其實只有數把人聲,「最初是錄製特定歌手的聲音,但他們不需要指定唱《東方之珠》,甚至說話都可以,然後生成出這個人唱任何歌的模型。」第二步是通過數個人的音色,生成數百個不同的虛擬歌手,最後跟音樂家合作,訓練虛擬歌手們把歌唱得優美。

  潘明倫說,虛擬歌手開始時會唱錯音或爆音,又或唱不上高音等,要透過程式不斷訓練,使其不斷改善。

  AI藝術家的負責人、計算機科學系專業應用副教授柳崎峰介紹,AI懂得依據《東方之珠》的歌詞和旋律,自主生成3D視像內容,內容會根據歌詞不斷變化,動態生成,視角也會根據旋律而變化。

  在大約3分鐘的音樂裏面,AI藝術家共生成約2,700張圖像,且畫面與畫面之間均有緊密的邏輯關係,柳崎峰形容,這也可理解是一個「說故事」(Storytelling)的過程。潘明倫補充說,「屆時觀眾會見到我們(交響樂團)真人演奏,背後有虛擬合唱團的聲音,前面則有一幅很薄的幕,顯示相關影像內容。」