以人工智慧實踐二胡演奏行為暨音樂風格分析(2/2)

專案詳細資料

Description

二胡是一種兩弦類提琴樂器,也被稱為胡琴或南胡。在古代,二胡常常被用作中國傳統戲曲的伴奏樂器。二胡由紫檀木或老紅木製成,帶有蟒蛇皮。用兩根鋼弦和一把竹弓,二胡可以覆蓋從 D4 到A7的三個半八度。學習二胡是一種挑戰。通常是從教師口頭傳遞給學生經驗。學習二胡的自動輔助技術幾乎是不可能的。但是,隨著人工智慧技術的近期發展, 計劃主持人諮詢了專業的二胡研究學者,並邀請了不同技術領域的教授。參加這個計劃的所有教授都會演奏二胡,並且也了解計算機技術。計劃小組旨在研究二胡音樂風格,特別是在不同二胡音樂中使用的音腔特徵之差異。計劃小組將對視訊和音訊輸入進行分析,並以最先進的深度學習技術作為研發工具的手段。另一個標是設計視覺效果,將二胡演奏視覺化。計劃小組也將舉辦一些公開表演。這些表演將配備藝術設計和多媒體輸出,作為跨界的創意作品。本整合型計劃名為“以人工智慧實踐二胡演奏行為暨音樂風格分析”,下設四個子計劃:1、二胡技法及風格演奏樂音特徵分析:將研究二胡演奏技巧和音色特徵如何影響不同的音樂風格。二胡聲音的量化分析和專業二胡演奏的取樣集合將作為深度學習模型的訓練數據。2、二胡演奏方法行為視訊分析:使用一個RGB和另一個RGB-D 攝影機, 所採集的視訊數據包括二胡演奏者的上半身視訊和詳細的手指動作。 計劃小組將使用數個深度學習模組分析二胡演奏者的動作,並加上視覺化的錯誤提醒。在音頻分析的幫助下, 深度學習模組將攫取和分析二胡演奏裝飾音。3、二胡聲音訊號分析與MIDI研發: 樂曲旋律和裝飾音在音樂風格中扮演著重要角色。音調變化信號將用作風格分類的基礎。音樂生成將遵循特定的音樂風格。 所產生的二胡音樂將使用二胡 MIDI。4、二胡演奏行為及風格分析視覺化:二胡初學者常見錯誤的視覺化將有助於二胡訓練系統的使用。藝術設計可以進一步增強視覺化效果, 並將二胡演奏者的手指和身體的動態特徵進一步美化。視覺化效果還可以包括特定音樂風格的感受、演奏者的情感、觀眾的情緒變化等等。計劃小組將舉辦多場公開演出活動。這些活動可能包括有伴奏的二胡獨奏表演、 小合奏型示的多人二胡表演、並包含藝術設計。這些表演將包括技術說明以及現場示範。
狀態已完成
有效的開始/結束日期1/01/2331/03/24

Keywords

  • 二胡
  • 二胡演奏
  • 二胡MIDI
  • 深度學習
  • 音樂風格
  • 音樂生成
  • 音頻分析
  • 音樂可視化
  • 情感分類

指紋

探索此專案觸及的研究主題。這些標籤是根據基礎獎勵/補助款而產生。共同形成了獨特的指紋。