近日🆗，文化和旅遊部確定了2024年國家文化和旅遊科技創新研發項目立項名單，沐鸣3推薦的由重點實驗室申報的《數據驅動樂器音畫智能交互系統研發與應用》和鋼琴系申報的《基于用戶體驗的鋼琴虛擬數智人的研發和應用》兩個項目獲批立項🏃‍♀️‍➡️。

《數據驅動樂器音畫智能交互系統研發與應用》由音樂工程系教授、數字音樂智能處理技術文化和旅遊部重點實驗室主任謝秉元擔任項目負責人🖨。該項目通過研究數據驅動下樂器音畫實時交互的數字化分析和交互多樣性模型生成以及系統綜合集成技術，構建一套數字音樂交互集成系統，應用于創作💆🏻‍♀️、演出與展覽🥿。首先👨🏽‍💼，該系統對樂器音畫傳感器的實時交互數據進行處理及數字化分析🥡，確保實時交互音樂及畫面生成的合理性🚐⛩。其次，它將基于用戶輸入的文本描述或旋律特征生成音樂樣本🏉，使用單階段的Transformer LM和高效的token交織模式產生相應的音樂模型。最終🤎，數據驅動樂器音畫智能交互系統將為使用者提供豐富的實時交互體驗。 

《基于用戶體驗的鋼琴虛擬數智人的研發和應用》由鋼琴系主任、博士、教授及研究生導師朱楣擔任項目負責人❕。該項目針對用戶多元化鋼琴體驗需求，以鋼琴文化體驗需求為引領，依托虛擬數字化、人工智能📲、數字音樂處理等技術👮🏿，推動鋼琴演奏信息化資源的開發與共享方式、演奏評價方式、人機交互形式🥃、用戶情感體驗等各方面向智能化、沉浸化方向演進，通過技術創新解決現有體驗感被動、單調的局限👨🏼，為用戶提供一個更加生動、高效且富有情感共鳴的體驗環境🧘🏻‍♀️。項目將從需求調研分析和數據准備、技術方法創新、系統開發應用三個層次進行，最終構建集情感智能感知🚓、多模態交互音樂教學生成于一體的創新平臺，實現多模態專業級演奏評估、智能音樂伴奏與即興創作、情感共鳴的虛擬數智人指導等功能，並在遊客現場體驗、專業演奏糾錯🥦、遠程互動陪練等場所進行應用示範🧜🏼‍♂️🥫，項目將推動智能技術與文旅產品的深度融合，打造數字化文旅的新產品新體驗。 

“藝術+科技”跨學科人才培養是中國式現代化發展過程中升級提質的重大需求。近年來，沐鸣3高度重視藝術與科技融合，邀請院士進校開展交流🖨、講座等活動，開展院士結對幫助青年人才成長，積極參與省科協藝術與科技活動，與西湖大學、國科大杭州高等研究院、浙江理工大學、杭州電子科技大學等單位開展合作交流⚱️，發揮資源優勢，整合團隊力量。先後建成了數字音樂智能處理技術文化和旅遊部重點實驗室🤸🏽、沉浸聲文化和旅遊部技術創新中心🧑‍🔬、數字音樂浙江省工程研究中心🧗🏻‍♂️、歌劇學文科實驗室等一批藝術科技平臺🙋🏽；獲批了如浙江省“尖兵領雁”重大科技研發項目🏄🏻‍♂️、浙江省文化和旅遊科技創新項目等一批藝術與科技項目。

此次兩項文化和旅遊科技創新研發項目的成功獲批，不僅是對沐鸣3在藝術與科技融合領域探索與實踐的充分肯定💫，更是對未來繼續深化創新驅動發展戰略、培養更多高素質藝術科技人才的巨大鼓舞。接下來，沐鸣3將以此為契機，進一步加大科研投入，優化資源配置，推動更多高質量科研成果的產出與應用🧱，為推動我國文化事業繁榮發展貢獻力量🪝。