AI賦能文化平權體驗：看見音樂，聽見感動

資策會數位轉型研究院投入數位轉譯與 AI聲紋即時視覺影像生成技術，解析藝術表演者人聲表現的獨特節奏、音頻、音量，運用5G低延遲特性，以0.1秒速度生成即時動態影像；同時透過5G AIoT邊緣運算技術，當下捕捉、運算舞台上指揮老師揮舞著美妙旋律的動作力度與姿態，帶領觀眾進入音樂視覺化的奇幻體驗，彷彿漫步於音樂構成的生命畫布，讓觀眾「看到歌聲」，感受音符在空間中翩翩起舞，彷彿每一個音符都有自己獨特的色彩和輪廓，就像生命中每個片刻都是獨一無二。

文化科技的緊密關係

馬修麥克魯漢（Marshall McLuhan）在1960年代《Understanding Media》一書中提出「媒介即訊息」（the medium is the message）的傳播學概念，這個理念意味著人們理解訊息時受到傳播方式的影響，傳播的形式已經與訊息本身密不可分，「訊息」與「傳播」之間存在著緊密的共生關係。而科技則發揮著推動傳播創意不斷創新的作用，為文化傳播帶來了更多樣化的體驗方式。

科技賦予力量，促進音樂數位體驗平等

文化與科技之間緊密結合，碰撞出全新創意。資策會投入數位轉譯與人工智慧聲紋即時視覺影像生成技術，與合唱團合作，透過分析現場15位和聲演唱者的聲音特徵，包含節奏、音頻、音量，以0.1秒的低延遲生成即時動態影像；同時透過5G AIoT邊緣運算技術捕捉指揮者的動作，將指揮老師揮舞著美妙旋律的動作力度與姿態幻化為視覺影像，讓觀眾身臨其境地感受音樂的視覺化之美，彷彿融入了音樂世界，真正「看到歌聲」。

此次運用5G科技，資策會數轉院將文化音樂體驗推向新的高度，促進文化音樂體驗近用與平權，融合文化與科技的創新表現，不僅豐富音樂體驗類型，更帶來全新的感知方式，凸顯文化與科技之間的緊密互動。

文化科技數位使命

身為文化科技數位轉型的第三方顧問，資策會數轉院文化科技中心的核心目標是實現「文化科技數位韌性」，把「連結文化與科技共創」視為一項極為重要的使命。在實務面上，將持續推動文化產業數位轉型的輔導工作，完善文化科技數位轉譯服務機制，打造良好的數位發展環境，以支持跨領域示範場域與服務，並加速文化科技相關領域的數位轉型。同時，透過實證服務聯合文化與公民，實現文化產業與通訊技術軟體的創新，體現智慧國家的願景，並引入數位工具和開放思維，協助我國從數位島嶼進一步成為全球數位民主和文化創新的基地。

封面圖資料來源：資策會提供

資料來源：作者自行撰寫