生成式AI讓你變神仙,數位科技應用賦能地方文化

每年的農曆3月23日是媽祖生日,也稱「媽祖生」,臺灣有句俗諺說:「三月瘋媽祖。」2024年適逢北港朝天宮建廟330週年,由朝天宮跨領域合作導入5G專網、生成式AI、異地直播串流等新興技術,為迎媽祖的特有宗教盛事打造出體驗感滿滿的數位藝閣,讓民眾感受到新型態的藝文體驗。
數位藝閣+犁炮炸轎,交織成令人驚豔的文化體驗
雲林北港朝天宮真人藝閣遶境是著名的在地特色活動。通常孩童會妝扮成忠孝節義或民俗神話故事中的角色,乘坐於藝閣車上,在北港大街小巷中沿途灑平安糖象徵媽祖賜福庇佑,沿途聲光效果十足,儼然就像一個大型嘉年華會,其熱鬧程度也被稱為北港人的第二個過年。
另一個眾所皆知的台灣三大炮之一的「北港犁炮、炸轎」也是北港迎媽祖的重要地方特色,現場鑼鼓喧天熱鬧非凡,廟方及信徒會準備大量的鞭炮,放在轎底點燃施放以祈求平安並感謝媽祖保佑。
圖1:民眾體驗數位藝閣
圖片來源:本文作者於活動現場拍攝
媽祖逐光 數位藝閣,呈現多元沉浸式互動場景
朝天宮以全臺歷史悠久的「北港朝天宮迎媽祖藝閣遶境」為主題,打造5G數位沉浸式藝閣,將【觀犁炮、登藝閣】的宮廟慶典文化元素透過5G行動車,運用5G異地直播串流、AR特效及動態捕捉、GAI生成的技術,輔以體驗設計賦能傳統藝閣及犁炮炸轎進行沉浸式的科技互動,呈現出「藝閣」的外觀讓民眾體驗「藝閣巡禮」、及「犁炮」兩種沉浸式的互動場景。
圖2:數位藝閣-異地即時直播串流互動
圖片來源:本文作者於活動現場拍攝
因犁炮具有一定的危險性,考量其安全性民眾無法近距離觀看,且藝閣車並非人人都能上去,本次運用5G行動網路將犁炮炸轎的震憾以及在藝閣車上的觀看視角透過環景直播串流至5G數位藝閣車播放,讓民眾也能體驗隨著媽祖遶境祈福的沉浸式感受。
神仙變妝鏡,融合多項科技展神威
為豐富本次的活動內容,體驗設計的主軸環繞著「犁炮、祈福、藝閣、遶境」等宗教體驗為元素,「數位藝閣_神仙變妝鏡」就是因運而生。過程中,團隊們透過5G應用整合測試實驗室(5G UT Lab),採用了先進的「多模態資料生成技術」及「XR串流服務」,輔以LoRA深度學習算法使AI深入理解各種神仙角色的傳統服飾及飾品,透過現場捕捉民眾五官特徵後動態生成客製化的神仙角色影片,融入今日運勢的方式,供民眾下載紀念保存,提升了活動的互動趣味性與文化體驗。
圖3:數位藝閣-神仙變妝鏡互動應用
圖片來源:本文作者於活動現場拍攝
現場活動總人次約50萬人以上,為免造成網路通訊延遲,故資策會設計了5G專網與公網的運作架構,並結合自行開發的「AI生成3D環景串流技術」以邊緣運算為基礎,透過即時相交投影形變計算模式,並輔以AI生成技術來補正邊緣不匹配的問題,將平面靜態、平面動態或360動態攝影訊源,即時生成為具有錯視效果的3D數位內容。
除了可以降低錯視3D內容製作成本,也能提高虛實展演的創作能量。本次將北港迎媽祖的觀犁炮、登藝閣兩大文化盛事,透過5G行動車上的XR LED舞臺展現給民眾,讓民眾可體驗到身歷其境的感受,一睹傳統工藝與5G數位技術的嶄新風格,提升科文共融的新數位遶境活動。
封面圖片來源:本文作者於活動現場拍攝
參考資料來源:
https://ideas-dtri.iii.org.tw/%e7%94%a2%e6%a5%ad%e8%b3%87%e8%a8%8a/5g/
蘇怡文
2024-06-03
