Autodesk Bernini提供多種不同方式產生3D建模圖像

隨著生成式人工智慧（Generative AI）在繪製2D平面圖像發展到極致後，接下來的發展焦點就是3D立體圖像。以3Ds Max、Maya聞名的3D繪圖軟體大廠Autodesk，推出了用生成式AI自動繪製3D圖像的系統「貝尼尼（Bernini）」。除了提供關鍵字（Prompt）輸入外，也可藉由上傳照片、上傳3D模型底圖，由系統依據使用者提供的素材來自動繪圖，並結合Autodesk在3D領域的領先技術，提供更優良的3D建模品質，以符合使用者所期待的便利性和可看性。

技術發展背景

3D建模是一個很浩大的工程，除了仰賴可觀的軟硬體資源外，還要具有美感和空間感，來絞盡腦汁產生3D模型；3D除了建模以外，還要貼圖、打光、上特效、設定景深和聚焦等流程，以及不同領域和環節的協同作業，就像交響樂團一樣繪製出具有美感的3D模型和動畫。

Autodesk團隊與香港中文大學合作，以上千萬個2D照片和3D模型作為訓練素材，並標註關鍵字，再配合電腦輔助設計（CAD）技術，進行模型描繪，最後再產生3D模型；該系統可依照使用者所提供的關鍵字、圖片、模型草圖等素材，再藉由AI強大圖文分析和理解能力，進行自動化3D建模，就像3D列印一樣神奇，並在短時間產出使用者所需要的模型。

技術介紹與應用現況

依據Autodesk在官方影片所釋出之資訊，貝尼尼3D建模系統提供了包含三種模式，並展示如下圖：

1. 關鍵字生成圖形：類似於常見的Dall-E、Stable Diffusion等2D關鍵字圖片生成系統，使用者可先下達關鍵字，系統會自動創建若干模型選項，讓使用者可以挑選最符合偏好的3D模型。 

圖 1 關鍵字生成圖形：文字輸入與模型選擇介面

資料來源：Autodesk Pressroom, 2024

 

圖 2 關鍵字生成圖形：文字輸入後之建模預覽，以及對應之模型選擇介面

資料來源：Autodesk Pressroom, 2024 

2. 圖片匯入暨建模：用法類似Bing、Google等搜尋引擎的「以圖搜圖」功能，使用者可將圖片素材，拖曳進貝尼尼系統的圖片欄位，系統將依據圖片主體的樣貌自行建模。 

 圖 3 圖片匯入暨建模功能

資料來源：Autodesk Pressroom, 2024 

3. 模型草圖3D建模：使用者可匯入指定類型的模型草圖，或者Voxel（格子像素）的草圖，系統會自動分析草圖和座標位置，也能將格子狀堆疊的Voxel草圖進行邊緣平滑處理，可以更迅速地產出3D模型。

 

圖 4 模型草圖3D建模：Voxel草圖

資料來源：Autodesk Pressroom, 2024 

未來展望／挑戰

Autodesk指出，貝尼尼系統目前仍在內部驗證的階段，也需要花更多的時間進行資料模型訓練，同時改善3D建模的輸出品質，以符合使用者的期待。

由於貝尼尼系統是3D模型大廠出品，因此在AI自動建模的成熟度上有起跑點的優勢；為若能進一步整合自動貼圖、自動打光，以及人工細部修飾和上特效，不但能省下建模的時間和學習成本，也能更容易上手產出具有一定品質的3D模型成品。

 

封面圖片來源：123RF 

參考資料來源：

1. Autodesk Pressroom. (2024, May 8). Autodesk unveils Research Project Bernini for generative AI 3D shape creation . Retrieved from Autodesk: https://adsknews.autodesk.com/en/news/research-project-bernini/ 
   
   
2. DeFrancesco, R. (2024, March 28). Autodesk Infuses Generative AI Across Its Expansive Product Portfolio. Retrieved from Forbes: https://www.forbes.com/sites/robertdefrancesco/2024/03/28/autodesk-infuses-generative-ai-across-its-expansive-product-portfolio/
   
   
3. 葉致廷. (2024年5月15日). Autodesk 推出生成式 AI 建模技術「Project Bernini」，透過文字與上傳圖片快速創造「功能性 3D 結構」. 擷取自 映CG: https://www.incgmedia.com/new-release/autodesk-ai-project-bernini