在剛結束的CES 展會上,Stability AI 宣布推出一種名為SPAR3D(Stable Point Aware3D)的創新方法,這種兩階段的3D 生成技術能夠在不到一秒的時間內,從單一影像中產生精確的3D 物件。該技術的推出為遊戲開發者、產品設計師和環境建構者提供了全新的3D 原型設計方式。
SPAR3D 的獨特之處在於,它能夠分別建模可見部分和不可見部分。在產生3D 物件時,此方法提供了準確的幾何形狀及完整的360度視圖,包括物體背面的細節。使用者還可以透過即時編輯功能,對生成的3D 物件進行直接修改,例如刪除、複製、拉伸和重新著色點雲,大大提高了操作的靈活性和創意空間。
SPAR3D 的工作流程可分為兩個階段。第一階段採用輕量點擴散模式產生稀疏的3D 點雲,樣本擷取速度極快;第二階段則利用這些點雲和輸入影像來建構高細節的網格模型。這樣的設計不僅提高了運算效率,還確保了輸出質量,克服了傳統單一影像3D 重建方法的限制。
在效能測試中,SPAR3D 在GSO 和Omniobject3D 資料集上表現出色,優於現有的多種最先進的演算法。研究團隊透過多項實驗驗證了該技術的有效性,尤其是在處理影像遮蔽和細節重建方面的優勢。 SPAR3D 採用明確的點雲作為中間表示,使得使用者能夠對3D 模型進行進一步編輯,提升了使用者體驗。
SPAR3D功能總結主要有以下幾點:
即時生成能力
快速生成:能夠從單張影像中產生完整的3D 物件結構,生成時間不足一秒。
高效編輯:編輯後的點雲轉換為最終網格的速度僅為0.3秒。
先進的編輯功能
點雲編輯:使用者可直接對點雲進行操作,包括刪除、複製、拉伸和新增特徵。
重新著色:提供3D 模型顏色的調整功能,增強創作彈性。
精確的結構預測
完整結構預測:能夠提供準確的幾何形狀和詳細的360度視圖預測,包括隱藏區域。
高解析度輸出:透過三平面變換器產生高解析度的三平面數據,捕捉影像的紋理和光照。
開放的使用政策
廣泛的應用許可:支援商業和非商業用途,用戶可在多個平台上取得和使用該模型。
開發者友善:可透過Hugging Face 下載權重,取得程式碼在GitHub 上使用,或透過API 存取。
官方介紹:https://stability.ai/news/stable-point-aware-3d
AI課程適合對人工智能技術感興趣的人,包括但不限於學生、工程師、數據科學家、開發者以及AI技術的專業人士。
課程內容從基礎到高級不等,初學者可以選擇基礎課程,逐步深入到更複雜的算法和應用。
學習AI需要一定的數學基礎(如線性代數、概率論、微積分等),以及編程知識(Python是最常用的編程語言)。
將學習自然語言處理、計算機視覺、數據分析等領域的核心概念和技術,掌握使用AI工具和框架進行實際開發。
您可以從事數據科學家、機器學習工程師、AI研究員、或者在各行各業應用AI技術進行創新。