本文作者:李丹
來源:硬AI
生成式人工智能(AI)明星初創公司Stability AI 8月釋出最新突破性3D模型Stable Fast 3D,将單張圖檔生成3D圖像的速度大幅提升。
Stability AI介紹,Stable Fast 3D隻需 0.5 秒即可将單個輸入圖像轉換為詳細的 3D 資産,認為該創新模型為三維重建領域的速度和品質樹立了新的标杆。它能迅速生成完整的3D資産,包括UV拆分網絡、材料參數和降低光照烘焙的反照率顔色,而且使用者可選四邊形或三角形重新網格化,處理時間僅會增加100到200毫秒。
Stable Fast 3D問世代表Stability AI在縮短AI模型處理時間方面實作重大飛躍。
今年3月Stability AI釋出了3D模型Stable Video 3D (SV3D),它在Stable Video Diffusion的基礎上進行改進,隻需一張圖就能生成對應的3D模型,适用于新視角合成任務和3D生成的任務。SV3D需要多達10分鐘生成3D資産,而Stable Fast 3D完成同樣的任務隻需0.5秒,将速度提高了1200倍。
Stability AI釋出Stale Fast 3D時特别提到,該模型在幾個關鍵領域超越競争對手,其中之一是:在7GB顯示卡記憶體VRAM的GPU 上,每次生成3D資産隻需 0.5 秒,而在Stability AI API 上需要将近一秒。此外,該模型具有高品質的UV拆分網絡和材料參數,能減少紋理中的糾纏照明,并能生成附加材質參數和法線貼圖。
Stability AI稱,Stable Fast 3D基于該公司和Tripo AI合作開發的模型TripoSR,可顯著改進架構并強化功能。該模型适用于遊戲和虛拟現實(VR)開發者,以及零售、建築、設計和其他圖形密集型行業的專業人士。在遊戲和電影制作中有多種用例:
- 在實驗是關鍵的預制作期間,用該模型實作快速推理。
- 遊戲的靜态資産(背景物體、雜物、家具)
- 電子商務的 3D 模型
- 增強顯示(AR)/VR 的快速模型建立。
目前,Stable Fast 3D可通過Stability AI 的聊天機器人Stable Assistant 和 Stability AI API 使用。使用者可以在AI開源社群Hugging Face上使用該模型,Stability AI基于免費用于研究、非商業和商業用途的Stability AI 社群許可而釋出。
Stability AI官宣推出Stable Fast 3D後,社交媒體的網友迅速回帖回應,有網友問,該模型生成的UV網絡有多清晰,有多少個多邊形。有網友稱,喜歡Stability AI在釋出模型時附上的那個動圖,它展示了機器吐出通用的AI 圖像模型,并将它們直接扔進垃圾桶。有網友問,可不可以把生成的3D成果列印出來。
有評論稱,目前,3D 世界的内容創作是一個瓶頸。我們不想花錢請人手工制作元宇宙。自動生成資産應該是預設的,就像在現實世界中一樣。 Stability AI 的新模型是朝着正确方向邁出的一大步。
本文來自華爾街見聞,歡迎下載下傳APP檢視更多