GTC 2024:NVIDIA研究團隊公布文字轉3D AI模型LATTE3D,單一繪圖卡可在一秒將敘述轉換為物體或動物的3D模型

NVIDIA研究團隊在GTC 2024公布最新的文字轉3D研究成果:LATTE3D模型,相較一年前透過文字轉3D模型需費時近一小時、當前的技術進一步縮減至10秒左右,但LATTE3D僅須透過單張NVDIA A6000繪圖卡即可在近乎即時的1秒內產生相同品質的模型,同時產生的3D物件還可匯出到如NVIDIA Omniverse等符合USD通用場景描述圖形的軟體應用或平台,對於創作者,LATTE3D不需從頭設計或自3D資源庫尋找,即可將靈機一動的想法產生精細的3D物件。

▲LATTE3D可使用單張NVIDIA A6000將自然語言敘述在不到一秒產生3D物件,選定後在透過幾分鐘時間產生更精細的物件

LATTE3D模型是在NVIDIA A100 Tensor GPU進行模型訓練,包括3D形狀與使用ChatGPT的文字提示訓練,可以理解自然語言並提出使用者可能想像的3D物件,LATTE3D利用每個文字提示產生幾種不同的3D形狀選項供創作者選擇,選定後可在幾分鐘進行最佳化並提升品質;雖然示範的LATTE3D模型是以動物與日常物體進行訓練,不過開發人員能利用其它資料於LATTE3D相同的模型架構進行模型訓練,假設透過3D植物集訓練,即可產生用於庭院規畫的3D植物物件,或是結合3D家庭物件,則可應用於室內裝潢。

© 版权声明
THE END
喜歡就支持一下吧
点赞11 分享
評論 抢沙发
头像
歡迎您留下寶貴的見解!
提交
头像

昵称

取消
昵称表情代码图片

    暂无评论内容