NVIDIA於智慧城市世界大會開展前夕宣布基於NVIDIA Metropolis視覺AI應用工具的NVIDIA AI blueprint(AI藍圖),NVIDIA AI Blueprint適用於視訊搜尋與摘要,可協助幾乎所有產業的開發者建立可分析視訊與影像內容的視覺AI代理,建構在NVIDIA AI Blueprint的AI代理能用於回答問題、產生摘要與針對特定情境啟用警示,相較傳統需使用死板的軟體程式碼,使用者可利用自然語言提示客製化這些視覺AI代理,進一步降低產業與智慧城市部署AI助理的門檻。
包括埃森哲(Accenture)、Dell Technologies與聯想集團等全球系統整合商及解決方案供應商都將提供NVIDIA AI Blueprint的視覺搜尋與摘要,並應用於工廠、倉庫、商店、機場、交通等領域。開發者可免費體驗與下載NVIDIA AI Blueprint,並可透過NVIDIA AI Enterprise於加速資料中心及雲端部署。
視覺AI代理由VLM是視覺語言模型為基礎,VLM是結合電腦視覺與語言理解的生成式AI模型,用於解釋實體世界與執行推論任務;而NVIDIA AI Blueprint透過搭配NVIDIA NIM微服務配置如NVIDIA VILA的VLM,或像Meta Llama 3.1 405B大型語言模型,抑或適用GPU加速問題解答與語境感知檢索增強的AI模型,開發者可輕鬆交換其它VLM、LLM與圖形資料庫,同時透過NVIDIA NeMo平台因應環境與個案進行微調。
藉由NVIDIA AI Blueprint可大幅縮減開發人員研究與最佳化智慧城市應用的AI模型,藉由於邊際、地端或雲端部署NVIDIA GPU環境,即可加速整理視訊內容與識別重要過程。
▲NVIDIA AI Blueprint為NVIDIA Metropolis的一部分
以倉儲管理環境為例,透過NVIDIA AI Blueprint建構的AI代理可在工作人員違反安全規範時進行提醒;在智慧交通環境可用於識別交通事故,同時產生報告協助處理流程與警急應變;在公共基礎設施維護領域則可要求AI代理檢視由空拍機取得的畫面,找出如道路老化、需維護的火車軌道或橋梁等。此外於娛樂應用領域,視覺AI也能為視力受損人員為運動賽事進行影片摘要,或是協助標示用於其它AI訓練的大量視覺資料集。
埃森哲已經將NVIDIA AI Blueprint與其Accenture AI Refinery進行整合;而馬來西亞的ITMAX及越南的FPT等位於東南亞的全球系統整合商正積極建置以NVIDIA AI Blueprint為基礎、適用於視訊搜尋與摘要的AI代理,用於開發智慧城市與智慧交通應用;Dell Technologies則透過VLM與代理方式搭配Dell NativeEdge平台增強邊際AI應用與開發新功能,功能。
適用於 Dell AI Factory with NVIDIA 的 Dell Reference Design,以及適用於視
訊搜尋與摘要的 NVIDIA AI Blueprint,將支援針對資料中心、邊緣與本地端多模式企業用例專用 AI工作流程裡的 VLM 功能。聯想則將基於NVIDIA技術支援的Lenovo Hybrid AI解決方案添加NVIDIA Blueprint。
此外如NVIDIA Metropolis生態系的智慧城市供應商K2K等,將利用NVIDIA AI Blueprint建立可分析攝影機的即時路況的AI代理。
暂无评论内容