NVIDIA 近年透過許多方式介紹嶄新的 AI 技術與應用，例如先前攜手 Valve 等遊戲開發商進行經典遊戲重製的示範，不僅介紹 NVIDIA 的 DLSS 3 技術，也同時介紹 NVIDIA 的遊戲重製工具 NVIDIA Remix ；隨著聖誕佳節將至， NVIDIA 團隊再度請出執行長黃仁勳…的數位化身 Toy Jensen ，演唱一段節慶感十足的 Jingle Bells ，背後的目的則是「順便」展示 NVIDIA 數位化身平台 NVIDIA Omniverse ACE 。
NVIDIA Omniverse ACE 的全稱是 NVIDIA Omniverse Avatar Cloud Engine ，是 NVIDIA Omniverse 的一部分，整合包括雲原生 AI 微服務與工作流程，旨在協助開發者簡易建構、自定義與佈署互動是虛擬分身，解決以往需要具專業知識、特殊設備與大量人力的工作流程。
▲透過結合 AI 技術不僅加速 AI 合成人聲的產生速度與自然性，同時也能用於產生虛擬化身肢體、臉部表情
NVIDIA Omniverse ACE 藉由建立在 NVIDIA 的 Unified Compute Framework ( UCF )，僅需使用最簡易的程式碼即可建立與設定 AI 作業管道；而在這次的示範中， NVIDIA 團隊藉由 AI 技術，將樣本中的音符套用到 Toy Jensen 的合成聲音，相較傳統需實際錄音並進行訓練才能完成合成聲音，大幅縮短聲音建立的時間，同時虛擬分身的聲音與原唱還有著相同的音符與節奏。
後續再透過 NVIDIA Omniverse ACE、Omniverse Audio2Face 和 Audio2Gesture 技術的結合，使 Toy Jensen 能夠依據歌唱的聲音產生流暢的臉型與肢體動作；雖然產生這段影片所需的時間僅有幾個小時，不過背後相關技術的開發卻花了多年的時間。此外這段短片還邀請曾與 Michael Bublé 和 David Foster 合作過的作曲家兼製作人 Jochem van der Saag 進行伴奏。
NVIDIA Omniverse ACE 展現未來虛擬體驗的可能性，可應用於虛擬活動、線上教育、客戶服務，甚至在電玩遊戲、社群與虛擬實境中使用， NVIDIA 將在近期率先開放合作夥伴試用 NVIDIA Omniverse ACE 。
暂无评论内容