Toy Jensen 再度代替黃仁勳上陣獻唱 Jingle Bells ,展示 NVIDIA Omniverse ACE 平台如何快速建構栩栩如生的數位化身

NVIDIA 近年透過許多方式介紹嶄新的 AI 技術與應用,例如先前攜手 Valve 等遊戲開發商進行經典遊戲重製的示範,不僅介紹 NVIDIA 的 DLSS 3 技術,也同時介紹 NVIDIA 的遊戲重製工具 NVIDIA Remix ;隨著聖誕佳節將至, NVIDIA 團隊再度請出執行長黃仁勳…的數位化身 Toy Jensen ,演唱一段節慶感十足的 Jingle Bells ,背後的目的則是「順便」展示 NVIDIA 數位化身平台 NVIDIA Omniverse ACE 。

NVIDIA Omniverse ACE 的全稱是  NVIDIA Omniverse Avatar Cloud Engine ,是 NVIDIA Omniverse 的一部分,整合包括雲原生 AI 微服務與工作流程,旨在協助開發者簡易建構、自定義與佈署互動是虛擬分身,解決以往需要具專業知識、特殊設備與大量人力的工作流程。

▲透過結合 AI 技術不僅加速 AI 合成人聲的產生速度與自然性,同時也能用於產生虛擬化身肢體、臉部表情

 NVIDIA Omniverse ACE 藉由建立在 NVIDIA 的 Unified Compute Framework ( UCF ),僅需使用最簡易的程式碼即可建立與設定 AI 作業管道;而在這次的示範中, NVIDIA 團隊藉由 AI 技術,將樣本中的音符套用到 Toy Jensen 的合成聲音,相較傳統需實際錄音並進行訓練才能完成合成聲音,大幅縮短聲音建立的時間,同時虛擬分身的聲音與原唱還有著相同的音符與節奏。

後續再透過  NVIDIA Omniverse ACE、Omniverse Audio2Face 和 Audio2Gesture 技術的結合,使 Toy Jensen 能夠依據歌唱的聲音產生流暢的臉型與肢體動作;雖然產生這段影片所需的時間僅有幾個小時,不過背後相關技術的開發卻花了多年的時間。此外這段短片還邀請曾與 Michael Bublé 和 David Foster 合作過的作曲家兼製作人 Jochem van der Saag 進行伴奏。

NVIDIA Omniverse ACE 展現未來虛擬體驗的可能性,可應用於虛擬活動、線上教育、客戶服務,甚至在電玩遊戲、社群與虛擬實境中使用, NVIDIA 將在近期率先開放合作夥伴試用 NVIDIA Omniverse ACE 。

© 版權聲明
THE END
喜歡就支持一下吧
點讚5 分享
評論 搶沙發
頭像
歡迎您留下寶貴的見解!
提交
頭像

暱稱

取消
暱稱表情代碼圖片

    暫無評論內容