NVIDIA 再次利用 AI 神技,建立 AI Avatar 演唱《Jingle Bells》

- 軒仔 - 2022-12-24

早前 NVIDIA CEO 黃仁勳現身 WirForce 2022 活動,後來在會場附近遇到唯有音樂旗下的李以樂 Lah 與李欣庭 Isteen 歌手正在現場直播演唱。

而當時黃仁勳現場點播了 Lady Gaga 為《捍衛戰士:獨行俠》所演唱的《Hold My Hand》,不過因兩位歌手沒有聽過的關係,最後改為點播了 Lady Gaga 在電影《一個巨星的誕生》當中演唱的《Always remember us this way》。

在當天的活動結束後,李以樂與李欣庭翻唱了《Hold My Hand》,其後黃仁勳也透過自家 AI 技術回應這次的點播。

由於黃仁勳本人比較害羞,所以交由 AI 模彷自己的容貌再透過 Avatar 的歌聲演唱聖誕歌曲。NVIDIA 團隊使用了 NVIDIA Omniverse ACE、Omniverse Audio2Face 和 Audio2Gesture 等技術,單純以 Toy Jensen 的聲音,便為整段表演產生出逼真的臉部表情和肢體動作。

Omniverse ACE 這項技術背後的團隊,花了多年時間來開發和微調演出中所展示的技術,更用了不到數小時的時間,就將他們創作的音樂曲目變成一段精美的動畫。