實測英偉達AI遊戲引擎:與NPC即時聊天,中文流暢爆了
https://www.qbitai.com/2024/03/124892.html
克雷西發自國際莊
賽博朋克拉麵店開飆中文
黃院士在《Cyberpunk2077》裡搞的智能NPC,已經飆起中文了?
量子位的一手體驗,親眼見證了NPC們流利地用中英雙語對話,表情動作自然,口型也能
對上…
如果不是眼前就有一塊螢幕,真的會有種身臨其境之感。
今年的CES展上,英偉達用智慧引擎Avatar Cloud Engine (ACE),讓遊戲NPC「活」了起
來,引起了不小的震撼。
透過ACE,不需要事先準備劇本,就能讓遊戲中的人物像真人一樣與玩家語音對話,還有
對應的表情和肢體動作。
亮相當時,就有育碧、騰訊、網易、米哈遊等國內外遊戲大廠紛紛宣布將會跟進。
現在,透過加入翻譯模組,遊戲裡的NPC們也學會了中文。
下面,就跟著量子位元的鏡頭一起來感受一下中文對話版的賽博龐克世界吧~
智慧NPC開飆中文
以Kai的身份走進拉麵店的時候,迎接我們的依然是店主Jin和朋友Nova。
故事的背景也和CES上展示的DEMO相同,Nova到拉麵店告訴Jin自己的公司剛簽下一筆大單
的消息。
我們走到Nova面前,讓她幫忙推薦這裡最好吃的拉麵,Nova毫不猶豫地告訴我們牛肉拉麵
最好吃。
無論是說的內容還是表情神態都很自然,不過中文的發音有些魔性,但考慮到Nova是個外
國人,倒也算是合理。
而當我們表達完感謝之後,Nova直接爽快地向Jin點了一碗麵,要請我們吃。
我們推脫說要自己付錢之後,便進入了閒聊的環節,透過對話得知,Nova是這家店的
常客。
同時,Nova也再次給我們講述了她的公司簽下大訂單這件事。
在對Nova表示完祝賀後,我們又把目光轉向了老闆Jin。
話題依然是從拉麵開始,Jin給我們推薦了醬油拉麵和味增拉麵,我們決定各來一碗。
Jin一邊答應,一邊把做好的拉麵端到我們的面前,我們開始趁機詢問拉麵的做法。
雖然Jin沒有用中文回答我們的問題,但從他說的話中也能看出,他是理解了我們說的話
的。
不過,隨著對話的持續進行,Jin開始在中英雙語之間反覆橫跳,但理解始終是沒有問題
的。
而且,有些時候即使沒有100%辨識我們說的話,也不影響Jin理解我們想表達的意思。
Jin說的話給我們接下來的交談提供了新的思路,我們開始順著Jin的回答來提問。
有趣的是,Jin始終沒有忘記自己拉麵館老闆的身份,在談論「新東西」的時候還不忘推
銷店裡的清酒。
仿照CES上的DEMO,我們又問了Jin關於人工智慧的看法。
不同的是,Jin在這裡並不覺得自己可能是AI,然後打趣說:
就算我是AI,那至少也是個會做拉麵的AI,不是嗎?
當然,這是這次體驗遊戲的背景設定使然——在ACE中,可以對人物的性格等訊息進行預
設,得到不同的回應風格。
一番體驗過後,NPC的表現足以讓人印象深刻,他們不再是冰冷的背詞機器,而是像真人
一樣「活」了起來。
在這當中,英偉達的ACE平台功不可沒。
真中文NPC不遠了?
驅動NPC的引擎主要可分為三個模組-其中兩個來自英偉達ACE平台,一個來自第三方。
具體來說,NVIDIA Riva和NVIDIA Audio2Face這兩個模組的ACE微服務,分別負責處理語
音和人物表情動作。
具體的對話內容,則由第三方Convai使用大模型產生。
由於Convai只支援英文,所以當我們說中文時,還要經過一步翻譯環節,才能送入模型,
再把模型回傳的英文結果翻譯回中文。
這也解釋了為什麼會在NPC人物的對話中會出現中英交替的現象。
但ACE平台是開放的,中間負責產生內容的模型並非不可替換;另一方面,國內廠商也在
CES的時候就宣布對這項技術進行跟進。
或許不久,就真的可以用中文和NPC一起玩了,你會期待這樣的遊戲嗎?
--