今天小編分享的科學經驗:實測英偉達AI遊戲引擎:與NPC實時聊天,中文流暢爆了,歡迎閱讀。
黃院士在《賽博朋克 2077》裡搞的智能 NPC,已經飙起中文了?
量子位的一手體驗,親眼見證了 NPC 們流利地用中英雙語對話,表情動作自然,口型也能對上……
如果不是眼前就有一塊螢幕,真的會有種身臨其境之感。
今年的 CES 展會上,英偉達用智能引擎 Avatar Cloud Engine ( ACE ) ,讓遊戲 NPC" 活 " 了起來,引起了不小的震撼。
△CES 上展示的智能 NPC
通過 ACE,不需要事先準備劇本,就能讓遊戲中的人物像真人一樣與玩家語音對話,還有相應的表情和肢體動作。
亮相當時,就有育碧、騰訊、網易、米哈遊等國内外遊戲大廠紛紛宣布将會跟進。
現在,通過加入翻譯模塊,遊戲裡的 NPC 們也學會了中文。
下面,就跟随量子位的鏡頭一起來感受一下中文對話版的賽博朋克世界吧 ~
智能 NPC 開飙中文
以 Kai 的身份走進拉面店的時候,迎接我們的依然是店主 Jin 和朋友 Nova。
故事的背景也和 CES 上展示的 DEMO 中相同,Nova 到拉面店中告訴 Jin 自己的公司剛籤下一筆大單的消息。
我們走到 Nova 面前,讓她幫忙推薦這裡最好吃的拉面,Nova 毫不猶豫地告訴我們牛肉拉面最好吃。
無論是說的内容還是表情神态都很自然,不過中文的發音有些魔性,但考慮到 Nova 是個外國人,倒也算是合理。
而當我們表達完感謝之後,Nova 直接爽快地向 Jin 點了一碗面,要請我們吃。
我們推脫說要自己付錢之後,便進入了閒聊的環節,通過對話得知,Nova 是這家店的常客。
同時,Nova 也再次給我們講述了她的公司籤下大訂單這件事。
在對 Nova 表示完祝賀之後,我們又把目光轉向了店主 Jin。
話題依然是從拉面開始,Jin 給我們推薦了醬油拉面和味增拉面,我們決定各來一碗。
Jin 一邊答應,一邊把做好的拉面端到我們的面前,我們開始借機詢問拉面的做法。
雖然 Jin 沒有用中文回答我們的問題,但從他說的話中也能看出,他是理解了我們說的話的。
不過,随着對話的繼續進行,Jin 開始在中英雙語之間反復橫跳,但理解始終是沒有問題的。
而且,有些時候即使沒有 100% 識别我們說的話,也不影響 Jin 理解我們想表達的意思。
Jin 說的話給我們接下來的交談提供了新的思路,我們開始順着 Jin 的回答來提問。
有意思的是,Jin 始終沒有忘記自己拉面館老板的身份,在談論 " 新東西 " 的時候還不忘推銷店裡的清酒。
仿照 CES 上的 DEMO,我們又問了 Jin 關于人工智能的看法。
不同的是,Jin 在這裡并不覺得自己可能是 AI,然後打趣說:
就算我是 AI,那至少也是個會做拉面的 AI,不是嗎?
當然,這是這次體驗遊戲的背景設定使然——在 ACE 中,可以對人物的性格等信息進行預設,得到不同的回復風格。
一番體驗過後,NPC 的表現足以讓人印象深刻,他們不再是冰冷的背詞機器,而是像真人一樣 " 活 " 了起來。
在這當中,英偉達的 ACE 平台功不可沒。
真 · 中文 NPC 不遠了?
驅動 NPC 的引擎主要可以分為三個模塊——其中兩個來自英偉達 ACE 平台,一個來自第三方。
具體來說,NVIDIA Riva 和 NVIDIA Audio2Face 這兩個模塊的 ACE 微服務,分别負責處理語音和人物表情動作。
具體的對話内容,則由第三方 Convai 使用大模型生成。
由于 Convai 只支持英文,所以當我們說中文時,還要經過一步翻譯環節,才能送入模型,再把模型返回的英文結果翻譯回中文。
這也就解釋了為什麼會在 NPC 人物的對話中會出現中英交替的現象。
但 ACE 平台是開放的,中間負責生成内容的模型并非不可替換;另一方面,國内廠商也在 CES 的時候就宣布對這項技術進行跟進。
或許不久,就真的可以用中文和 NPC 一起玩耍了,你會期待這樣的遊戲嗎?