AI in Game,大模型能力與實時音視頻技術融合,交出AI應用新答卷

隨著AI的技術進步和工具普及,尤其是在這兩年的躍進之后,AI在游戲行業內的應用已經逐步由理念設想推向落地實踐。從蔡浩宇披露的AI新游《Whispers From The Star》到GDC上各大廠家呈現的游戲+AI新亮點,我們看到了更多AI與游戲的結合方式,不僅是制作端AIGC能力的融入,連游戲內互動體驗也正因AI的崛起而卷入這場革命。

AI交互進化,打破傳統邊界

從“工具”到“伙伴”,重塑互動體驗

游戲行業很早便已經開始使用“AI”一詞,然而,這類所謂的AI從本質上來說還是“提線木偶”——它們的行為被預設腳本牢牢束縛,在龐大的行為庫中排列組合,構建出與玩家的互動。而大語言模型和AI實時語音對話技術在游戲中的應用,徹底打破了傳統互動模式的邊界。角色能夠從話語中思考理解玩家的意圖并實時給出個性化反饋,不再只能根據明確的指令導向固定的行為,這為游戲中的虛擬角色賦予了高度擬人化的交互能力。

無論是游戲內的NPC、你的隊友亦或是你的游戲小助手,都將成為有溫度、有智慧、有個性的 “數字生命”,為玩家以及社區帶來全新的情感化、智能化交互體驗,提供獨有的情緒價值。

|AI NPC:從“工具人”到“游戲原住民”,打破傳統敘事邊界

傳統NPC的“機械感”始終是打破沉浸體驗的頑疾——玩家早已厭倦了預設腳本和復讀機般重復臺詞的角色,這同時也大大降低了游戲的重玩價值。而AI技術的介入,尤其是AI實時對話能力的加持正在顛覆這種單向交互模式,讓NPC真正成為游戲世界的“原住民”,能夠與玩家一同構建出豐富且個性化的劇情體驗。

通過AI技術加持,《Whispers from the Star》支持玩家實時使用自然語言發送指令,而游戲的主角Stella也會隨著玩家的指令作出或憤怒或欣喜的個性化反饋。這款以AI語音交互為核心玩法的太空生存游戲展現出了與傳統游戲截然不同的創新性,尤其是AI實時對話對劇情走向的深度影響,為游戲互動性帶來了新的維度。跳脫傳統游戲的敘事邊界,玩家不必拘泥于游戲提供的選項,而是可以真正與Stella自由交流,通過對話幫助她完成逃離。每一次對話,都可能將游戲引入未知的方向,并激發全新的故事。

在社交推理游戲《太空殺》中,AI NPC的融入也為游戲帶來了全新玩法和更多變數。獨特的“內鬼挑戰”玩法由兩位真人玩家共同對抗8名AI NPC。游戲中,AI NPC能夠獨立思考,結合實時且自然的語音對話,他們會像真人一樣,充分表達自己的觀點和推理,并根據局勢變化臨場偽裝、結盟、指控,與玩家一同動態演繹故事。復雜的互動、真實的交流與推理,AI NPC為《太空殺》玩家帶來了打破劇本瓶頸的持續新鮮體驗。

圖片

|AI 助手:從“說明書”到“外置大腦”,懂游戲也懂你

隨著游戲技術和基礎設施的不斷迭代,游戲本身的復雜性也在不斷增長,這為教學系統,尤其是新手引導帶來了持續的挑戰。以《王者榮耀》為例,游戲內已有近百位技能各異的英雄搭配百件功能各異的裝備,玩家需要較長時間去熟悉。而游戲內的各種英雄介紹就像“說明書”,內容生硬,很難在實戰中應用。如今,結合AI實時對話能力,AI成了玩家的“外置大腦”,徹底改變了新手玩家進游學習期的體驗模式。

《王者榮耀》的AI Coaching可在訓練對決中結合玩家及對局數據精準給出當前所使用英雄的技能與裝備教學,并會進行實時對線指導,在逆風局、帶線局等各種不同情況下給出不同的游戲策略,甚至預測局勢走向,為玩家提供大局觀指導,真正做到邊玩邊學。同時,AI還能夠復刻各個英雄的音色,帶來更沉浸的教學體驗,強大的多語言能力可支持中、英、西、葡、阿、土等多語種,助力游戲全球化運營。

圖片

除了《王者榮耀》,另一款國民級手游《和平精英》的數字代言人吉莉經過升級迭代,也將以語音對話的形式加入到玩家的實時對局中。玩家不僅能在游戲大廳與吉莉交流,在游戲中也能通過自由麥語音與吉莉實時對話,像是提問如何調節靈敏度、突擊步槍與沖鋒槍哪個秒傷更高等等,在游戲中遇到的任何問題,都能通過語音向吉莉發問并得到合理解答。吉莉還能夠通過玩家語言中的語氣詞強度(如 "艸!這都能輸")以及上下文語義特征(如反復提及 "隊友太坑"),實時判斷玩家的情緒狀態,并針對不同情緒類型,調用差異化的響應策略,比如對沮喪玩家給予鼓勵,為興奮玩家打call……情緒價值拉滿,與用戶主動建立具有深度共鳴的互動關系。

圖片

|AI 隊友:從“人機操作”到“開黑大腿”,自然溝通并肩作戰

多人競技游戲中,隊友的質量往往決定了游戲的成敗和體驗的優劣。但當玩家不想社交時,游戲匹配的人機隊友卻很難填補真人玩家的空缺。“人機操作”已經成了很多游戲中離譜操作的代名詞。而AI驅動的智能隊友,正在重新定義這一社交生態。

以往FPS玩家只能通過快捷鍵和指令輪盤,向AI隊友下達"攻擊"或"跟隨"等簡單命令。但這些命令缺乏目標和細節,很難實現玩家與人機隊友之間的戰術配合。而在《暗區突圍》中,玩家可以用自然語言與自己的AI隊友交流,AI隊友可以觀察實時的戰斗環境,真正理解玩家的戰術意圖,進而靈活應對戰場變化。“我清一樓你清二樓”、“正面牽制等我繞后”這些復雜的長序列戰術指令AI 隊友F.A.C.U.L.都可以聽懂執行并推測玩家意圖進行實時語音反饋。

圖片

在《和平精英》的海島地圖中,玩家也可以與AI隊友匹配共同戰斗,而且有三個不同性格的隊友可選。玩家可以盡情與AI交流或指揮,如果問他們能否給自己一些子彈,AI隊友還會迅速跑過來響應玩家需求。對于不熟悉玩法的新人而言,AI隊友的存在還具有優秀的引導能力,幫助玩家度過新手階段。例如縮圈的時候他們會提醒玩家跑進安全區,附近如果有敵人的腳步聲出現也會提醒玩家防守警戒。這種 AI 驅動的隊友,不僅降低了玩家的社交門檻,還為那些不擅長團隊協作的玩家提供了一個包容和支持的環境。它讓玩家在游戲中感受到的不再是孤獨,而是一種被陪伴、被支持的溫暖。

圖片

輕松實現全開麥實時語音交互

騰訊云 GME?AI 實時對話解決方案

作為行業領先的RTC廠商,騰訊云實時音視頻(TRTC)此前已依托騰訊海量游戲開發運營經驗,基于真實游戲場景專門優化推出了一站式游戲語音解決方案——游戲多媒體引擎(GME)。隨著AI能力的快速突破,以及騰訊內部在游戲AI方向上的超前探索,騰訊云TRTC進一步將GME與AI實時通話能力整合,為游戲行業用戶搭建出性能最優、延時最低的對接通道,在內嵌騰訊云ASR的同時,整合業內領先的LLM/TTS方案進行深度優化,將AI對話總延遲低至1000ms,媲美人類對話反應速度,并融入聲紋識別、語義斷句、背景音、承接語等創新能力,使對話效果更自然、擬真。

圖片

在實現音視頻數據高效采集、處理、傳輸的基礎上,GME AI實時對話解決方案疊加了智能降噪、智能打斷、上下文管理等游戲場景所需的核心能力,只需少量開發就可快速實現全開麥的AI實時語音交互,方便游戲行業開發者快速將AI NPC、AI 游戲助手、AI 隊友等AI新能力應用到自己的游戲中,為用戶帶來游戲交互新體驗。

圖片

RTC協議,全鏈路深度優化

全球AI對話總延遲低至1000ms以內

GME AI實時對話解決方案針對社交、游戲等場景的音視頻編解碼器進行深度優化,碼率、延時、系統資源消耗等關鍵技術指標均為業界領先,通過流式分片傳輸、連接池等機制,全球端到端音視頻傳輸延時可控制在300ms內,AI對話全鏈路總延遲低于1000ms。六大洲服務可用,全球3200+加速節點,且具備多服務容災能力,保障業務全球高質量穩定運行。

基于真實游戲場景優化

全開麥自由交流,AI對話媲美真人

利用回聲消除、噪聲抑制等專利算法,強力抑制鍵盤聲、鼠標聲等游戲場景常見噪音。引入全新降噪引擎,輸入端音視頻實時AI降噪,提升ASR識別準確度。針對口語化表達、游戲專有名詞識別困難等挑戰,方案基于真實游戲場景音頻數據進行標注與模型微調,并可針對不同游戲客戶定制專屬熱詞詞庫,實現包括英語、西班牙語、日語、韓語、中文以及23種方言和130種國際語言的ASR精準識別

方案內置雙講打斷、上下文管理等AI實時對話核心能力。玩家可以用全開麥的方式與AI自由溝通。不需要玩家定義一句話是否說完,AI也能很清晰地識別玩家想表達的意思,在AI發言過程中,玩家也能隨時打斷AI,開啟新話題或下達新指令,真正實現媲美真人的溝通交互體驗。

3D空間音頻等獨有技術

帶來更多有趣的游戲AI語音玩法

GME AI實時對話解決方案提供獨有的3D語音技術,通過范圍音頻、人聲模糊、空氣衰減模擬等效果,完整還原聲音的方位細節,玩家可根據隊友語音“聽聲辯位”,帶來沉浸式語音體驗。方案還與Wwise音頻引擎深度融合,獨創性地解決了語音開麥時游戲背景音效丟失的問題,并可結合游戲音效實現更豐富玩法。同時,GME AI實時對話解決方案還支持音色克隆功能,提供復刻音色,支持自定義音量、語速等參數,為游戲角色賦予個性化的語音。

多端兼容,低成本接入

一次接入滿足多樣化語音需求

GME AI實時對話解決方案整合并優化了AI對話全鏈路所需的各項能力,一站式解決方案幫助開發者快速將AI對話功能無縫集成到各類游戲應用中,無需深入處理復雜的技術細節,顯著縮短產品開發周期

GME AI實時對話解決方案適配主流主機平臺;深度適配 UE、Unity、Cocos 等主流游戲引擎,支持包括iOS、Android、Windows、macOS、Web、Flutter在內的多個平臺,兼容超過20000種設備模型。方案高度開放,支持企業自定義大模型(LLM)和語音合成(TTS),配置LLM和TTS服務的賬戶憑證即可將第三方LLM和TTS無縫集成到服務后臺。

您可通過我們提供的無代碼快速跑通AI實時對話功能(https://console.cloud.tencent.com/trtc/conversational-ai),全程零門檻無代碼,快速配置、便捷測試AI實時對話能力。

本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/diannao/84979.shtml
繁體地址,請注明出處:http://hk.pswp.cn/diannao/84979.shtml
英文地址,請注明出處:http://en.pswp.cn/diannao/84979.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

Android Studio 2022.2.1.20 漢化教程

查看Android Studio 版本 Android Studio Flamingo | 2022.2.1 Patch 2 下載:https://plugins.jetbrains.com/plugin/13710-chinese-simplified-language-pack----/versions/stable

常見的分詞算法

常見的分詞方法分類如下: 類型名稱說明優缺點1?? 基于空格/標點Word-level以空格或標點劃分,如 "Hello, world!" → ["Hello", ",", "world", "!"]?簡單,?無法處理新詞,詞…

湖北理元理律師事務所觀察:債務優化如何成為民生安全網

據央行2023年報告,中國家庭債務收入比達137.8%。面對債務高壓,湖北理元理律師事務所的實踐揭示:專業債務規劃的價值不僅是減負數字,更是構建社會穩定的微觀防線。 一、從“催收恐懼”到“主動管理”的轉變 該所服務數據顯示&…

服務器密碼安全運維解決新思路:憑據管理SMS+雙因素SLA認證結合的方案

引言:云服務器安全成本困局 在云計算滲透率突破60%的今天,中小企業正面臨嚴峻的安全悖論:某權威機構數據顯示,72%的云上數據泄露事件源于憑據管理不當,而傳統安全解決方案的采購成本往往超過中小企業年利潤的8%。這種…

Vision Transformer網絡結構

0.前言 參考CSDN大佬(太陽花的小綠豆)的代碼,梳理了一下vit的網絡結構,代碼地址如下: deep-learning-for-image-processing/pytorch_classification/vision_transformer at master WZMIAOMIAO/deep-learning-for-image-processing GitHub …

C++ 圖像處理庫 CxImage 簡介 (遷移至OpenCV)

文章目錄 核心功能特點局限性與替代方案常用方法構造函數從數組創建圖像訪問屬性訪問像素點Windows平臺支持 常用方法遷移至OpenCV CxImage 是一款功能強大的圖像處理類庫,主要用于 Windows 平臺的圖像處理任務。它支持多種圖像格式的加載、保存、編輯及特效處理&am…

【博客系統】博客系統第十一彈:從零開始在 Linux 系統上搭建 Java 部署環境并部署 Web 項目

搭建 Java 部署環境 JDK 1. 更新軟件包 apt 命令詳細介紹 sudo apt-get update2. 安裝 OpenJDK 查找 JDK 包 apt list | grep "jdk"安裝 JDK sudo apt install openjdk-17-jdk注意: 此處安裝的是 OpenJDK,OpenJDK 是一個開源版本的 JDK&am…

智能外呼系統中 NLP 意圖理解的工作原理與技術實現

智能外呼系統通過整合語音識別(ASR)、自然語言處理(NLP)和語音合成(TTS)等技術,實現了自動化的電話交互。其中,NLP 意圖理解是核心模塊,負責解析用戶話語中的語義和意圖&…

Sigma-Aldrich胰蛋白酶細胞解離方案速覽

Sigma-Aldrich_胰蛋白酶用于細胞培養 細胞解離是細胞傳代過程中的一個步驟,即細胞從預處理表面分離,形成懸浮液。這些懸浮液對于傳代培養重新接種、細胞計數分析和細胞增殖非常重要。有多種蛋白水解酶可用來從粘附基質上脫離細胞,胰蛋白酶就…

寶塔安裝WordPress程序

寶塔安裝WordPress程序 一、提前準備1,下載WordPress2,在寶塔創建站點 二、部署項目1,上傳下載的wordpress壓縮包至創建的項目根目錄下并解壓 三、wordpress安裝1,在瀏覽器打開創建的網站2,開始按照流程安裝配置數據庫…

【LangChain】框架解析

目錄 🌟 前言🏗? 技術背景與價值🩹 當前技術痛點🛠? 解決方案概述👥 目標讀者說明 🧠 一、技術原理剖析📊 核心架構圖解💡 核心作用講解🔧 關鍵技術模塊說明?? 技術選…

百度之星2024 初賽第一場 補給

百度之星2024 初賽第一場 補給 題干描述問題分析:C代碼Java代碼:Python代碼補充說明: 題干描述 參考自馬蹄集OJ,原文鏈接1 可怕的戰爭發生了,小度作為后勤保障工作人員,也要為了保衛國家而努力。 現在有 …

JavaScripts console.log和console.dir區別

console.log 和 console.dir 都是 JavaScript 中用于在瀏覽器控制臺打印信息的方法 ,二者主要有以下區別: 輸出內容和格式 console.log:主要用于輸出簡單的日志信息,直接打印數據的字符串表示 。對于對象、數組等引用類型&#…

uniapp 開發企業微信小程序時,如何在當前頁面真正銷毀前或者關閉小程序前調用一個api接口

在 UniApp 開發企業微信小程序時,若需在頁面銷毀或小程序關閉前調用 API 接口,需結合頁面生命周期和應用生命周期實現。以下是具體實現方案及注意事項: 一、在頁面銷毀前調用 API(頁面級) 通過頁面生命周期鉤子 onUnl…

聊聊 Metasploit 免殺

各位小伙伴們,晚上好! 咱們今天打開宵夜“安全食材箱”,聊聊滲透測試繞過殺毒(免殺)的那些門道。你可以把免殺理解為——深夜做宵夜時,家里有人睡覺,但你非得去廚房整點美食,還不能…

Android高級開發第二篇 - JNI 參數傳遞與 Java → C → Java 雙向調用

文章目錄 Android高級開發第二篇 - JNI 參數傳遞與 Java → C → Java 雙向調用引言JNI基礎回顧JNI中的參數傳遞基本數據類型傳遞字符串傳遞數組傳遞對象傳遞 Java → C → Java 雙向調用從C/C調用Java方法實現一個完整的回調機制 內存管理與注意事項性能優化提示結論參考資源 …

2025-05-28 Python深度學習8——優化器

文章目錄 1 工作原理2 常見優化器2.1 SGD2.2 Adam 3 優化器參數4 學習率5 使用最佳實踐 本文環境: Pycharm 2025.1Python 3.12.9Pytorch 2.6.0cu124 ? 優化器 (Optimizer) 是深度學習中的核心組件,負責根據損失函數的梯度來更新模型的參數,使…

Web攻防-SQL注入增刪改查HTTP頭UAXFFRefererCookie無回顯報錯

知識點: 1、Web攻防-SQL注入-操作方法&增刪改查 2、Web攻防-SQL注入-HTTP頭&UA&Cookie 3、Web攻防-SQL注入-HTTP頭&XFF&Referer 案例說明: 在應用中,存在增刪改查數據的操作,其中SQL語句結構不一導致注入語句…

Windows MongoDB C++驅動安裝

MongoDB驅動下載 MongoDB 官網MongoDB C驅動程序入門MongoDB C驅動程序入門 安裝環境 安裝CMAKE安裝Visual Studio 編譯MongoDB C驅動 C驅動依賴C驅動,需要先編譯C驅動 下載MongoDB C驅動源碼 打開CMAKE(cmake-gui) 選擇源碼及輸出路徑,然后點擊configure …