国产精一区二区_午夜视频99_免费白白视频_中文字幕一区免费

GDC之旅丨如何為全球游戲玩家提供高品質、沉浸式的音頻體驗

網易云信
+ 關注
2024-04-23 11:12
1460次閱讀
上周,被譽為“全球游戲技術風向標”的游戲開發者大會 GDC 2024(Game Developers Conference 2024)在美國舉辦。來自全球各地的游戲開發者齊聚舊金山,圍繞游戲 AI、VR/AR、編程、敘事、獨立游戲等多主題展開研討,展示最新游戲開發工具和服務。
GDC之旅丨如何為全球游戲玩家提供高品質、沉浸式的音頻體驗

作為支撐了眾多國內及海外游戲客戶的服務提供商,網易數智也在 GDC 大會亮相,網易數智游戲行業部 CTO 陶建容在機器學習峰會上帶來精彩分享。

除此之外,我們也與現場開發者面對面聊了聊網易云信在游戲內語音互動服務的解決方案和實踐經驗,例如:如何提升玩家在游戲中的沉浸式體驗、如何通過 AI 技術實現游戲音頻降噪、全球玩家如何在游戲內實現實時順暢的溝通等話題。

如何提升玩家在游戲中的沉浸式體驗?

首先,來談一談沉浸式語音體驗。游戲語音發展至今,玩家的需求已經從單一的能語音聊天,轉向更貼近現實場景的沉浸式體驗需求—— 從“聽個聲”到“聽得真”。

最為明顯的就是強語音訴求的 FPS 游戲。舉個例子,當你沒有聽清楚耳機里傳來的腳步聲,突然轉角遇到手持消音 AK47 的隔壁壯漢,又或者你正在開心舔包時,壓著腳步摸過來的四位開黑佬,對著你背后一通掃射......連踩到石子的輕微響動都可能扭轉整個游戲局勢,可見在游戲中,玩家能“聽得真”尤為重要。

如果聲音有 3D 感,玩家的沉浸感和真實感就會提升很多。3D 音效,也稱為空間音效(Spatial Sound),是通過在音頻信號中添加空間信息,讓聽眾可以感受到聲音來自于特定的位置和空間環境,給游戲玩家帶來更沉浸式、更真實的聲音效果。

例如在玩 FPS 游戲過程中,你左后方的腳步聲,同伴在你右邊換彈夾的聲音,又或是左后方窗戶被打碎的聲音.....你都能通過 3D 音效很好地被感知,依靠游戲內的空間音效來判斷對手身位,聽著真聲兒來完成絕命一擊,那簡直太酷了。

本質上,3D 音效就是基于人耳的一些特殊心理聲學效應,通過一些聲學相關算法模擬,仿造出似乎存在但實際虛構的聲音。網易云信提供的 3D 音效 AI 方案就能夠將聲音來源方向模擬成來自三維空間的特定位置,包括前后左右和上下,從而營造出更加真實和沉浸的音頻體驗,而且,這一技術已經成功集成到網易云信音視頻 SDK 中,正迅速落地到各種游戲項目中。

如何通過AI技術實現游戲音頻降噪?

再來說說環境噪聲,相信大家都有過這樣的體驗——在游戲語音開黑時,跟隊友緊張配合到一半,如果其中一名隊友身處網吧,對方耳機里傳來嘈雜且尖銳的環境音是十分糟心的體驗,甚至會影響整個團隊的發揮。那么,在這種場景下,降噪就成為了提升游戲體驗的必選項。

音頻降噪中最具挑戰的噪聲類型有兩種:非平穩噪聲和瞬態噪聲。傳統的 AI 降噪方案往往無法很好地平衡噪聲與音質,通常噪聲沒了,通話也受到了牽連,要達成兩者的平衡,只能提升成本。

網易云信為解決游戲廠商這一窘境,給出了自研 “AI 降噪”算法,在有效降噪、提升音質的同時,還做到了降本增效。這項技術通過智能分析環境音成分,自動甄別并過濾環境噪聲。開啟 AI 降噪后,在嘈雜的環境中能針對背景人聲、鍵盤聲等非平穩噪聲進行定向降噪,并提升對環境穩態噪聲的控制,保留更純粹的人聲,對于瞬態噪聲,比如呼喊聲、敲桌子聲、關門聲、桌椅挪動聲等,也能更有效地抑制。

經常玩兒手游的朋友都知道,手游平臺的語音一直存在著一個割裂游戲體驗的問題:玩家一開麥克風,游戲聲音就會如電話音一般,又像蒙上了一個罩子,讓體驗割裂。在這一方面,網易云信也給出了處理方案:回聲消除智能 AEC(聲學回聲消除)算法。游戲語音不僅完成了回聲消除,還能讓游戲保持媒體音量,開麥也不會影響游戲聲音的品質。

全球玩家如何在游戲內實時順暢溝通?

在這一方面,不得不提的是網易云信的網絡基礎設施架構—— WE-CAN 全球智能路由網絡。網易云信將加速節點部署在海外人口稠密地區、主要的經濟發達地區等,并兼顧全球多個主要的運營商網絡。通過將這些節點組織起來,同時令各個節點之間進行互相的質量探測,實時掌握每個節點的狀態,最終當消息和媒體流數據傳輸發生時,WE-CAN 控制中心就能通過智能路由算法提供一條最優的傳輸路徑,以此保證高效率的傳輸效果。

數百個加速節點,覆蓋 196 個國家和 567 個地區,幫助眾多游戲產品實現玩家就近接入,讓游戲玩家體驗低延時、不卡頓的游戲實時語音服務。同時,實時語音服務適配上萬臺設備機型,能夠適應全球復雜的機型和網絡狀況。

換言之,無論游戲玩家處于全球何處,無論使用何種機型,網易云信的實時語音服務都能以極低延時提供游戲“Buff”,幫助玩家實現實時順暢的溝通。

此次 GDC 之旅,我們能夠清晰的感知到:中國游戲產業已經在全球建立了較強的競爭力,游戲成為中國文化輸出的重要途徑之一。

 

網易云信的游戲語音方案具備與頭部游戲大廠項目落地經驗,圍繞實時音頻、范圍語音、空間音效、音頻轉發路由等場景為玩家實現了豐富的音頻互動玩法。

未來,網易云信也將提供更加全面的游戲行業基建能力,讓游戲廠商能更專注于內容和玩法,共同助力國內游戲走向世界。

[免責聲明]

原文標題: GDC之旅丨如何為全球游戲玩家提供高品質、沉浸式的音頻體驗

本文由作者原創發布于36氪企服點評;未經許可,禁止轉載。

資深作者網易云信
網易云信
0
消息通知
咨詢入駐
商務合作