沉浸式文旅新玩法-基于4D GS技術的真人數字人賦能VR體驗升級

線下沉浸式劇場與 LBE VR 相結合,會碰撞出什么樣的火花?本次 PICO 視頻、東方演藝集團與火山引擎一起,將沉浸式演出《只此周莊》的部分場景復刻到了 VR 世界,讓用戶在虛擬的古代周莊夜市里,體驗了古老的故事以及精彩紛呈的歌舞表演。

在傳統的 VR 內容中,通常使用全景相機錄制或 CG 技術制作人物資產。這兩種方法,前者只能滿足 3DoF 場景,后者往往受到成本和制作期的約束,難以呈現高質量人物效果。本次項目采用火山引擎的「空間視頻制作服務」完成 3D 真人數字人的制作,讓數字人保留了真人表演的細膩感,同時滿足 LBE VR 這種 6DoF 自由游覽的體驗形式。

除了驚艷的視覺效果,產品還配套提供了渲染 SDK,降低創作者的集成復雜度,幫助用戶實現拍攝到 3D 模型的快速轉換。

  • 支持主流游戲引擎版本:穩定支持主流版本的 UE 和 Unity;

  • 多平臺兼容:支持 PICO 4 Ultra MR 渲染、本地串流等多種串流方案,并支持火山云 XR 適配;

  • 豐富的參數調節:提供了陰影、光照、色彩等調節控制,讓效果調整更便捷。

真實重建,表演即 3D 資產

「3D 真人數字人」是利用火山引擎的空間視頻產品完成制作的,核心算法采用了 4D GS 技術(一種動態 3D 高斯潑濺技術的升級)。利用多視角相機拍攝,對人物進行動態重建,具備強大的真實重建能力,能夠1: 1精準還原真人的動作及微表情。

在傳統的虛擬體驗中,受到成本制約,人物的動作和表情往往顯得生硬、不夠自然,本方法通過先進的掃描和重建算法,能夠捕捉到真人表演中的每一個細節,從肢體的細微動作變化,到演員的瞬間表情,完整進行復刻,并制作成 3D 資產進行還原。演員嘴角的微微上揚、眼神的閃爍變化,都得以在虛擬世界中完美呈現,讓觀眾在 VR 中自由漫游的同時,又能體驗前所未有的真實感。

自由交互,體驗代替觀看

該技術打破了傳統觀看模式的限制,觀眾可以自由環繞觀察表演者的每個細節。以往,觀眾只能從固定的角度觀看表演,無法對感興趣的部分進行深入探究。而有了空間視頻技術,觀眾就如同置身于現場一樣,可以圍繞表演者進行 360° 的自由移動,無論是表演者背后的動作、側面的姿態,都能一覽無余。這種深度交互的方式,極大地增強了觀眾的參與感和體驗感。

智能融合,帶來視覺盛宴

帶上 VR 頭顯,享受虛擬與現實相結合,亦真亦幻的視覺享受。空間視頻技術實現了數字人與 3D 場景的實時動態交互,數字人物與場景智能融合,結合不同的場景光影,實時渲染陰影和光效,增強整體氛圍感。結合引擎的特效系統,在真實表演基礎上,疊加了絢麗的影視級視覺特效,增強了 VR 畫面的視覺沖擊力和內容感染力。

產能升級,云端重建加速 3D 人物資產制作

傳統的 3D 人物資產制作往往需要耗費大量的時間和精力,而空間視頻技術帶來了一次效率革命。通過影棚拍攝,即可生成高質量的 3D 人物資產,大大節省了制作成本和時間。傳統方法一個月的工作量,可壓縮至一個星期內完成,讓開發者能夠更快速地將創意轉化為實際產品。

本次項目中,為了方便用戶在不同場地體驗,在分發側采用了云 XR 渲染方案。利用火山引擎的云端算力,渲染出高質量的 VR 內容,幫助用戶更便捷地體驗精彩的 VR 內容。火山引擎視頻與邊緣創新產品線負責人侯希明表示,利用「空間視頻制作服務」與云 XR 服務,打造整體解決方案,助力 LBE VR 方向的制作團隊加速 VR 內容制作與分發。讓創作者聚焦創意,簡化復雜的開發過程。

面向未來,通過火山引擎空間視頻產品制作「3D 真人數字人」還將擁有更多應用場景,比如將京劇大師的形象和表演數字化,形成數字分身,在虛擬場館中進行駐場表演,讓更多觀眾欣賞到京劇大師的精彩演出;又比如打造明星導游數字人,為游客提供24小時不間斷的服務等等。

火山引擎「空間視頻制作服務」不僅具備強大的真實重建能力,打造驚艷的視覺效果,還能滿足自由游覽的體驗形式,同時,通過產能升級節省了制作成本和時間,將推動「3D 真人數字人」在非遺、劇場、文旅等場景加速落地。

點擊這里,了解產品更多信息。

本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/bicheng/90696.shtml
繁體地址,請注明出處:http://hk.pswp.cn/bicheng/90696.shtml
英文地址,請注明出處:http://en.pswp.cn/bicheng/90696.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

C程序內存布局詳解

C程序內存布局詳解 1. 內存布局概述 C程序在內存中分為以下幾個主要區域(從低地址到高地址): 代碼段(.text)只讀數據段(.rodata)初始化數據段(.data)未初始化數據段&…

新手向:Git下載全攻略

Git 的安裝與重要性在現代軟件開發中,版本控制是必不可少的工具,而 Git 是目前最流行的分布式版本控制系統。無論是個人開發者還是大型團隊,Git 都能高效管理代碼變更,確保項目歷史清晰可追溯。安裝 Git 是開發者入門的第一步&…

linux中如何清除history命令

寫在前面 使用ssh遠程連接客戶端連接上linux后操作的命令多了,有時候需要清除對應的歷史命令記錄,可以通過下面幾種方式實現。第一種方法 通過修改.bash_history文件 這是最簡單直接的方法,但是只會影響當前用戶的歷史記錄。執行以下命令即可…

PHP插件開發中的一個錯誤:JSON直接輸出導致網站首頁異常

問題描述 最近在使用步數統計插件&#xff08;WeFootStep&#xff09;時&#xff0c;發現網站首頁完全變成了一段JSON數據&#xff0c;而不是正常的HTML頁面。具體表現為首頁顯示如下內容&#xff1a; {"results":"<li><a href\"https:\/\/blog…

落霞歸雁的思維框架:十大經典思維工具的源頭活水

在當今復雜多變的世界中&#xff0c;思維框架成為了解決問題、優化決策和提升效率的重要工具。提到思維框架&#xff0c;人們往往會想到那些被廣泛認可和應用的十大經典思維工具&#xff1a;金字塔原理、黃金圈法則、5W1H分析法、SWOT分析、SCQA模型、STAR法則、PDCA循環、六頂…

spring Could 高頻面試題

一、基礎概念Spring Cloud 的核心組件有哪些&#xff1f; 答案&#xff1a;Eureka/Nacos&#xff08;服務注冊發現&#xff09;、Ribbon/LoadBalancer&#xff08;負載均衡&#xff09;、Feign/OpenFeign&#xff08;聲明式HTTP客戶端&#xff09;、Hystrix/Sentinel&#xff0…

從零開始的云計算生活——番外6,使用zabbix對中間件監控

目錄 一.網絡設備監控 1、GNS模擬器的使用 創建路由 創建交換機 2.構建網絡 3.添加Cisco路由器的監控 二.中間件監控 1、MySQL數據庫監控 1.1、拷貝自定義的監控腳本到指定目錄 1.2、添加監控用戶 1.3、重啟zabbix-agent服務 1.4、在zabbix-server服務端測試數據 1…

haproxy七層均衡

一.haproxy的安裝和服務信息1.1實驗環境ip實驗設備172.25.254.100haproxy172.25.254.10RS1172.25.254.20RS2172.25.254.111client1.2軟件安裝及配置haproxy主機上配置#下載#進入此文件進行編輯#關閉防火墻RS1主機上配置#下載#生成默認文件#重啟#關閉防火墻RS2主機上配置#下載#生…

分類預測 | MATLAB實現CPO-SVM冠豪豬算法優化支持向量機分類預測

分類預測 | MATLAB實現CPO-SVM冠豪豬算法優化支持向量機分類預測 目錄 分類預測 | MATLAB實現CPO-SVM冠豪豬算法優化支持向量機分類預測 分類效果 基本介紹 算法步驟 參數設定 運行環境 應用場景 程序設計 參考資料 分類效果 基本介紹 該MATLAB代碼實現了基于冠豪豬優化算法(…

【MySQL 數據庫】MySQL基本查詢(第二節)

文章目錄&#x1f4dd;Update&#x1f309; 將孫悟空同學的數學成績變更為 80 分&#x1f309; 將曹孟德同學的數學成績變更為60分&#xff0c;語文成績變更為70分&#x1f309; 將總成績倒數前三的3位同學的數學成績加上30分&#x1f309;將所有同學的語文成績更新為原來的2倍…

Axios 響應攔截器

1.定義&#xff1a;響應攔截器&#xff08;Response Interceptor&#xff09;是一個可以在 axios 接收到服務器響應后&#xff0c;響應數據交給 .then() 處理之前執行的函數。你可以用它來統一處理響應數據&#xff0c;進行錯誤處理&#xff0c;或者對返回的數據做格式化和轉換…

k8s的nodeport和ingress

1.流量轉發圖targerport轉發到實際的容器端口containerPort&#xff08;后端端口&#xff09;nodeportingress2.配置場景總結字段作用對象必填示例值何時配置containerPort容器否80需明確記錄容器端口時&#xff08;推薦&#xff09;targetPortPod是80定義 Service 轉發規則時p…

VLA:自動駕駛的“新大腦”?

&#x1f525; 什么是 VLA&#xff1f;為什么突然火了&#xff1f;在自動駕駛圈子里&#xff0c;最近一個詞特別火&#xff1a;VLA。它不是某個新車的型號&#xff0c;也不是某家公司的新品牌&#xff0c;而是一種全新的智能架構&#xff0c;被稱為“自動駕駛的大腦2.0”。&…

Linux操作系統之線程(八):信號量sem

前言&#xff1a;大家好啊&#xff0c;我們上一篇文章已經講解了關于線程同步的一種辦法&#xff1a;運用條件變量cond。今天&#xff0c;我們就來學習一下線程同步的另外一種方法&#xff0c;信號量&#xff01;&#xff01;信號量呢有System V 信號量與POSIX 信號量&#xff…

【RocketMQ】一分鐘了解RocketMQ

MQ是什么 MQ全稱為Message Queue&#xff0c;即消息隊列 &#xff0c;是一種提供消息隊列服務的中間件&#xff0c;也稱為消息中間件&#xff0c;是一套提供了消息生 產、存儲、消費全過程的軟件系統&#xff0c;遵循FIFO原則。 MQ的好處有哪些 異步解耦 最常見的一個場景是…

01 01 01 第一部分 C++編程知識 C++入門 第一個C++程序

第一部分 C編程知識第一章 C入門 —— 第一個C程序一、第一個C程序代碼展示//寫一個C程序&#xff0c;實現在屏幕上打印 “hello world” #include <iostream> using namespace std; int main() {cout << "hello world" << endl;return 0; }二、…

進制定義與轉換詳解

文章目錄&#x1f4d8; 進制定義與轉換詳解一、進制的含義二、常見進制介紹1. 十進制&#xff08;Decimal&#xff0c;Base-10&#xff09;2. 二進制&#xff08;Binary&#xff0c;Base-2&#xff09;3. 八進制&#xff08;Octal&#xff0c;Base-8&#xff09;4. 十六進制&am…

【安卓筆記】用MVC、MVP、MVVM來實現井字棋案例

0. 環境&#xff1a;電腦&#xff1a;Windows10Android Studio: 2024.3.2編程語言: JavaGradle version&#xff1a;8.11.1Compile Sdk Version&#xff1a;35Java 版本&#xff1a;Java111. 首先、簡單實現井字棋的功能。功能拆解&#xff1a;1. 棋盤為3x32. 點擊棋盤button&a…

【洛谷】單向鏈表、隊列安排、約瑟夫問題(list相關算法題)

文章目錄單向鏈表題目描述題目解析代碼隊列安排題目描述題目解析代碼約瑟夫問題題目描述題目解析代碼單向鏈表 題目描述 題目解析 這道題因為有大量的任意位置插入刪除&#xff0c;所以肯定不能用數組&#xff0c;用鏈表是最合適的&#xff0c;而在算法競賽通常都用靜態鏈表&a…

當人機交互邁向新紀元:腦機接口與AR/VR/MR的狂飆之路

從手機到 “頭盔”&#xff1a;交互終端的變革猜想??在當今數字化時代&#xff0c;智能手機無疑是我們生活中不可或缺的一部分。它集通訊、娛樂、辦公等多種功能于一身&#xff0c;成為了人們與外界交互的主要窗口。然而&#xff0c;隨著科技的飛速發展&#xff0c;智能手機作…