PICO視頻揭秘《羅曼城 · 喚醒計(jì)劃》背后的技術(shù)魔法

文/VR陀螺 豌豆

2025年12月26日起，業(yè)內(nèi)首個(gè)演唱會(huì)以演出敘事為核心延展的沉浸式XR互動(dòng)體驗(yàn)項(xiàng)目——《羅曼城 · 喚醒計(jì)劃》正式落地，作為汪蘇瀧“羅曼宇宙”的一個(gè)故事線(xiàn)分支，該項(xiàng)目與同期舉辦的汪蘇瀧廣州站跨年演唱會(huì)實(shí)現(xiàn)深度內(nèi)容聯(lián)動(dòng)。活動(dòng)期間幾乎場(chǎng)場(chǎng)約滿(mǎn)，只有工作日有少量余票。小紅書(shū)等社交平臺(tái)上密集出現(xiàn)攻略帖與體驗(yàn)“repo”，字里行間表達(dá)出XR互動(dòng)體驗(yàn)為粉絲們帶來(lái)的感動(dòng)與驚喜。

《羅曼城 · 喚醒計(jì)劃》在小紅書(shū)有相當(dāng)高的關(guān)注度（圖源：新紅）

與以往以舞美延展或影像回放為主的沉浸項(xiàng)目不同，《羅曼城 · 喚醒計(jì)劃》以互動(dòng)體驗(yàn)的形式，通過(guò)XR技術(shù)彌補(bǔ)了觀眾在演唱會(huì)場(chǎng)館之外缺失的沉浸體驗(yàn)，也讓粉絲擺脫被動(dòng)的觀看者身份，作為“羅曼特工”真正參與到演出世界的延展敘事之中。這場(chǎng)活動(dòng)的熱度，折射出一種以粉絲情感為核心、以XR技術(shù)為支撐的線(xiàn)下內(nèi)容新形態(tài)正在成型。

觀眾們向往的羅曼城，其實(shí)是汪蘇瀧近年來(lái)創(chuàng)建的“羅曼宇宙”世界觀的核心建筑。PICO選擇“羅曼城”為開(kāi)年第一城，將為粉絲們揭曉《羅曼城 · 喚醒計(jì)劃》XR互動(dòng)體驗(yàn)背后的技術(shù)底層。

演唱會(huì)后再回城，從XR體驗(yàn)流程看“羅曼城”如何深入人心

在汪蘇瀧「十萬(wàn)伏特」巡演收官站的尾聲，由大象無(wú)形音樂(lè)有限公司聯(lián)合杭州無(wú)界漫步文化科技有限公司、PICO視頻打造的沉浸式舞臺(tái)敘事，以“羅曼城坍塌”作為結(jié)尾：象征城市能量的桃心晶體隨之崩塌。這一開(kāi)放式結(jié)局，為整場(chǎng)演唱會(huì)留下了一個(gè)未被講完的故事。

基于這一敘事節(jié)點(diǎn)，《羅曼城 · 喚醒計(jì)劃》以XR互動(dòng)體驗(yàn)的形式，將原本只存在于舞臺(tái)上的“羅曼城”重構(gòu)為可被再次進(jìn)入的沉浸式空間，使觀眾得以在現(xiàn)實(shí)場(chǎng)域中延續(xù)演唱會(huì)的情緒與記憶，并通過(guò)互動(dòng)體驗(yàn)完成對(duì)這一故事的補(bǔ)完。《羅曼城 · 喚醒計(jì)劃》活動(dòng)將持續(xù)到2026年1月29日，在位于廣州塔廣場(chǎng)二層平臺(tái)的大空間場(chǎng)館限時(shí)開(kāi)放，并向觀眾發(fā)出“回城”邀請(qǐng)，觀眾將在此以“羅曼特工”的身份進(jìn)入這一XR互動(dòng)體驗(yàn)空間。

據(jù)PICO 視頻介紹，以往的羅曼城，始終被局限在各類(lèi)“帶邊界”的二維屏幕中，要么遠(yuǎn)遠(yuǎn)矗立在體育場(chǎng)的舞臺(tái)之上，觀眾們只能以旁觀者的視角，遠(yuǎn)遠(yuǎn)凝望這座虛擬城邦的浪漫與奇幻。

而《羅曼城 · 喚醒計(jì)劃》的核心設(shè)計(jì)理念是要打破這份時(shí)空隔閡，以PICO MR一體機(jī)設(shè)備為專(zhuān)屬傳送門(mén)，借XR技術(shù)融合的全維度優(yōu)勢(shì)，將“小瀧包”從屏幕前真正帶入360°環(huán)繞的立體空間，讓羅曼城的一磚一瓦都觸手可及；從乘坐素龍翱翔天際的失重感，到節(jié)奏互動(dòng)中指尖觸碰星光的真實(shí)反饋，多感官沉浸體驗(yàn)徹底消解了虛擬與現(xiàn)實(shí)的邊界。

在交互設(shè)計(jì)層面，項(xiàng)目引入積分任務(wù)系統(tǒng)，將觀眾在體驗(yàn)中的行為轉(zhuǎn)化為可量化的數(shù)據(jù)結(jié)果。無(wú)論是完成任務(wù)、收集小怪物，還是多次回城參與體驗(yàn)，相關(guān)數(shù)據(jù)都會(huì)被記錄至“羅曼城喚醒積分榜”，使原本分散的個(gè)體體驗(yàn)具備了可共享的社交屬性。

同時(shí)，項(xiàng)目還提供了虛擬身份擴(kuò)展功能，粉絲可上傳個(gè)人照片生成羅曼城怪物身份ID卡，作為進(jìn)入體驗(yàn)空間的個(gè)人標(biāo)識(shí)，并進(jìn)一步強(qiáng)化與IP世界觀之間的情感連接。

《羅曼城·喚醒計(jì)劃》整體通過(guò)多個(gè)關(guān)卡串聯(lián)起觀看演出與互動(dòng)玩法，設(shè)計(jì)上著重降低操作門(mén)檻，以注視、手勢(shì)和簡(jiǎn)單交互為主，使演出觀看、劇情推進(jìn)與輕度游戲行為形成連續(xù)體驗(yàn)：不僅在虛擬舞臺(tái)上近距離觀看《黑夢(mèng)》的演唱片段，還能體驗(yàn)五大冒險(xiǎn)關(guān)卡，收集能量因子、互動(dòng)音游、尋找小怪物、喚醒城市記憶，最終完成“重啟羅曼城”的劇情閉環(huán)。

PICO 視頻這次將大空間場(chǎng)域氣氛調(diào)動(dòng)起來(lái)的創(chuàng)新設(shè)計(jì)也解決了以往LBE大空間場(chǎng)域“不夠熱鬧”的痛點(diǎn)，整個(gè)體驗(yàn)流程被設(shè)計(jì)為可容納多人同時(shí)間線(xiàn)入場(chǎng)（4人一組，每個(gè)廳4組人，共3個(gè)廳同時(shí)運(yùn)營(yíng)）。加上定制的主題場(chǎng)館隨處可見(jiàn)的小怪物、“素龍”形象及十萬(wàn)伏特演唱會(huì)元素，讓粉絲在入場(chǎng)的第一刻就處在與線(xiàn)下演唱會(huì)相同的氛圍中。

真·貼臉唱《黑夢(mèng)》：一場(chǎng)被XR技術(shù)重構(gòu)的16K全景舞臺(tái)

與傳統(tǒng)演唱會(huì)固定在觀眾席或內(nèi)場(chǎng)前排的觀看視角不同，《羅曼城·喚醒計(jì)劃》重新設(shè)定了虛擬演唱會(huì)的觀眾視角。

全景相機(jī)被布置在舞臺(tái)核心區(qū)域，觀眾們?cè)陬^顯中看到的不再是隔著人海遠(yuǎn)望舞臺(tái)屏幕的畫(huà)面，而是直接站在舞臺(tái)之上，與汪蘇瀧近距離對(duì)視，感受同臺(tái)視角。這樣的機(jī)位視角設(shè)置大膽地拉近了藝人與觀眾之間的空間關(guān)系，也是通過(guò)XR空間重構(gòu)舞臺(tái)觀看體驗(yàn)的第一步。

數(shù)字視效也是不可或缺的一環(huán)，在演出中，根據(jù)歌曲節(jié)奏變換的粒子特效作為舞臺(tái)的可視化語(yǔ)言，進(jìn)一步提升了舞臺(tái)的視效觀感與沉浸式空間營(yíng)造。在超近距離觀看演出的同時(shí)，PICO 視頻是怎么做到“毛孔級(jí)”清晰度和無(wú)死角的全景舞臺(tái)？

實(shí)際上在影像拍攝階段，本場(chǎng)演出使用電影級(jí)設(shè)備完成了《黑夢(mèng)》整首演唱的16K采集，在制作端保留高端電影級(jí)別的原始細(xì)節(jié)，高規(guī)格的采集標(biāo)準(zhǔn)，使得發(fā)絲、服裝紋理、舞美燈光與粒子特效等細(xì)節(jié)方便后期制作并在頭顯端呈現(xiàn)出清晰細(xì)膩、層次豐富的沉浸式全景畫(huà)面，這是與內(nèi)場(chǎng)前排觀看相比更與眾不同的真實(shí)感。

作為“回城”的核心入口設(shè)備，PICO 4 Ultra承擔(dān)了舞臺(tái)終端呈現(xiàn)與空間交互的核心體驗(yàn)。其一體式頭顯方案避免了傳統(tǒng)背包設(shè)備帶來(lái)的束縛，6DoF精準(zhǔn)定位確保用戶(hù)在大空間內(nèi)自由移動(dòng)時(shí)畫(huà)面與身體動(dòng)作保持同步，視角轉(zhuǎn)換絲滑。加上PICO 4 Ultra采用高通驍龍XR2 Gen 2 處理器，單眼2.5K高分辨率顯示、90Hz的高刷新率、105°的視場(chǎng)角以及頭顯前后平衡配重則讓沉浸式演出更容易實(shí)現(xiàn)。

正是從采集、制作到終端呈現(xiàn)的這一整套XR技術(shù)支持，才讓一場(chǎng)原本只存在于線(xiàn)下舞臺(tái)上的《黑夢(mèng)》，被重構(gòu)為可以被反復(fù)觀看的全景演唱體驗(yàn)。

4DGS技術(shù)加持，多機(jī)位采集與動(dòng)態(tài)重建實(shí)現(xiàn)1:1真人復(fù)刻

對(duì)于觀眾而言，沉浸式體驗(yàn)的核心是視聽(tīng)效果的真實(shí)感，以及藝人3D形象的高度還原。盡管不少明星藝人都曾嘗試推出自己的“虛擬分身”，但要實(shí)現(xiàn)精度1:1、形態(tài)靈動(dòng)、動(dòng)作流暢的虛擬人，仍面臨成本高昂與技術(shù)門(mén)檻的雙重挑戰(zhàn)。以往的3D虛擬形象容易出現(xiàn)人物輪廓模糊、表情與動(dòng)作缺乏細(xì)節(jié)，效果始終比不上真人出場(chǎng)，這也是藝人IP虛擬分身在持續(xù)擴(kuò)圈和商業(yè)模式探索中的一大阻礙。

在《羅曼城·喚醒計(jì)劃》中，PICO 視頻及PICO 交互感知團(tuán)隊(duì)創(chuàng)新性地采用了自研4DGS（4D高斯?jié)姙R）技術(shù)，通過(guò)對(duì)真人表演進(jìn)行動(dòng)態(tài)重建，完成了高精度的人物模型制作。

4DGS與體積視頻捕捉（圖源：PICO）

這里用到的核心技術(shù)是4DGS，是一種可以同時(shí)記錄空間與時(shí)間信息的技術(shù)，它能把視頻里的動(dòng)態(tài)場(chǎng)景變成帶有時(shí)間信息的“高斯點(diǎn)”，這一個(gè)個(gè)的高斯點(diǎn)能夠呈現(xiàn)整個(gè)物體/人物在不同時(shí)間的位置和形態(tài)（顏色、密度、方向等），甚至還能連續(xù)追蹤其運(yùn)動(dòng)狀態(tài)，讓用戶(hù)可以隨意控制自己的觀看角度。

PICO 視頻團(tuán)隊(duì)表示：“這徹底打破了屏幕的物理隔閡。在體驗(yàn)中，粉絲看到的不再是動(dòng)畫(huà)或全景視頻，而是一個(gè)與真人無(wú)異的汪蘇瀧。粉絲可以360度自由觀察，這是一種‘偶像就在你眼前’的顛覆性觀感，其真實(shí)感遠(yuǎn)超任何現(xiàn)有技術(shù)。”

在項(xiàng)目的最后一幕，體驗(yàn)?zāi)Ｊ揭搽S之發(fā)生轉(zhuǎn)變——畫(huà)面從 VR 模式切換至 MR 模式。虛擬的羅曼城逐漸退去，觀眾回到現(xiàn)實(shí)世界的空間之中。就在這一刻，汪蘇瀧基于 4DGS 技術(shù)重建的真人形象，出現(xiàn)在現(xiàn)實(shí)環(huán)境里，與真實(shí)世界完成融合。舞臺(tái)不再局限于虛擬空間，而是延伸進(jìn)觀眾所處的現(xiàn)實(shí)場(chǎng)景，讓“演出結(jié)束”的邊界被重新打破。

該技術(shù)打破了傳統(tǒng)觀看模式的限制，觀眾可以自由環(huán)繞觀察表演者的每個(gè)細(xì)節(jié)。通過(guò)多視角相機(jī)拍攝，PICO完成了對(duì)汪蘇瀧人物及表演的動(dòng)態(tài)重建，生成4D高斯動(dòng)態(tài)資產(chǎn)，1: 1精準(zhǔn)還原瀧瀧的動(dòng)作及微表情。嘴角的微微上揚(yáng)、眼神的變化，都得以在虛擬世界中完美呈現(xiàn)。

一般情況下這種方式采集的資產(chǎn)數(shù)據(jù)量往往非常龐大，那在一體機(jī)設(shè)備上是如何流暢播放4DGS內(nèi)容的？

據(jù)介紹，這段4DGS的表演以10倍壓縮率實(shí)現(xiàn)實(shí)時(shí)流式傳輸，同時(shí)還可以導(dǎo)入至Unity中進(jìn)行處理。最終通過(guò)統(tǒng)一渲染框架將4DGS人物和其他3D場(chǎng)景資產(chǎn)整合在一套管線(xiàn)中，從而在算力與帶寬都有限的MR一體機(jī)上穩(wěn)定運(yùn)行，不依賴(lài)高端PC。

PICO視頻：拓展行業(yè)邊界的探路者

從內(nèi)容形態(tài)上看，《羅曼城·喚醒計(jì)劃》并不是一次單一項(xiàng)目嘗試，而是圍繞 XR 內(nèi)容生產(chǎn)方式與落地路徑所進(jìn)行的一次階段性探索。PICO視頻團(tuán)隊(duì)希望通過(guò)持續(xù)的技術(shù)實(shí)踐，與行業(yè)共同探索新的內(nèi)容形態(tài)與生產(chǎn)路徑，逐步沉淀出能夠被更多創(chuàng)作者和合作伙伴使用的技術(shù)底座與平臺(tái)能力，成為新技術(shù)與創(chuàng)意表達(dá)之間的連接者。

回顧過(guò)去幾年的探索，PICO視頻團(tuán)隊(duì)在多個(gè)方向上進(jìn)行過(guò)多樣化的內(nèi)容嘗試，其中包括行業(yè)首個(gè)應(yīng)用大模型AI對(duì)話(huà)能力的大空間體驗(yàn)、行業(yè)首個(gè)MR大空間體驗(yàn)等創(chuàng)新項(xiàng)目。除此之外，團(tuán)隊(duì)還推出了以表演為核心的真人VR演唱會(huì)、全虛擬演唱會(huì)、虛擬偶像等內(nèi)容，以及引擎驅(qū)動(dòng)的大空間互動(dòng)內(nèi)容等不同形式。這些項(xiàng)目覆蓋了不同技術(shù)階段與創(chuàng)作路徑，更多承擔(dān)了“驗(yàn)證與試錯(cuò)”的角色，同時(shí)為后續(xù)內(nèi)容形態(tài)的演進(jìn)積累了寶貴經(jīng)驗(yàn)。

以《羅曼城·喚醒計(jì)劃》為例，其價(jià)值并不只體現(xiàn)在一次演出體驗(yàn)中，而在于一整套可被拆解和延展的內(nèi)容資產(chǎn)體系：包括空間舞臺(tái)資產(chǎn)、服裝與道具的數(shù)字資產(chǎn)，以及基于 4DGS 技術(shù)構(gòu)建的真人動(dòng)態(tài)表演資產(chǎn)。這種資產(chǎn)化、模塊化的思路，使內(nèi)容在不同城市、不同場(chǎng)地之間具備更高的復(fù)用與重組空間，也為后續(xù)內(nèi)容擴(kuò)展提供了基礎(chǔ)條件。

更進(jìn)一步來(lái)看，4DGS技術(shù)為L(zhǎng)BE（Location-Based Entertainment）領(lǐng)域打開(kāi)了新的可能性。過(guò)去，大空間內(nèi)容以引擎實(shí)時(shí)生成的互動(dòng)體驗(yàn)為主，整體形態(tài)更接近動(dòng)畫(huà)化表達(dá)，受眾主要集中在親子與泛娛樂(lè)人群。隨著真人演出通過(guò)4DGS技術(shù)進(jìn)入大空間場(chǎng)景，LBE開(kāi)始具備更強(qiáng)的情感表達(dá)能力與敘事密度，打破了傳統(tǒng)的受眾局限，吸引了更多成年觀眾的參與。明星與真人表演的加入，更是為沉浸式娛樂(lè)內(nèi)容破圈提供了新的契機(jī)，將其從小眾體驗(yàn)推向了更廣泛的公眾視野。

基于這些實(shí)踐與觀察，PICO視頻近期正式推出「沉浸式娛樂(lè)內(nèi)容激勵(lì)計(jì)劃」，面向XR行業(yè)的內(nèi)容創(chuàng)作者與團(tuán)隊(duì)，為優(yōu)質(zhì)大空間內(nèi)容提供覆蓋資金、創(chuàng)作、技術(shù)與發(fā)行在內(nèi)的全鏈路支持。其中，單項(xiàng)目資金激勵(lì)最高可達(dá)百萬(wàn)級(jí)。該計(jì)劃希望通過(guò)更系統(tǒng)的支持機(jī)制，鼓勵(lì)原創(chuàng)內(nèi)容與差異化探索。

PICO視頻團(tuán)隊(duì)也期待借助內(nèi)容形態(tài)與交互方式的持續(xù)創(chuàng)新，為用戶(hù)帶來(lái)更具沉浸感與觀看價(jià)值的體驗(yàn)，逐步增強(qiáng)消費(fèi)者對(duì)沉浸式娛樂(lè)的認(rèn)知與消費(fèi)心智，并在這一過(guò)程中，與內(nèi)容方、場(chǎng)地方及行業(yè)伙伴一道，推動(dòng)內(nèi)容生態(tài)與渠道經(jīng)營(yíng)的長(zhǎng)期發(fā)展。