今年,上海的沉浸式體驗又升級了。通過將VR、AR等數字技術與實體空間的緊密結合,“全感沉浸”打破了人們對文娛消費的固有想象。
記者探訪了頗具代表性的兩個項目,發現其中不僅包含了開發者們敏銳的創新意識,更浸潤著全球科技融合發展的底色。
而更值得我們探究的是——這趟體驗“升級”之旅為何優先落地上海?未來,它還將開啟哪些可能?
本報記者 肖雅文
觸手可及的“虛擬世界”
“情況緊急,敵人追過來了!”隨著耳邊的一聲驚呼,原本正觀看花魁凌空起舞的人群迅速俯身,快步穿過木質長廊,目之所至,敵人的暗箭在頭頂嗖嗖亂射,箭鏃飛過時急促的冷風不時掠過。
慌亂中,“白鶴大俠”將手搭到了記者的肩膀上,她說:“明月,快讓我扶著你一下。”
盡管戴著頭顯,但透過衣物,記者依然能感受到這位“大俠”些許顫抖的手正緊緊捏住自己的肩膀,直到眼前出現一輛華麗的木質馬車,她的手才緩緩松開。
這一刻,虛擬情境與真實世界的交互變得切實可感。
類似的“沉浸感”,在奇境穿越X-META與愛奇藝聯合打造的《風起洛陽·全感VR》(以下簡稱《風起洛陽》)中屢見不鮮。
當人們乘船進入1300年前的洛陽城時,驚險的水道蜿蜒曲折,伴隨每一次的橫沖直撞,水汽會從不同的方向噴濺;在牡丹樓欣賞花魁跳舞的時候,花魁的紅色綾羅飄逸靈動,讓人感覺到柔紗拂面時的香氣;而追尋敵人時,狹窄的巖壁則讓人不敢踏足,巖壁下翻騰的滾滾巖漿向上冒著熱氣,連通往懸梯的吊橋都搖搖晃晃……
虛擬世界的場景與真實的體感相互印證,不僅令整個虛擬世界變得真切,人們身處其中,也油然而生對新身份的認同。
從游戲場景中離開,摘下頭顯,游戲前的陌生隊友成了彼此熟悉的親密戰友,對于各人在游戲中的代號都了然于心。
這樣一場“奇遇”就發生在上海市中心的一幢大廈內,總面積不過數百平方米。
“看表演時伸手就能扶住木質圍欄、馬車扶手,還能摸到凹凸不平的崖壁!”
“我們都戴著頭顯,但隊友不僅能在游戲里找到我,還能在現實中精準地觸碰到我!”
對體驗者而言,“沉浸感”就藏在這些細節里。
“它不再只是一個游戲,而成了一次真實的經歷。”體驗者魯遙告訴記者,當她能感受到、觸摸到虛擬畫面中的物體時,真的會感到驚訝或者害怕。
對于產品開發者而言,支撐這些細節的則全是“科技與狠活”。
其中,定位追蹤技術是VR線下體驗的關鍵。定位追蹤的精確度越高,視覺呈現與體感的誤差越小,真實感也就越強。
為了達成更好的沉浸體驗,《風起洛陽》的定位誤差控制在2毫米以內。
同一場景的信息量越豐富,需要的技術配合就越多。
以過懸崖的場景為例,短短幾分鐘的內容場景,需要觀眾感受到崖壁的陡峭、崖邊的狹窄不平、崖底的滾滾巖漿、連通外界道路的搖晃等。
這需要利用小空間定位技術、畫面渲染技術、熱能傳導技術、動態模擬技術、聲控技術等多種技術手段。
另外,特定的內容場景還需要配合特定的觸發裝置。例如,在花魁表演時,布景下方會安裝特殊設備,以便根據劇情需要散發氣味。
將多項智能數字技術組合起來,這聽起來很容易。
但事實上,如何將科技硬件與VR內容進行適配,并集成在盡可能小的空間內,是一門大學問。
這也是《風起洛陽》從立項到落地,歷時近3年的原因。
畫面內容與智能中控、全息地圖、動態捕捉、傳感裝置等技術設備的配合需要進行數十次甚至上百次的磨合,在這個過程中,還會出現一些預料不到的情況。
“我們需求端不斷提出的新問題,也倒逼著智能設備生產者進行調整和升級。而硬件的優化又進一步賦能體驗升級,形成一個數字產業的正循環。”奇境穿越X-META董事長胡世輝告訴記者。
這也是奇境穿越X-META將首家門店落地上海的原因,一體化的解決方案需要多元的技術供應,而上海給了他們集成跨國技術的優越條件。
目前,奇境穿越X-META頭顯使用的是Meta的Quest2型設備,空間定位依托于一家俄羅斯科技企業,而其他配套的智能數字硬件則主要來自中國。“在上海,我們能找到全球的優秀技術供應商。”胡世輝說。
“沉浸感”的方法論
視覺、聽覺、觸覺、嗅覺,只有將人的所有感官同步調動起來,才能真沉浸。只有真沉浸,才能真正抵達人們的心智與情感。
那么,有技術就夠了嗎?
位于西岸鳳巢的《三體·引力之外》或許可以給出一部分答案。
當特意從沈陽來到上海的《三體》粉絲路易看到由演員飾演的首席宇航工程師站在數字曲面屏前,通過手掌遠程控制屏幕內容,指揮屏幕做出相應指令時,她對這次體驗的期待值拉到了最高。
在《三體·引力之外》的體驗空間中,精準定位與動態捕捉技術幾乎無處不在,讓人真正感到置身未來。
以星際能源采集的交互體驗為例,登上“萬有引力”號恒星戰艦的艦員們可以通過掃描NFC手環識別電子身份,在巨大的曲面屏前方揮舞雙臂,以此控制飛船的前進方向和能源的采集方向。
行進在不同故事線上的艦員還可以通過AR技術,觸碰水滴氣泡,聆聽末日戰役中隕落戰艦前輩的留言。
“沉浸的基礎是識別,只有識別出不同的身份,并跟蹤處理不同身份的不同信息,才能讓玩家更好地進入角色。”《三體·引力之外》的項目負責人楊天銘告訴記者。
事實上,整個《三體·引力之外》沉浸式空間的打造,都是基于商湯科技長期的技術積累。
而服務于劇情的精準定位與動態捕捉技術背后的支撐是算法。通過技術人員不斷迭代的算法和自主研制的智能模型,這個沉浸式體驗才能得以運轉和升級。
不過,技術場景的搭建和技術手段的運用之間,依然存在縫隙。
例如,太空戰艦的場景設計需要用燈帶來打造科技氛圍,但在昏暗的燈光下,攝像頭的動態捕捉會受到影響。
在整個沉浸式項目的搭建過程中,類似的小問題始終存在。
人的參與,成為填補這些縫隙的關鍵。
一方面,演員們可以調整自己站立的姿勢和位置,布景人員可以適當增加臺面亮度;另一方面,這個短板也由運營人員反饋給后臺的技術人員,為下一代技術的進步與更迭積累經驗。
可以說,“沉浸感”在科技加持的同時,依然需要依托人。
“90后”的金融從業者貝兒連刷了4遍《三體·引力之外》,令她印象最深的就是三體場景的還原和演員的動情表演。
楊天銘告訴記者,《三體·引力之外》的全體演員都是和上海話劇藝術中心聯合招募的,這讓演出的質感得到了很好的保障,而他們的表演也讓空間中的技術看起來更動人、更真實。
《風起洛陽》也遵循相同的邏輯。
奇境穿越X-META機遇星球店店長朱鋮偉告訴記者,從今年6月正式面向大眾營業以來,《風起洛陽》一天最多能排20場,幾乎場場滿員。消費者的年齡結構也非常多元,除年輕消費者外,40歲以上的人群也占到15%—20%。
“消費者不僅接受度很高,還很樂于分享。一家三代一起來的情況很普遍。”朱鋮偉曾是一家密室逃脫的負責人,他認為,比起劇本殺和密室逃脫,沉浸式全感項目的受眾群體更加廣泛,“我們門店接待的消費者最小是6歲,最大的超過75歲”。
要讓絕大多數人“沉浸”其中,就需要有“人”來保證體驗內容有足夠的親和力和新鮮感。
因此,《風起洛陽》的故事線必須在開頭就由演員們清晰完整、簡明易懂地告訴給大家。而到了大膽新奇的具體故事場景時,演員們又必須適當進行引導,鼓勵參與者們感受不同的交通工具、不同的場景和景觀帶來的體驗。
在運營人員的不斷調試下,《風起洛陽》在前期演繹部分布置了代號抽簽和沙盤推演,以便于消費者更好地進入故事背景。借助角色偽裝身份,完成“穿戴裝備”的步驟,實現全程不出戲的流程把控。
可以說,科技之外,高質量的演職人員、成熟的體驗空間運營人員、產品流程管理人員……正是這些人將科技體驗與實景演繹緊密結合,虛擬內容的“沉浸感”才更上一層樓。
讓“元宇宙”落地
2022年9月,國務院科技名詞審定處將“元宇宙”的含義進一步明確:人類運用數字技術構建的,由現實世界映射或超越現實世界,可與現實世界交互的虛擬世界。
此時,距離《風起洛陽》和《三體·引力之外》的內測還有5個月。
但一場雙向奔赴似乎從這一刻開始。
2023年6月,上海首批文旅元宇宙創新示范項目出爐,001號項目批給了《風起洛陽》。《三體·引力之外》也成為《上海市打造文旅元宇宙新賽道行動方案(2023—2025年)》的關注對象之一。
“我們等了很久,終于等到《風起洛陽》這個能將技術、內容、場景、商業邏輯全都走通的產品。”上海市文旅局科技處處長張毅告訴記者。
近年來,我國積累了豐富的智能數字技術,但這些技術產品都相對單一,缺少一個整合利用的具體場景,也難以打開市場,而主打沉浸式體驗的數字文旅則是一個絕佳的切入口。
目前來看,在市場的檢驗下,這個切入口正在變得越來越大。
胡世輝告訴記者,通過流程優化,目前搭建一個快閃型全感VR展示項目的時間可縮短至一周,這不僅意味著規模化輸出成為可能,也為個性化定制騰出了空間。
未來,無論是主打新奇體驗的“都市版”,偏重在地融合的“景區版”,還是將“迪士尼”開到家門口的“縣城版”都將成為可能。這背后不只是科技,更是拉動智能消費與生產的巨大產業鏈條。
在VR內容的制作方面,流程也在逐步優化。此前,據愛奇藝副總裁張航透露,愛奇藝旗下VR內容團隊裂境工作室團隊目前正根據不同IP體量探索更多樣的設計方向,包括增加活動空間和互動部分的比重等。未來,還將生產更輕便、可復制性更強的“文旅版”產品。
據了解,泰國、美國、阿聯酋、澳大利亞等多國的投資者都對《風起洛陽》及后續產品表達了極大的關注。而隨著中國沉浸式VR項目的出海,關于中華文明的多元敘事也將潛移默化地傳播到世界各地。
當成百上千個以虛擬數字技術為基礎的沉浸式空間建成后,一張更真實、更可感的虛擬數字網絡將在世界范圍鋪開。一旦這個數字網絡的平臺向外開放,內容的供給也將變得更加豐富。
不過,以沉浸式體驗為代表的數字文旅始終是個系統性工程。
例如,目前影響體驗感最顯著的兩個問題:一個是畫面容易導致部分人眩暈;另一個就是VR頭顯偏重,長時間佩戴后會感覺累。事實上,當畫面達到8K分辨率時,人的眼睛會更加舒適;而頭顯過重的原因則在于芯片的存儲和運算能力以及空間內的帶寬不夠。
這兩者都關系到更大范圍的數字基建和更深層的科技創新。
在體驗完《風起洛陽》后,“95后”蘇晴特意找到NPC角色“百里二郎”的立牌合影,“他的聲音非常好聽,高馬尾造型也十分帥氣,還開著木鳶來救我們!如果未來能有個性化的互動,和他聊聊天、拍拍照就更好了”。
可以期待,在不久的將來,她的想象會變成現實。