構建首個虛擬直播演唱會廠牌，芒果TV如何連接未來？_風聞

本文來自微信公眾號：壹娛觀察（ID: yiyuguancha），文/大娛樂家。

在一場時長一小時的演唱會中，為七位歌手提供賽博朋克、黑暗階梯、虛擬城市以及夢幻島嶼等7個不同的舞台場景，並營造出完全貼合其曲風並且隨之變幻的視覺風格，在過去傳統的現場演唱會上或許不敢想象。

但當這一切被放在了綠幕搭建起來的虛擬空間之中時，一切似乎變得輕而易舉，並且繽紛了起來。

這個範例就是芒果TV打造的國內首個虛擬直播演唱會廠牌《潮音實驗室》第一場説唱專場演出，那些過去被認為是過於狂野想象正在逐步成為現實，虛實之間的界限也正在被技術所打破。

《潮音實驗室》虛擬演唱會

7組説唱型選手在符合其曲風與個人藝術表達的虛擬場景進行表演，讓音樂重新獲得了視覺表達，使得藝術表演不再受到空間和技術限制，更重要的是藉助虛擬演唱會也讓觀眾擁有了全新的演唱會體驗。

正在用技術引領內容革新的流媒體平台們，也將進一步打破虛擬與現實的界限，帶來全新的娛樂升級。

在虛擬空間的沉浸説唱表演，彈幕驚呼“太神奇”

霓虹閃爍的賽博朋克城市，特立獨行的意象空間，色彩鮮明的汽車搭配微風搖曳的棕櫚樹。

七位説唱歌手每人演繹兩首歌曲，雖然整場虛擬演唱會僅僅一個小時，但整個演出一共出現了7個完全不同的虛擬場景。風格各異的舞台場景共同構成了讓人耳目一新並且個性十足的説唱新天地。

文娛產業近十年一直在拼內容實力，但如今已邁入需要下一代內容的分水嶺，誰能做出消費者真正感興趣的內容，在體驗上有所革新，是制勝關鍵。同時，這也將形成全新的商業模式。

事實上，娛樂行業每次有關虛實結合的探索都是對次元壁發起的“破壁行動”。

《潮音實驗室》虛擬演唱會説唱專場無疑也是一次打破“次元壁”的嘗試：即在有限的三次元屏幕中，呈現出無限信息量。這在一定程度上用XR技術打破了三次元中對於空間與時間的限制，把觀眾帶入到更多元的次元空間，享受前所未有的沉浸感和震撼力。

《潮音實驗室》虛擬演唱會

當然，除了單純的“視覺衝擊力”外，《潮音實驗室》虛擬演唱會説唱專場還有很多隱藏在細節裏的技術深度和項目內涵：整場演唱會採用了全球頂尖的3D深度的實時虛擬系統，一來是讓真人能夠與虛擬實時交互從而打破次元壁，再有便是實現了虛實多機位跟蹤，即便是在綠幕前也能展現鏡頭的運動調度，最後則是景深光照無限還原真實場景。

多機位相機完成真實世界空間和人物的實時三維深度計算及重建，然後把重建完的人和物體融合進三維虛擬場景內，使人可在虛擬空間內同虛擬的人、場、物進行實時交互，並同步實時渲染出直播視頻流。

要到達最好的效果，最終的成敗還在算法上。基於深度信息算法的實時呈現三維空間與真實人物實時交互體驗，自主研發的實時光影合成算法，提升了三維空間融合真實人物的精度和品質。而正是這些技術的運用從而能夠帶來了極致視覺感受。

像是全場第三位出場的白吉勒，他的舞台則完全是根據他的歌曲也設計而來的隨性視覺風格，無盡天空中飄在雲霧裏蜿蜒曲折的公路，色彩鮮明的汽車搭配棕櫚樹，明暗交錯，不同的視覺元素增添了豐富的細節，歌手在演唱時動態的公路以及漂浮晃動在空中的儀表盤，提升整個舞台的深度和立體感，也能展現表演者的移動路徑，使整個表演更加生動真實，快速將觀眾拉進了聽覺與視覺共同營造的夢幻場景中。

而最後出場的AJ賴煜哲，整個場景運用黑白色調，水中的一輪圓月與山合一，彷彿從水中湧出，水天一色，皎皎空中孤月，整體視覺更顯高級。開場便給了他一個現實場景中無法實現的超級縱深鏡頭，營造出了極強的空間感。給整個視覺場景提供了充足的空間，讓觀眾都能夠有最大最獨特的視角。

《潮音實驗室》虛擬演唱會

隨着他的第二首歌旋律響起，背後的場景也從圓月轉換為一雙手從圓月中伸出，演唱嘉賓站在雙手捧着的銀河中，耿耿星河如同一場夢境，再利用燈光陰影帶來立體的效果，讓整個場景變得更加形象生動，歌曲情緒在視覺設計中得到最大的傳遞。

每首歌、每個表演元素，乃至歌手對個人作品的想象力與情緒，都被具象化的呈現於舞台之上，相當於在表演期間為每個藝人提供了各自專屬的領地。並且這種虛擬場景還能夠進一步放大舞台藝術的無限想象力，尤其是那些過往在現實中無法實現的場景。

而在這些完全為其個人風格打造的“舞台”上，歌手們自然能夠更忘我的完成演出。

另一方面，《潮音實驗室》虛擬演唱會説唱專場實現過去人配合舞台到如今舞台360度配合人的技術突破。從評論的角度，當我們談起“沉浸感”時，總會下意識站在觀眾視角思考問題。事實上，表演者本色的沉浸感也很重要。

然而傳統實景舞台存在很多限制因素：比如為了提升舞台動態感，藝人要在恰當的時刻站上升降機，或是在舞台佈景區域尋找各自區域。當然更重要的是不同的場景切換費時費力，在傳統演唱會中，往往都有較長時間的黑幕等待舞台切換。

當然，虛擬製作也並非全然比傳統演唱會更簡單，相反而言，虛擬演唱會對運鏡的要求更高，由於虛擬演唱會的真實舞台空間只是幾塊綠幕搭成的空間，和傳統演唱會的巨型舞台有差別，再加上和虛擬視覺場景的配合，演出嘉賓可活動的空間有限，所以大多數要通過運鏡和機位切換來展現恰到好處的鏡頭語言，體現出層次感。

《潮音實驗室》虛擬演唱會場景搭建

當然虛擬直播對於依靠技術來驅動內容革新與增強互動感上，更有着巨大的使用價值與現實意義。

虛擬直播本質上是用一個實時渲染的、任意變化的，甚至是用户驅動變化的虛擬舞台去承載明星的表演，舞台的變化和藝人的表演要做到無縫對接，舞台的變化和音樂的節奏及歌詞要做到無縫對接，因此算法在其中發揮了重要作用。一方面，舞台特效和運鏡特效隨着音樂聯動，另一方面舞台的變化也要隨着表演者動態改變。未來，觀眾的互動也會實時改變舞台，虛擬直播將越來越像一場羣體互動遊戲。

從目前的效果上來看《潮音實驗室》虛擬演唱會是一場成功的實時“雲演出”。

娛樂產業正在被技術深刻地改變着，人們都在尋找一個答案：科技跟娛樂結合的終極形態是什麼樣的？正在不斷追求內容與技術革新的芒果TV用《潮音實驗室》虛擬演唱會廠牌給出了自己的答案。

流媒體步入技術驅動內容時代，芒果TV給出新解法

事實上，在疫情對全球的線下娛樂產業造成巨大沖擊之後，線上娛樂也藉此機會迎來了一次主動引領變革的機會。

從去年以來，幾大當下最知名的音樂團體和歌手，如防彈少年團、BLACKPINK、Billie Eilish等人的演唱會就通過以XR、多視角觀看等技術和互動方式拉高了演唱會的製作水準。

從這種內容呈現與資本流動趨勢不難看出，流媒體競爭的上半場的競爭往往還是建平台，來到下半場的競爭則是通過技術引領內容革新。

某演唱會中無數螢火蟲在光影森林中翩然飛舞

過去的“芒果模式”是把握4G移動互聯網崛起時機的改革產物。隨着5G網絡的大規模落地，5G不僅為平台超大體量內容的實時傳輸提供了支撐，更因為它的高速率、低延時和大容量，深刻地重構着內容創作體系。

在這個層面上，芒果TV的部署走在前列。在2019年舉行的中國新媒體大會“5G時代的新媒體變革”論壇上，芒果TV總裁蔡懷軍就曾表示，做5G時代創新引領的媒體平台，主要包括兩個層面，一是為我所用，堅定不移做內容；二是擁抱技術，堅守平台價值觀。

2018年，芒果TV成立創新研究院，對5G、AI、VR等前沿技術前瞻佈局。去年，芒果TV還構建芒果雲技術及大數據應用中心，為即將到來的5G時代，鋪墊加碼。

5G高速率帶來時空關係的重構。如電影《頭號玩家》裏構建的虛擬世界，在用户體驗的層面，時空關係的邊界被完全模糊。沉浸式體驗不再需要苛刻的場景、昂貴的聲光設備，而是可以隨時隨地進行模式切換。沉浸式視頻將是一個巨大的市場，但也對平台和內容提出了極高的要求。

基於對5G、AI技術的積累和對內容走向的理解，芒果 TV在業內試水落地互動視頻創新。

2019年年初，芒果TV上線的互動劇《頭號嫌疑人》、芒果互娛去年上線的互動遊戲《記憶重現》。其中，互動劇《頭號嫌疑人》，採用“邊看邊玩”的沉浸式互動體驗，將內容創作與互動技術有機結合。除此外，芒果 TV 為此還研發了互動劇製作平台，為接下來批量化生產互動產品創造技術基礎。

互動劇裏提示線索

同時更低的時延帶來創作交互關係的新範式，例如在互動劇中，千萬個用户成為了內容的主角，是推動劇情進展的關鍵要素，是內容的創作者。而像是《潮音實驗室》虛擬演唱會説唱專場，其直播系統打通了芒果TV中台，創新的實現了互動禮物在虛擬3D場景的觸發和融合，使得直播活動更像是一場互動遊戲。

更重要的是當下的流媒體平台必須不斷探索在技術層面的前沿，而不斷加大資本投入幾乎是必經之路。作為上市公司的芒果超媒過去兩年連續進行資本募集的投向，比如引入中國移動全資子公司中移資本，也説明了芒果TV加碼內容構建高門檻長視頻的決心。此外，芒果TV對於一些技術驅動帶來的新興內容消費形態。

而作為大型流媒體平台，除了要能做到像互動劇、虛擬直播等前端直接可見的技術創新，另一方面，大量的數字基礎建設更是不可或缺。

比如雲數據、雲計算、雲存儲等技術，大大降低了對用户終端設備的要求，從而降低了交互和體驗的門檻。5G時代，終端將只是一塊屏幕，而云將成為新的流量入口，產業結構的大變化也將由此而來。2018年年底，芒果TV與華為簽訂戰略合作協議，未來將在5G商用的風口上運行更多內容，在技術和用户之間架起一座橋樑。

《潮音實驗室》虛擬演唱會説唱專場更像是芒果TV在新興技術探索佈局上的一次綜合成果展示。自2016年開始，芒果TV不斷積累着AR/VR等新興技術，至今已推出了包括虛擬主持人“YAOYAO”、AR明星合拍互動系統、互動視頻平台、IMGO超高清視頻修復和增強平台以及互聯網4K超高清生產播出平台等在內的系列化5G、AR/VR、超高清視頻技術創新成果。

《潮音實驗室》虛擬演唱會

9月22日，芒果超媒也在投資者互動平台明確對外界表示，其先後與中國移動、華為等公司達成相關合作協議，並與高校合作打造了中國第一家、全球第三家VR應用實驗室，聯合多方持續圍繞智能影像視覺、光場技術、AR/VR、5G 全息等核心技術展開聯合探索。

毫無疑問，9月29日的《潮音實驗室》虛擬演唱會説唱專場僅僅只是一個開端。

相對視頻流媒體行業領域的競爭者們，芒果TV的優勢在於較為成熟的內容生產能力、廣泛的用户基礎和明星生態，一旦能夠在技術革新中進一步佔據先機，無疑將持續放大芒果生態的效益。

與此同時，傳統廣電融合也正在經歷人工智能、5G和大數據等技術的衝擊，以移動智能終端為載體的新媒體成為主流，如何利用新平台的特性打造相應的內容並引領文化趣味成為廣電們的轉型難題。芒果TV在技術實踐和轉型上的示範效應，顯然也能為整個行業突破困局，提供一些更加具有確定性與前瞻性的借鑑價值。