這個冬奧季，即便你在冰雪之外，也能透過播報感受同在。這就是互動虛擬演播技術(shù)帶來的。

“虛擬演播廳”在東京奧運會就曾進入奧運村，而在2022冬奧期，其技術(shù)方案全面升級，達到廣電級導播效果的同時，接入門檻極大降低，大大拓展了該技術(shù)的應(yīng)用場景。同時在鏈路上打通RTC和GRTN網(wǎng)絡(luò)，將多機位、多視角實時同步技術(shù)能力，與RTC實時連麥、異地開播能力結(jié)合，可實現(xiàn)主播、嘉賓的多層虛擬背景等能力疊加，提升沉浸式直播體驗，在互動效果上全面提升到新境界，助力打造北京冬奧賽事的沉浸式報道。

百年奧運首次啟用互動虛擬演播 —打造沉浸式報道

2022北京冬奧雖于冰雪之際，但觀眾高燃的熱情像一場冰與火之歌。對于賽場上的矚目之星，我們都很期待聽到、看到、感受到他們在賽后真實的聲音、風采和談吐之相。

于是，早在冬奧會前期，CGTN（China Global Television Network）就在策劃制作全球冬奧運動員、冰雪明星的系列采訪報道，期望實時而精彩地呈現(xiàn)運動員的賽事采訪，而互動虛擬演播技術(shù)的全新突破，正是CGTN此次落實冬奧采訪項目的最佳選擇。

通常而言，媒體異地采訪需要連線App，且運動員的受訪環(huán)境很不可控，于是，想展現(xiàn)好的人物采訪畫面效果，需要實景摳像再合成于虛擬直播間，同時還要達到賽事結(jié)束后采訪的實時傳播效果，這對技術(shù)提出很大的挑戰(zhàn)。于是，阿里云視頻云全新升級的“互動虛擬演播“技術(shù)在2022冬奧會就此登場，解決了這一難題。

作為全新的云導播實時互動虛擬演播技術(shù)，這是奧運會第一次啟用，為CGTN在北京冬奧會的記者連線報道場景中充分應(yīng)用，打造了此次奧運賽事報道的沉浸式體驗。

該項技術(shù)在冬奧會期間全程助力CGTN進行了賽事異地采訪、實景摳像合成的虛擬直播，打造了異地互動的新形態(tài)播報，實現(xiàn)全鏈路制播上云，對傳統(tǒng)新聞節(jié)目制作打造了全新場景。

同時，通過在音視頻互動APP上實時連線，實現(xiàn)了導播人員和記者異地實時通訊，第一時間將新聞報道傳遞給觀眾。通過云導播與RTC（音視頻通信）的全面打通，可自動獲取連線直播間流，實現(xiàn)新聞采訪與直播觀看同步進行。此外，通過云端實景摳像算法技術(shù)能力，達到了極致精細的摳像合成效果。

這是百年奧運首次使用“互動虛擬演播廳”進行沉浸式賽事報道，改變了傳統(tǒng)電視臺記者的采訪形式，再也無需記者攜攝像團隊，載著沉重設(shè)備到處奔波，更無需以往一定要將記者與受訪者設(shè)置于同一現(xiàn)場的固封模式。只要通過阿里云視頻云互動虛擬演播產(chǎn)品，采訪任務(wù)僅需“兩部手機+一臺電腦”，即可隨時隨地展開采訪直播與轉(zhuǎn)播，從而革新了媒體生產(chǎn)與傳播的技術(shù)鏈路，實現(xiàn)全鏈路制播上云的同時，也讓賽事觀眾體驗到更沉浸的播報視感。

“互動虛擬演播廳”示意圖

三項國內(nèi)首個突破性超級能力 —業(yè)界尖端技術(shù)

能夠在此次冬奧會實現(xiàn)創(chuàng)新方案落地，打造實時互動的沉浸式賽事報道，源于阿里云視頻云在虛擬演播廳產(chǎn)品上的深度打磨和三點戰(zhàn)略性的技術(shù)突破：

國內(nèi)首個純云端實景摳像合流技術(shù)

此次的互動虛擬演播方案，是針對冬奧會打磨的新實景摳像算法與引擎能力，它第一次采用實景預(yù)設(shè)背景摳像，第一次采用多機位切換摳像，第一次采用4路摳像源（綠幕+實景）同時實時摳像處理。

眾多“第一次”帶來的價值是，滿足了冬奧會級別的世界頂級賽事直播要求，將實景摳像效果達到業(yè)內(nèi)天花板水平。

對標廣電級別的節(jié)目要求，阿里云視頻云正是利用算法打破技術(shù)壁壘，通過嘗試多種算法和工程模型，一次次突破自我，提升實景摳像的效果和性能。在各種采訪環(huán)境不可控的雜亂背景下，技術(shù)均可處理得非常完美，讓冬奧的賽外內(nèi)容播報體驗極大提升。

國內(nèi)首家“端云無縫銜接”的導播平臺

在此次冬奧會中，互動虛擬演播廳首次打通了RTC和GRTN 網(wǎng)絡(luò)，將多機位、多視角實時同步技術(shù)能力，與RTC實時連麥、異地開播能力進行結(jié)合。

一般情況下，導播臺是一直缺乏端側(cè)能力的，于是無法實現(xiàn)實時互動場景，雖然也可以嘗試和內(nèi)外部各種App應(yīng)用聯(lián)合，但因為種種原因很難真正落地。

此次阿里云視頻云RTC技術(shù)結(jié)合了導播臺，進行虛擬演播廳產(chǎn)品的深度改造和聯(lián)動，并且對App端的界面效果和性能完成全面優(yōu)化，為普通用戶提供了簡單、穩(wěn)定的連線功能，真正實現(xiàn)了“互動虛擬”演播能力。

業(yè)界廣電級導播能力

全新的互動虛擬演播廳，全面滿足超低延時、超穩(wěn)定、超高并發(fā)的特性，達到廣電級導播能力。

從連麥App端到導播合流輸出全鏈路超低延時，實現(xiàn)連麥端實時通訊、導播臺“摳像+合成渲染輸出”，最快2-3S內(nèi)即可完成所有流程。在多人、多地同時開播、長時間連線開播情況下，對多背景摳圖的處理場景可以達到穩(wěn)定處理零斷流的效果。整個方案落地，可經(jīng)受住大規(guī)模的分發(fā)、觀看的考驗，對超高并發(fā)依舊穩(wěn)定出色。

“互動虛擬演播廳”制作全鏈路

技術(shù)升級，先后助力兩屆奧運會 —創(chuàng)造奧運新紀元

在東京冬奧會，阿里云視頻云的虛擬演播廳就曾進入奧運村。當時，身處日本東京和中國北京兩地的企業(yè)代表，通過云導播臺的虛擬演播廳、實時字幕等能力，順暢完成沉浸式直播連線。

2020東京奧運會 虛擬演播廳讓兩地“同現(xiàn)”奧運村

本次2022北京冬奧，為了結(jié)合CGTN的記者采訪和報道場景，同時滿足央視記者深度沉浸式報道的觀感，阿里云視頻云重點對互動虛擬演播方案，進行幾個方面的深度升級：

第一，重點對實景摳像打造了新的算法引擎和極致效果，解決了實景摳像邊緣粗糙，抖動等問題，摳像效果精細到人物發(fā)絲，真實細膩的效果促進了產(chǎn)品的可應(yīng)用性，打破行業(yè)實景摳像壁壘。

第二，豐富了云導播在場景端側(cè)的接入能力，實現(xiàn)“實時互動+導播”的完整方案，打造了“實時互動”場景，并且，通過App端簡單便捷的開播，讓使用門檻非常之低，從而高度滿足了電視臺記者群體的使用訴求。虛擬演播廳強化增補了前鏈路的推流互動環(huán)節(jié)，更進一步實現(xiàn)了沉浸、實時的直播體驗。

第三，全面升級導播穩(wěn)定性、超長時間連麥穩(wěn)定性、摳像穩(wěn)定性、音視頻互動App性能等，從而全方位滿足異地、多人、多場景、超長時間的連麥和直播需求，對于復雜的多場景（單人/雙人、遠景/近景、直播中插墊片）實現(xiàn)無縫切換，真正達到廣電級別的節(jié)目制作水準。

全面的技術(shù)升級，將“虛擬演播廳”升級為具有實時互動沉浸效果的“互動虛擬演播廳“產(chǎn)品方案，從而為2022冬奧會帶來賽事報道的全新體驗。

互動虛擬演播的更多空間—更多場景價值

北京冬奧會即將謝幕，互動虛擬演播還將繼續(xù)支持殘奧會的實時沉浸連線播報。奧運會這樣的超級賽事打磨了技術(shù)方案，讓其不僅服務(wù)于此。

作為全新的云導播實時互動虛擬演播技術(shù)，互動虛擬演播廳可以通過低門檻地使用音視頻互動App，以發(fā)起直播與實時連線互動，同時，基于云端摳像與虛擬背景合成的能力，提供“端到云到端”的虛擬演播解決方案，從而打造沉浸式直播體驗。

它是專門為遠程互動打造，實現(xiàn)虛擬直播間的沉浸體驗。此外，也為遠程制作、異地互動直播的場景提供解決方案，如身處在滑雪場的運動員可以和新聞中心的主持人進行異地的虛擬合屏，并可進行實時互動采訪。

從實際的應(yīng)用場域，不僅支撐體育競技、國內(nèi)外賽事類的現(xiàn)場轉(zhuǎn)播、遠程解說、多主持人模式等場景，互動虛擬演播廳還可落地于更多行業(yè)場景，如電商與活動的直播支持、會議的多模式轉(zhuǎn)播，以及各種類型的異地連線與虛擬訪談，場景廣泛，能力豐富，均可實現(xiàn)。

總言之，實踐與沉淀于2022北京冬奧會，阿里云視頻云會將互動虛擬演播解決方案進一步深化為更強的產(chǎn)品力輸出，面向涉及直播場景的各行業(yè)提供遠程開播、虛擬直播間的解決方案。

從后繼發(fā)展來看，在技術(shù)升級和產(chǎn)品優(yōu)化上，“互動虛擬演播”會圍繞三個方向繼續(xù)演進突破：

首先，在實現(xiàn)了低門檻接入之后，更強調(diào)實現(xiàn)持續(xù)降本，提升整個產(chǎn)品性價比和競爭力；再者，加強完善端側(cè)布局，豐富導播互動能力（如觀眾端播放畫面的返送等），從而提供更完善的互動虛擬演播方案。在此之外，在物理與虛擬世界穿梭構(gòu)建的大趨勢之下，將深度結(jié)合“虛擬演播廳”的概念，探索虛擬人、3D背景等能力的結(jié)合與落地，打造虛擬直播間的更多可能。

未來的互動虛擬演播，技術(shù)更前瞻，門檻更低簡，場景更豐富，互動更多元，效果更沉浸。借冬奧之光，技術(shù)普惠就在眼前。