這個冬奧季，即便你在冰雪之外，也能透過播報感受同在。這就是互動虛擬演播技術帶來的。
“虛擬演播廳”在東京奧運會就曾進入奧運村，而在2022冬奧期，其技術方案全面升級，達到廣電級導播效果的同時，接入門檻極大降低，大大擴充了該技術的應用場景。同時在鏈路上打通RTC和GRTN網路，將多機位、多視角實時同步技術能力，與RTC實時連麥、異地開播能力結合，可實現主播、嘉賓的多層虛擬背景等能力疊加，提升沉浸式直播體驗，在互動效果上全面提升到新境界，助力打造北京冬奧賽事的沉浸式報導。
百年奧運首次啟用互動虛擬演播 —打造沉浸式報導
2022北京冬奧雖於冰雪之際，但觀眾高燃的熱情像一場冰與火之歌。對於賽場上的矚目之星，我們都很期待聽到、看到、感受到他們在賽後真實的聲音、風采和談吐之相。
於是，早在冬奧會前期，CGTN（China Global Television Network）就在策劃製作全球冬奧運動員、冰雪明星的系列採訪報導，期望實時而精彩地呈現運動員的賽事採訪，而互動虛擬演播技術的全新突破，正是CGTN此次落實冬奧採訪專案的最佳選擇。
通常而言，媒體異地採訪需要連線App，且運動員的受訪環境很不可控，於是，想展現好的人物採訪畫面效果，需要實景摳像再合成於虛擬直播間，同時還要達到賽事結束後採訪的實時傳播效果，這對技術提出很大的挑戰。於是，阿里雲視訊雲全新升級的“互動虛擬演播“技術在2022冬奧會就此登場，解決了這一難題。
作為全新的雲導播實時互動虛擬演播技術，這是奧運會第一次啟用，為CGTN在北京冬奧會的記者連線報導場景中充分應用，打造了此次奧運賽事報導的沉浸式體驗。
該項技術在冬奧會期間全程助力CGTN進行了賽事異地採訪、實景摳像合成的虛擬直播，打造了異地互動的新形態播報，實現全鏈路製播上雲，對傳統新聞節目製作打造了全新場景。
同時，通過在音視訊互動APP上實時連線，實現了導播人員和記者異地實時通訊，第一時間將新聞報導傳遞給觀眾。通過雲導播與RTC（音視訊通訊）的全面打通，可自動獲取連線直播間流，實現新聞採訪與直播觀看同步進行。此外，通過雲端實景摳像演算法技術能力，達到了極致精細的摳像合成效果。
這是百年奧運首次使用“互動虛擬演播廳”進行沉浸式賽事報導，改變了傳統電視臺記者的採訪形式，再也無需記者攜攝像團隊，載著沉重裝置到處奔波，更無需以往一定要將記者與受訪者設定於同一現場的固封模式。只要通過阿里雲視訊雲互動虛擬演播產品，採訪任務僅需“兩部手機+一臺電腦”，即可隨時隨地展開採訪直播與轉播，從而革新了媒體生產與傳播的技術鏈路，實現全鏈路製播上雲的同時，也讓賽事觀眾體驗到更沉浸的播報視感。
“互動虛擬演播廳”示意圖
三項國內首個突破性超級能力 —業界尖端技術
能夠在此次冬奧會實現創新方案落地，打造實時互動的沉浸式賽事報導，源於阿里雲視訊雲在虛擬演播廳產品上的深度打磨和三點戰略性的技術突破：
國內首個純雲端實景摳像合流技術
此次的互動虛擬演播方案，是針對冬奧會打磨的新實景摳像演算法與引擎能力，它第一次採用實景預設背景摳像，第一次採用多機位切換摳像，第一次採用4路摳像源（綠幕+實景）同時實時摳像處理。
眾多“第一次”帶來的價值是，滿足了冬奧會級別的世界頂級賽事直播要求，將實景摳像效果達到業內天花板水平。
對標廣電級別的節目要求，阿里雲視訊雲正是利用演算法打破技術壁壘，通過嘗試多種演算法和工程模型，一次次突破自我，提升實景摳像的效果和效能。在各種採訪環境不可控的雜亂背景下，技術均可處理得非常完美，讓冬奧的賽外內容播報體驗極大提升。
國內首家“端雲無縫銜接”的導播平臺
在此次冬奧會中，互動虛擬演播廳首次打通了RTC和GRTN 網路，將多機位、多視角實時同步技術能力，與RTC實時連麥、異地開播能力進行結合。
一般情況下，導播臺是一直缺乏端側能力的，於是無法實現實時互動場景，雖然也可以嘗試和內外部各種App應用聯合，但因為種種原因很難真正落地。
此次阿里雲視訊雲RTC技術結合了導播臺，進行虛擬演播廳產品的深度改造和聯動，並且對App端的介面效果和效能完成全面優化，為普通使用者提供了簡單、穩定的連線功能，真正實現了“互動虛擬”演播能力。
業界廣電級導播能力
全新的互動虛擬演播廳，全面滿足超低延時、超穩定、超高併發的特性，達到廣電級導播能力。
從連麥App端到導播合流輸出全鏈路超低延時，實現連麥端實時通訊、導播臺“摳像+合成渲染輸出”，最快2-3S內即可完成所有流程。在多人、多地同時開播、長時間連線開播情況下，對多背景摳圖的處理場景可以達到穩定處理零斷流的效果。整個方案落地，可經受住大規模的分發、觀看的考驗，對超高併發依舊穩定出色。
“互動虛擬演播廳”製作全鏈路
技術升級，先後助力兩屆奧運會 —創造奧運新紀元
在東京冬奧會，阿里雲視訊雲的虛擬演播廳就曾進入奧運村。當時，身處日本東京和中國北京兩地的企業代表，通過雲導播臺的虛擬演播廳、實時字幕等能力，順暢完成沉浸式直播連線。
2020東京奧運會 虛擬演播廳讓兩地“同現”奧運村
本次2022北京冬奧，為了結合CGTN的記者採訪和報導場景，同時滿足央視記者深度沉浸式報導的觀感，阿里雲視訊雲重點對互動虛擬演播方案，進行幾個方面的深度升級：
第一，重點對實景摳像打造了新的演算法引擎和極致效果，解決了實景摳像邊緣粗糙，抖動等問題，摳像效果精細到人物髮絲，真實細膩的效果促進了產品的可應用性，打破行業實景摳像壁壘。
第二，豐富了雲導播在場景端側的接入能力，實現“實時互動+導播”的完整方案，打造了“實時互動”場景，並且，通過App端簡單便捷的開播，讓使用門檻非常之低，從而高度滿足了電視臺記者群體的使用訴求。虛擬演播廳強化增補了前鏈路的推流互動環節，更進一步實現了沉浸、實時的直播體驗。
第三，全面升級導播穩定性、超長時間連麥穩定性、摳像穩定性、音視訊互動App效能等，從而全方位滿足異地、多人、多場景、超長時間的連麥和直播需求，對於複雜的多場景（單人/雙人、遠景/近景、直播中插墊片）實現無縫切換，真正達到廣電級別的節目製作水準。
全面的技術升級，將“虛擬演播廳”升級為具有實時互動沉浸效果的“互動虛擬演播廳“產品方案，從而為2022冬奧會帶來賽事報導的全新體驗。
互動虛擬演播的更多空間—更多場景價值
北京冬奧會即將謝幕，互動虛擬演播還將繼續支援殘奧會的實時沉浸連線播報。奧運會這樣的超級賽事打磨了技術方案，讓其不僅服務於此。
作為全新的雲導播實時互動虛擬演播技術，互動虛擬演播廳可以通過低門檻地使用音視訊互動App，以發起直播與實時連線互動，同時，基於雲端摳像與虛擬背景合成的能力，提供“端到雲到端”的虛擬演播解決方案，從而打造沉浸式直播體驗。
它是專門為遠端互動打造，實現虛擬直播間的沉浸體驗。此外，也為遠端製作、異地互動直播的場景提供解決方案，如身處在滑雪場的運動員可以和新聞中心的主持人進行異地的虛擬合屏，並可進行實時互動採訪。
從實際的應用場域，不僅支撐體育競技、國內外賽事類的現場轉播、遠端解說、多主持人模式等場景，互動虛擬演播廳還可落地於更多行業場景，如電商與活動的直播支援、會議的多模式轉播，以及各種型別的異地連線與虛擬訪談，場景廣泛，能力豐富，均可實現。
總言之，實踐與沉澱於2022北京冬奧會，阿里雲視訊雲會將互動虛擬演播解決方案進一步深化為更強的產品力輸出，面向涉及直播場景的各行業提供遠端開播、虛擬直播間的解決方案。
從後繼發展來看，在技術升級和產品優化上，“互動虛擬演播”會圍繞三個方向繼續演進突破：
首先，在實現了低門檻接入之後，更強調實現持續降本，提升整個產品價效比和競爭力；再者，加強完善端側佈局，豐富導播互動能力（如觀眾端播放畫面的返送等），從而提供更完善的互動虛擬演播方案。在此之外，在物理與虛擬世界穿梭構建的大趨勢之下，將深度結合“虛擬演播廳”的概念，探索虛擬人、3D背景等能力的結合與落地，打造虛擬直播間的更多可能。
未來的互動虛擬演播，技術更前瞻，門檻更低簡，場景更豐富，互動更多元，效果更沉浸。借冬奧之光，技術普惠就在眼前。
「視訊雲技術」你最值得關注的音視訊技術公眾號，每週推送來自阿里雲一線的實踐技術文章，在這裡與音視訊領域一流工程師交流切磋。公眾號後臺回覆【技術】可加入阿里雲視訊雲產品技術交流群，和業內大咖一起探討音視訊技術，獲取更多行業最新資訊。