分享了高通在音視頻技術和電視廣播技術標準方面的努力

2021年9月1日世界5G大會借助5G新視聽論壇舉辦，來自國內廣電機構的相關領導，技術專家，企業代表，行業老兵等數十位嘉賓出席，并就5G推動高清視頻業務互動沉浸式發展，助力國內高科技視聽產業進步，加速廣電和網絡實體媒體新生態重塑等話題發表演講高通技術標準高級總監李燕出席論壇并發表題為《沉浸式體驗5G廣播演講介紹了5G在助力視聽產業轉型中的重要作用和巨大潛力，分享了高通在音視頻技術和電視廣播技術標準方面的努力

以下是李巖的發言記錄:

各位領導，各位嘉賓，大家好很高興有機會參加本次活動，與大家一起探討5G和新視聽產業

5G商業化兩年來，中國乃至世界5G建設都取得了長足的進步據官方最新統計，截至今年6月，我國已建成5G基站近100萬個，5G終端連接數約3.65億個每個人都開始體驗到5G在手機應用中帶來的一些巨大變化據市場研究機構預測，到2035年，5G將帶來13.1萬億美元的經濟產出伴隨著5G建設的不斷擴大，關于5G如何賦能各行各業的討論也越來越多今天我主要講講5G如何改造視頻行業

伴隨著移動通信技術和智能終端的發展，人們花在視頻上的業余時間越來越多從網絡數據中，我們也可以看到相應流量的大幅增加視頻流量占移動數據總量的比例非常高根據運營商的預測報告，2022年視頻流量將占移動數據總流量的80%左右那么，從信號采集到內容制作，再到分發，最后到呈現，5G技術能給整個視頻制作產業鏈帶來哪些變化首先是信號采集，因為如果現在做8K信號采集，需要在信號采集中做一些初始壓縮但根據央視發布的關于8K超高清視頻制作的最新標準，要求8K視頻/音頻數據的傳輸速率至少為600Mbps如何將這樣的視頻流傳輸回內容生產中心是一個巨大的挑戰以前我們靠光纖傳輸，但是這會給不同的拍攝位置帶來一些限制我們希望5G技術能夠幫助各個崗位實時采集到更多直播的，豐富多彩的8K視頻信號這對我們的移動連接提出了要求，但由于頻譜有限，很難在傳統的Sub—6GHz頻段上傳此類信號，但毫米波的大帶寬完全可以支持這一目標的實現基于此，高通聯合中興，TVU等合作伙伴，于今年5月完成了基于大上行幀結構的5G毫米波8K視頻回程業務的首次全球示范

在信號采集和生產過程中，產生大量數據后，我們需要相關設備將如此大量的數據傳輸回生產中心目前世界上支持毫米波的設備越來越多，如CPE，工業互聯網，工業網關，模塊化設備等，可以配合攝像頭，包括前端壓縮編碼器，配合數據回傳我們還有很多智能終端設備，可以播放這些8K視頻或者身臨其境的互動內容通過利用毫米波的大容量，讓更多用戶同時體驗到身臨其境的互動內容

至于如何在終端呈現這些內容，剛才幾位嘉賓提到，在新音頻領域，內容創新非常重要我們觀察到，如今，人們已經習慣了把大部分閑暇時間都花在手機上看短視頻，因為內容創新其實是通過智能手機，讓用戶能夠與內容進行互動這種互動不僅體現在內容的選擇上，也體現在未來內容的制作上，讓內容本身能夠為用戶提供互動性，用戶在選擇觀看內容的同時，可以選擇不同的觀看角度，比如360度視角的體育轉播，以及將AR，VR技術應用于轉播等同樣，無論是剛剛結束的奧運會，還是即將到來的冬奧會，都會有大量的體育比賽轉播我們可以考慮這樣一個問題如果我們去觀看一場足球比賽，按照現在的轉播技術，一個靜止的畫面會以1080P和4K的分辨率傳輸給用戶，可以滿足目前用戶的要求但是當我們有了8K技術，我們還能做什么呢當我們有足夠的帶寬向終端傳輸8K內容時，用戶可以在終端上選擇自己想要關注的視角這是因為8K的內容可以覆蓋更多的視角，用戶只需要關注其中一個節點，在需要觀看整體情況時可以自由切換因為內容已經傳輸到終端，分辨率為8K，無論是足球比賽還是橄欖球比賽，無論是全局視角還是局部細節，都能滿足用戶的需求因此，我們可以在終端上提供交互性，讓用戶可以有選擇地與內容進行交互，以滿足他們的交互需求

相信未來伴隨著內容制作的不斷豐富，我們也可以用120幀的速率進行內容呈現除此之外，前面幾位嘉賓也談到了HDR，這會給視頻的整體色彩帶來很大的變化同時，當我們想要傳輸更高的幀率和動態范圍時，我們需要更多的帶寬5G技術可以給用戶帶來很大的帶寬，因此我們需要解決接下來如何呈現的問題

雖然我們更關心視頻編碼，但我們也需要討論聲音的問題比如用8K轉播一場足球比賽，就不能像今天這樣跟著運動員輪換座位當我們有足夠的分辨率和景深時，我們就能看到整體的戰術情況當用戶選擇看本地場景時，我們需要思考如何讓用戶沉浸式地體驗本地場景這個時候，一個非常重要的方式就是用3D音頻把用戶帶入那個局部場景這意味著觀眾去看前場球員的表現時，聽到的不應該是后場對方球迷的吶喊，而是聲音要集中在前場，通過3D音頻帶給觀眾3D渲染體驗音頻技術有很多

，包括基于聲道的，基于目標的等等，但是在實現真正交互式的廣播方面，我們認為最有效的技術還是基于場景式的廣播我國數字音視頻編解碼技術標準工作組也已經開始在做一些針對3D音頻的探討，但目前還是缺少基于場景式的3D音頻技術方案高通愿與中國合作伙伴一起努力，將3D音頻技術方案帶入視頻內容中

剛才講到了內容制作和最終呈現，現在談一下整體信號的播發環節我剛才提到，基于毫米波我們可以將更高清的內容傳送給更多用戶目前，我們正面臨著內容爆炸式增長，但網絡容量是有限的，所以我們需要把廣播內容引流到更有效的傳輸方式上因此我們認為，未來5G的廣播傳輸應該是三種技術的融合，這其中包括了單播，即在手機上通過WiFi，4G網絡和5G網絡以點的方式進行觀看，也可以支持組播，不僅可以在一個小區里針對幾個用戶做小型廣播，同時還可以面向大型城市開展大塔式廣播技術的融合我們希望三個技術都可以在終端上得到支持，把內容進行融合后讓用戶實現的，無縫體驗，，即整個傳播技術對用戶是透明的，用戶感覺不到內容從哪個手段獲取而來，但可以體驗高清的沉浸式內容這樣做的好處，舉例來說，若有幾千萬的人同時點播同一視頻節目，會形成巨大的流量消耗和運營商網絡壓力，這時就可以用大塔式的網絡呈現內容再比如名人的網絡直播，可能在同一小時內出現上億人次的觀看，這樣的直播流量帶來的運營成本最終可能會由每個用戶承擔如果我們應用廣播技術，就可以把這部分流量導入至廣播平臺，從而大幅壓縮運營成本所以，未來的5G廣播系統，在內容傳輸上不僅要承擔今天5G廣播傳輸線性電視的要求，也要通過相應的接口使互聯網等能夠將內容插入到5G平臺，從而減少運營成本關于大塔式廣播，高通正在全球范圍內和其他合作伙伴共同推進EnTV的演進，目前已經在南美，歐洲等地建立了試驗系統，我們也希望在國內繼續拓展我們的試驗

關于5G廣播，除了剛才提到的內容制作，傳播，呈現等方面的問題，還有很多其他問題需要進一步解決，比如在編碼方面，成幀方面的變化，利用CMAF縮短端到端傳輸時延，甚至引入WebRTC進一步降低直播平臺的時延，在DVB或廣播組織推動數字電視標準化等同時，高通也將在3GPP里進一步推動三個技術的融合發展，尤其是基于小塔或者是小網絡的5G NR廣播，我們希望從明年開始能進一步推動這部分標準的建立，協調發展

未來，高通會與國內同仁繼續共同推進5G廣播技術我們也希望真正助力5G視頻廣播再上一個臺階，讓更多人體驗到5G技術