
視頻的理想與現(xiàn)實(shí)
據(jù)科學(xué)家研究,人類83% 的信息主要來(lái)源于視覺(jué)。人們需要信息交流,彼此溝通,而視頻,則是人類社會(huì)相互聯(lián)接的最好方式。
在我們的概念里,視頻天然就是真實(shí)世界的客觀還原,高清晰度,自然流暢; 視頻天然就是實(shí)時(shí)互動(dòng)的,沒(méi)有延遲,自由交互; 視頻自然融合,觀看、互動(dòng)、交互靈活組合,在各種終端中任意流轉(zhuǎn),無(wú)縫體驗(yàn);視頻也充滿了無(wú)盡的想象力,立體視角、虛實(shí)交互、沉浸式體驗(yàn),如夢(mèng)如幻、激動(dòng)人心……
但是,現(xiàn)實(shí)卻有些骨感。我們看到,由于技術(shù)和資源等條件限制,視頻業(yè)務(wù)場(chǎng)景割裂,直播、連麥互動(dòng)、視頻會(huì)議、視頻監(jiān)控等各有各的網(wǎng)絡(luò),各有各的架構(gòu)體系,融合場(chǎng)景難以滿足,開(kāi)展新的VR/AR 業(yè)務(wù)也困難重重;視頻體驗(yàn)遠(yuǎn)沒(méi)有達(dá)到要求,普通直播延遲大于3 秒,主播和連麥用戶不同步,還經(jīng)常出現(xiàn)卡頓、花屏等現(xiàn)象;同時(shí)視頻業(yè)務(wù)成本高昂,計(jì)算、存儲(chǔ)等基礎(chǔ)設(shè)施投資巨大,帶寬流量費(fèi)用呈線性增長(zhǎng)。
新基建促進(jìn)ICT基礎(chǔ)設(shè)施飛躍發(fā)展,視頻網(wǎng)絡(luò)迎來(lái)升級(jí)變革
視頻業(yè)務(wù)產(chǎn)業(yè)鏈,貫穿了從采集接入、內(nèi)容處理、分發(fā)傳輸、播放顯示的全生命周期過(guò)程。它背后的核心支撐,是一張基于視頻流的媒體處理和分發(fā)網(wǎng)絡(luò)。要提供這樣的一張網(wǎng)絡(luò),并非易事,首先有三大門(mén)檻需要跨越。
網(wǎng)絡(luò)覆蓋范圍要足夠?qū)拸V:視頻本身是資源型業(yè)務(wù),動(dòng)輒上千個(gè)邊緣節(jié)點(diǎn),對(duì)計(jì)算資源、網(wǎng)絡(luò)資源要求極高,資源的投入、網(wǎng)絡(luò)的穩(wěn)定可靠運(yùn)行、以及如何有效提升資源效率,成本與效率的平衡是首要考慮的問(wèn)題。
對(duì)端的整合以及端云協(xié)同能力:視頻網(wǎng)絡(luò)需要支持五花八門(mén)、品類繁多的終端接入,兼容各種芯片、終端型號(hào)和操作系統(tǒng)版本。一個(gè)端側(cè)SDK 要支持至少上千終端型號(hào),大量驗(yàn)證測(cè)試,并且要持續(xù)更新。
音視頻技術(shù)能力:如何持續(xù)提升編解碼效率、如何獲得更低的時(shí)延、更高清的視頻質(zhì)量,還有在地鐵、電梯、高鐵等弱網(wǎng)環(huán)境下,如何保持互通、清晰流暢。
除此之外還需要考慮如何應(yīng)對(duì)突發(fā)大容量、如何支持億級(jí)并發(fā)、在公網(wǎng)接入條件下如何保障接入安全、防網(wǎng)絡(luò)攻擊等諸多挑戰(zhàn),這張視頻網(wǎng)絡(luò)的背后,是研發(fā)技術(shù)、基礎(chǔ)資源、運(yùn)營(yíng)運(yùn)維的高門(mén)檻投入。
國(guó)家提出了新基建戰(zhàn)略,ICT 基礎(chǔ)設(shè)施快速發(fā)展,視頻發(fā)展也迎來(lái)了新機(jī)遇。5G 的到來(lái),解決了視頻傳輸?shù)拇髱?、大流量的?wèn)題,延遲大幅降低;云計(jì)算帶來(lái)了算力的極大增強(qiáng),視頻的生產(chǎn)、渲染和處理更快、效率更高;邊緣、分布式技術(shù)的發(fā)展,帶來(lái)了本地的超低時(shí)延,流量成本大幅降低。視頻是5G 時(shí)代的風(fēng)口業(yè)務(wù),網(wǎng)絡(luò)的升級(jí),給視頻業(yè)務(wù)帶來(lái)了更好的體驗(yàn),更多更豐富的業(yè)務(wù)創(chuàng)新機(jī)遇也將到來(lái)。
視頻業(yè)務(wù)正在發(fā)生巨大變化:從單向的播放變?yōu)殡p向互動(dòng),超低延遲成為基本特征,進(jìn)入毫秒時(shí)代;“云原生”成為趨勢(shì),生產(chǎn)上云、渲染上云、處理上云、分發(fā)上云,云服務(wù)成為基本模式;AI 技術(shù)在視頻領(lǐng)域規(guī)模應(yīng)用,帶來(lái)更極致的體驗(yàn)和更多創(chuàng)新,如人臉識(shí)別、背景虛化、智能鑒黃、實(shí)時(shí)字幕、智能監(jiān)控預(yù)警等。
面向未來(lái)的視頻網(wǎng)絡(luò),我們認(rèn)為應(yīng)該具備幾個(gè)關(guān)鍵特征:第一,極低時(shí)延,端到端延遲<200 毫秒;其次,超高的質(zhì)量,4K/8K 超高清,在弱網(wǎng)條件下依然自然流暢;第三,統(tǒng)一的融合網(wǎng)絡(luò),直播觀看、連麥互動(dòng)、會(huì)議、監(jiān)控等融合場(chǎng)景統(tǒng)一支持,無(wú)需切換;第四,超大的容量,可以支持千人互動(dòng)、百萬(wàn)觀看、億級(jí)并發(fā)的超大規(guī)模;第五,開(kāi)放互聯(lián),與運(yùn)營(yíng)商5G 網(wǎng)絡(luò)、各種智能終端無(wú)縫協(xié)同,并保持前向兼容;第六,成本節(jié)省,基礎(chǔ)設(shè)施、帶寬以及運(yùn)維成本大幅降低。
以RTC為代表的視頻技術(shù)快速發(fā)展,成為5G時(shí)代視頻業(yè)務(wù)基礎(chǔ),重塑行業(yè)體驗(yàn)
RTC(實(shí)時(shí)音視頻),主要基于實(shí)時(shí)通信技術(shù),對(duì)音頻/ 視頻信號(hào)進(jìn)行處理、轉(zhuǎn)發(fā)和傳輸,以前主要用在視頻通信類業(yè)務(wù)上,例如會(huì)議、客服等應(yīng)用。隨著5G 時(shí)代的到來(lái),ICT 基礎(chǔ)設(shè)施的發(fā)展,新業(yè)務(wù)需求的涌現(xiàn),實(shí)時(shí)音視頻被重新認(rèn)知和定義,并成為業(yè)界創(chuàng)新熱點(diǎn),創(chuàng)新應(yīng)用場(chǎng)景層出不窮,例如互動(dòng)直播、在線教育、遠(yuǎn)程醫(yī)療、企業(yè)在線營(yíng)銷(xiāo)、VR/AR 虛實(shí)互動(dòng)、物聯(lián)網(wǎng)應(yīng)用等。
全新的實(shí)時(shí)音視頻服務(wù),有三個(gè)最核心的改變。
第一,全場(chǎng)景、一張網(wǎng)?;谝曨l流融合,一張網(wǎng)支持所有場(chǎng)景業(yè)務(wù),播放、交互、連麥、監(jiān)控等業(yè)務(wù)互通,無(wú)縫流轉(zhuǎn),突破技術(shù)限制,隨需擴(kuò)展,支持千人互動(dòng)、億級(jí)并發(fā)。
第二,全實(shí)時(shí)、低延遲。實(shí)時(shí)觀看,播放時(shí)延小于200 毫秒;實(shí)時(shí)互動(dòng),雙向交互端到端時(shí)延小于200 毫秒;實(shí)時(shí)操作,操控指令響應(yīng)時(shí)長(zhǎng)小于30 毫秒。
第三,可擴(kuò)展、全流程AI?;诮y(tǒng)一框架,提供豐富多維的AI 能力,AI 插件隨需使用。AI 融入視頻采、編、存、傳、顯全生命周期過(guò)程,智能識(shí)別、智能鑒黃、美顏降噪、虛擬背景、智能路由傳輸,智能檢測(cè)預(yù)警……AI 讓視頻生產(chǎn)和處理更加高效,帶給用戶更為極致的體驗(yàn)。
全新的實(shí)時(shí)音視頻服務(wù)帶來(lái)了業(yè)務(wù)、體驗(yàn)和技術(shù)的升級(jí)。直播、連麥、會(huì)議靈活組合和隨時(shí)切換,更多業(yè)務(wù)創(chuàng)新,如VR/AR、全息互動(dòng)等,實(shí)現(xiàn)業(yè)務(wù)升級(jí);用戶對(duì)延遲無(wú)感、邊看邊互動(dòng),精準(zhǔn)操控作業(yè),體驗(yàn)升級(jí);多套網(wǎng)絡(luò)合一,靈活擴(kuò)展,資源效率至少提升30%,運(yùn)維效率提升50%,技術(shù)升級(jí)。
視頻網(wǎng)絡(luò)架構(gòu)也發(fā)生了根本性改變,從中心式、樹(shù)狀結(jié)構(gòu)、層層分發(fā)的模式,改變?yōu)榫W(wǎng)狀、去中心化、自適應(yīng)Mesh 結(jié)構(gòu);從專網(wǎng)、集中式設(shè)備模型,改變?yōu)榉植际剑谶吘壊渴?,隨需擴(kuò)展和就近接入;基于目的地尋址,多路徑精準(zhǔn)分發(fā),管道流量模型改變;實(shí)時(shí)監(jiān)控、機(jī)器學(xué)習(xí)、智能調(diào)度,自動(dòng)選擇最佳路徑,極致效率。
使能千行百業(yè)創(chuàng)新,大視頻創(chuàng)新機(jī)遇正奔涌而來(lái)
RTC 的注入,和5G、云計(jì)算、AI 等技術(shù)一起交疊應(yīng)用,為視頻提供更有價(jià)值、更有肥力的土壤,使能千行百業(yè)創(chuàng)新,大視頻創(chuàng)新機(jī)遇正奔涌而來(lái)。
· 互動(dòng)文娛行業(yè)升級(jí):通過(guò)實(shí)時(shí)音視頻服務(wù),直播業(yè)務(wù)真正實(shí)現(xiàn)毫秒級(jí)實(shí)時(shí)互動(dòng)體驗(yàn),并帶來(lái)更多新玩法。主播間互動(dòng)無(wú)延遲感知,參與人數(shù)無(wú)限制,所有觀眾可實(shí)時(shí)互動(dòng)、自由上線連麥,還可以與朋友們一起邊觀看比賽邊實(shí)時(shí)互動(dòng)交流,同時(shí)支持實(shí)時(shí)搶答、跨直播間PK、沖刺拉票等實(shí)時(shí)交互的創(chuàng)新場(chǎng)景。
· 在線教育行業(yè)升級(jí):通過(guò)實(shí)時(shí)音視頻服務(wù),教育行業(yè)將極大改善教學(xué)互動(dòng)體驗(yàn),提升教學(xué)質(zhì)量。視頻高清在線,延遲無(wú)感知,清晰流暢;隨時(shí)互動(dòng)教學(xué),小班課突破16 人限制,大班課支持千人互動(dòng),自由連麥;還可以實(shí)時(shí)監(jiān)測(cè)學(xué)生學(xué)習(xí)情況,通過(guò)表情/ 姿態(tài)識(shí)別,實(shí)時(shí)自動(dòng)提醒開(kāi)小差的學(xué)生。
· 辦公協(xié)同業(yè)務(wù)升級(jí):基于實(shí)時(shí)音視頻,下一代云會(huì)議也在持續(xù)演進(jìn),在技術(shù)、體驗(yàn)、業(yè)務(wù)形態(tài)等全面升級(jí):極致音視頻通信,1080p 高清晰度視頻通話,200毫秒超低時(shí)延,抗50% 視頻丟包,抗80% 音頻丟包,在弱網(wǎng)環(huán)境下也能順暢溝通;通過(guò)智能數(shù)據(jù)和文檔協(xié)作,4K 超高清數(shù)據(jù)實(shí)時(shí)共享, 無(wú)線投屏,白板共享,多人標(biāo)注,實(shí)時(shí)翻譯,自動(dòng)紀(jì)要等,實(shí)現(xiàn)高效協(xié)作;突破技術(shù)限制,支持千人互動(dòng)同時(shí)開(kāi)會(huì),多區(qū)域可同時(shí)參加;端云結(jié)合,全場(chǎng)景多屏互動(dòng),無(wú)論你在會(huì)議室、辦公室、在家里,還是在路上,隨時(shí)隨地都可接入會(huì)議,互動(dòng)交流;更多的業(yè)務(wù)創(chuàng)新,直播+ 會(huì)議互動(dòng)結(jié)合;跨企業(yè)、聯(lián)接客戶與伙伴的在線展會(huì)、在線營(yíng)銷(xiāo)、在線培訓(xùn)……
VR/AR,正在打開(kāi)未來(lái)新視界
VR、AR 和自由視角等新視頻業(yè)務(wù)形態(tài)正在快速發(fā)展,給人們帶來(lái)更沉浸、更自由的虛實(shí)結(jié)合的全新交互體驗(yàn),行業(yè)創(chuàng)新大量涌現(xiàn)。
在社交媒體領(lǐng)域:虛擬主播正在成為互動(dòng)直播和電商帶貨的新方向?;谔摂M的背景,虛擬空間,呈現(xiàn)了一個(gè)類真實(shí)的虛擬世界;通過(guò)虛擬人,或者真人仿真,以及姿態(tài)擬合,讓你同主播進(jìn)行實(shí)時(shí)互動(dòng),帶來(lái)不一樣的虛實(shí)交互體驗(yàn)。
在智慧教育領(lǐng)域:可以呈現(xiàn)3D 虛擬影像,進(jìn)行360°多視角立體觀摩,甚至引入沉浸式聲場(chǎng),觸覺(jué)式反饋,來(lái)開(kāi)展VR/AR 互動(dòng)教學(xué),給學(xué)生帶來(lái)真實(shí)的環(huán)境場(chǎng)景和感知交互,提升學(xué)習(xí)效果。
在工業(yè)互聯(lián)網(wǎng)領(lǐng)域:進(jìn)行工業(yè)仿真設(shè)計(jì),在同比例虛擬空間中,動(dòng)態(tài)調(diào)整設(shè)計(jì)原型,進(jìn)行生產(chǎn)模擬、工藝分析和虛擬試驗(yàn),縮短產(chǎn)品的研發(fā)周期,降低研發(fā)成本。
還有很多場(chǎng)景應(yīng)用,VR/AR 游戲、VR/AR 社交、VR/AR 會(huì)議、VR/AR 零售……正在加速向我們的生活和生產(chǎn)滲透。
VR/AR 業(yè)務(wù),對(duì)算力、網(wǎng)絡(luò)資源的訴求呈指數(shù)級(jí)增長(zhǎng),將原生長(zhǎng)在云上。從3D 建模、渲染處理、空間定位、姿體跟蹤、數(shù)字孿生都承載在云上,以服務(wù)方式提供。
華為云致力于提供視頻基礎(chǔ)能力“黑土地”,使能千行百業(yè)創(chuàng)新
華為擁有業(yè)界最完整的端- 管- 云產(chǎn)業(yè)技術(shù),在音視頻領(lǐng)域持續(xù)耕耘30 多年,擁有多達(dá)1186 件音視頻算法專利,在編解碼算法、音視頻網(wǎng)絡(luò)傳輸、弱網(wǎng)對(duì)抗、媒體AI 等領(lǐng)域積累了深厚的技術(shù)實(shí)力。
在視頻技術(shù)的演進(jìn)發(fā)展過(guò)程中,華為云作為服務(wù)提供商,聚焦將基礎(chǔ)能力做到極致,降低技術(shù)門(mén)檻,為業(yè)界提供最優(yōu)質(zhì)的云視頻服務(wù),使能千行百業(yè)創(chuàng)新。