AIGC的風(feng)已經刮(gua)到了實時互動(RTE)領域，并且已經有(you)企(qi)業乘風(feng)起勢。
提到RTE，亦或是(shi)實時音(yin)視頻(RTC)，可能(neng)很多人感覺(jue)到陌生(sheng)，但(dan)其實，在視頻會議、線上直播、網上課堂等場景中(zhong)，正是(shi)RTC與RTE支撐起(qi)了(le)低時延、高清晰、深度沉浸的(de)互動(dong)體驗。
從2015年(nian)前后，短視(shi)頻(pin)、直播興(xing)起，才令人(ren)們對于實時音(yin)視(shi)頻(pin)有了更加(jia)具(ju)象(xiang)的認(ren)知。隨后，疫情爆發(fa)之(zhi)下(xia)“全民宅家”所催生的視(shi)頻(pin)會(hui)議、在(zai)線教育、電商直播也使得實時音(yin)視(shi)頻(pin)需求迅速(su)爆發(fa)。
據36氪研究院發布的(de)數(shu)據顯示，實時音(yin)視頻在(zai)國內360、華為(wei)、小(xiao)米三大(da)安卓(zhuo)應用市場的(de)近(jin)10,000個App中的(de)滲透(tou)率(lv)，2015年(nian)還不(bu)到1%，2021年(nian)已突(tu)破30%。業(ye)(ye)界認為(wei)，在(zai)未來幾年(nian)，實時音(yin)視頻技(ji)術在(zai)關鍵行業(ye)(ye)的(de)滲透(tou)率(lv)可(ke)能將超過(guo)50%。
對于很多消費者而(er)言，RTC、RTE作為默默耕耘(yun)在應(ying)用背后的(de)(de)重要技術，或(huo)許并沒有得到(dao)頗高的(de)(de)關(guan)注，但(dan)在產業(ye)端，這個(ge)能夠迸發出創新應(ying)用的(de)(de)領域(yu)卻是(shi)在持續成長中逐漸與越來越多的(de)(de)場景結合。
這也令筆(bi)者想起了此前與聲(sheng)(sheng)網相關(guan)負責人的(de)一次訪談——“即便你過去(qu)沒有聽(ting)說過聲(sheng)(sheng)網，但你一定用(yong)過聲(sheng)(sheng)網的(de)服務”。的(de)確，作為(wei)最早一批入局實時(shi)音視(shi)頻(pin)領域(yu)的(de)企(qi)業(ye)，聲(sheng)(sheng)網雖然在(zai)C端并(bing)不似(si)生態(tai)繁(fan)榮的(de)大廠那般名頭響亮，但其全球注冊應用(yong)在(zai)2022年(nian)9月(yue)就(jiu)已超(chao)過 51.1 萬(wan)，在(zai)行業(ye)內的(de)影響力可見一斑。
就(jiu)在今天(tian)上(shang)午，RTE 2023第九(jiu)屆實時互(hu)聯網大會在北京(jing)召開，這個由聲網從2015年搭建(jian)而成的(de)交流(liu)平臺，也逐漸成為了(le)RTC的(de)行業(ye)聚會，而在今天(tian)上(shang)午的(de)主論壇(tan)上(shang)，AIGC無疑成為了(le)主旋律。
AIGC+RTE，玩出什么新(xin)花(hua)樣
從去年年底開始，ChatGPT異軍突起，甚至被黃仁勛稱為人工智能的(de)“iPhone時刻”。時至今日，這場(chang)圍繞大模型(xing)、AIGC的(de)狂(kuang)歡還在持(chi)續(xu)，并(bing)且有更(geng)多(duo)相關的(de)技術、行(xing)業參與其(qi)(qi)中，RTE其(qi)(qi)實并(bing)不是(shi)最早加入的(de)，但應該(gai)算得上是(shi)極富創造(zao)力的(de)。
首先(xian)來了解一下什么是RTE。
據悉，2020年(nian)，聲(sheng)網在(zai)上市招(zhao)股書中首次公開提出“RTE(Real-Time Engagement)”概念(nian)(nian)，此后(hou)這一概念(nian)(nian)逐(zhu)漸被(bei)全行業(ye)認可(ke)和(he)使用。此前，更多被(bei)業(ye)內所熟(shu)知的RTC更多是(shi)強調(diao)對語(yu)義信息進行高質量和(he)高效率的傳遞(di)，而(er)RTE則是(shi)更聚焦用戶所需要(yao)的共享時空，即場景。
換言之(zhi)，RTC是從(cong)信息傳(chuan)遞的(de)角度(du)出(chu)發，而實(shi)時(shi)音視頻(pin)也僅(jin)僅(jin)提供語音溝通，能夠滿足單一(yi)的(de)場景(jing)(jing)和通話(hua)標準。而隨(sui)著實(shi)時(shi)互動(dong)的(de)創新場景(jing)(jing)涌現，加之(zhi)人們對于通話(hua)質量的(de)要(yao)求提升，低(di)時(shi)延、高清晰的(de)實(shi)時(shi)互動(dong)需求恰(qia)恰(qia)是RTE的(de)專長。
而火爆的AIGC自然是不需(xu)要過多介紹了，從聊(liao)天(tian)機器人到AI助理，再到到虛(xu)擬(ni)女友，再到復刻親人形象，其已經多次展示了驚人的創造力。
那(nei)么，RTE又(you)能(neng)夠與AI擦出哪些火花呢?
聲網創(chuang)始人(ren)兼CEO趙斌在(zai)RTE大會上展(zhan)示了聲網鳳鳴AI引(yin)擎優化線(xian)上課程噪聲的案例，以及利用(yong)AI算(suan)法提升實(shi)時(shi)(shi)視頻清(qing)晰度的案例，進一步介紹了AI對(dui)(dui)于RTE行業的顛覆式改(gai)造(zao)。此(ci)外，面向社交和泛娛樂(le)場景(jing)的實(shi)時(shi)(shi)互動，AIGC相(xiang)較傳統的AI對(dui)(dui)話機器(qi)人(ren)，還能夠提供更(geng)加(jia)接近于真人(ren)的情感價值和情緒價值。
趙斌還(huan)(huan)表(biao)示，AIGC對于RTE行業的(de)另一個影響(xiang)便是可以(yi)大幅提高應用開發效率。從編程、自動化(hua)測試再到(dao)文檔生產以(yi)及(ji)低(di)代碼(ma)平臺進化(hua)，都(dou)(dou)將(jiang)得到(dao)一定的(de)促進。雖(sui)然很多(duo)影響(xiang)和變(bian)化(hua)還(huan)(huan)都(dou)(dou)處于早期(qi)階段，但未來值(zhi)得釋(shi)放的(de)空間(jian)仍非(fei)常值(zhi)得期(qi)待(dai)，還(huan)(huan)有很多(duo)想(xiang)象(xiang)仍未被實現(xian)。
例如，AIGC能否(fou)徹底顛覆低代碼(ma)形成(cheng)的(de)方式，以對話(hua)的(de)形式指令機器(qi)來生成(cheng)代碼(ma)，甚至不光是(shi)生成(cheng)代碼(ma)，而(er)是(shi)生成(cheng)完整的(de)應用，從而(er)實現新一代的(de)無代碼(ma)能力。
至于聲(sheng)網，作為(wei)RTE賽道的(de)開創者(zhe)，其也率先(xian)推(tui)出了(le)AIGC RTE能力(li)模塊，可以和任何大模型平(ping)臺對接，將現有的(de)文字交流(liu)的(de)互動方式和溝通方式轉化(hua)成更加自然的(de)語(yu)音對話，同時也保障了(le)接近人與人對話的(de)低時延(yan)體驗(yan)。
據介紹，目前聲(sheng)網(wang)RTE x AIGC一(yi)站式解決方案，可以將 AI 對話端到端響(xiang)應延時控(kong)制在1.9秒以內，并(bing)且(qie)支持API快(kuai)速調用，提供開箱即(ji)用的場景化demo，最(zui)快(kuai)3個小時即(ji)可實現方案驗證。
趙(zhao)斌也(ye)表示，除了社交、直播、泛娛樂場景(jing)等，企(qi)(qi)業用戶近年來(lai)開(kai)始積(ji)極(ji)擁抱實(shi)時互(hu)動所(suo)帶來(lai)的(de)(de)一(yi)(yi)系(xi)列變(bian)化(hua)，開(kai)始基于RTE進行效率優化(hua)。企(qi)(qi)業也(ye)意識到如今的(de)(de)實(shi)時互(hu)動能力已經遠遠超出了企(qi)(qi)業內(nei)部視頻會(hui)議的(de)(de)需求，而實(shi)時互(hu)動平(ping)(ping)臺也(ye)不(bu)僅(jin)僅(jin)是視頻會(hui)議平(ping)(ping)臺，其(qi)所(suo)提供的(de)(de)無(wu)所(suo)不(bu)答的(de)(de)實(shi)時網絡以及無(wu)所(suo)不(bu)及的(de)(de)音(yin)視頻能力，正在成為(wei)企(qi)(qi)業數字化(hua)轉型的(de)(de)一(yi)(yi)個重(zhong)要支(zhi)撐。
對于幾(ji)萬、甚至幾(ji)十(shi)萬人的大(da)企業(ye)(ye)而言，往往需要構建全域一張網(wang)(wang)、全業(ye)(ye)務一張網(wang)(wang)、全設備(bei)一網(wang)(wang)通、全業(ye)(ye)務多形態(tai)連接(jie)的基(ji)礎能(neng)力。聲網(wang)(wang)也(ye)可以配合企業(ye)(ye)構建音視頻實時互動(dong)平臺，用統一中臺的方式(shi)，改造企業(ye)(ye)內部過(guo)去做一個(ge)應(ying)用就(jiu)要重新建一套系(xi)統、重新部署網(wang)(wang)絡的低效(xiao)(xiao)、重復(fu)建設模式(shi)，從而極大(da)地提高企業(ye)(ye)在業(ye)(ye)務上的靈活度(du)和效(xiao)(xiao)率。
值得注意的(de)是，在演講(jiang)的(de)最后，趙斌也帶了(le)one more thing——聲(sheng)網(wang)在RTE行業里面首次實現(xian)了(le)廣播級的(de)4K超高清實時(shi)互動體驗。
5G能與實時音視頻擦(ca)出(chu)什么火(huo)花?
雖然RTE 2023大會的(de)(de)主(zhu)論壇主(zhu)要聚焦(jiao)在了AIGC與RTE的(de)(de)結(jie)合(he)，但其實圍(wei)繞實時互動(dong)的(de)(de)通信技(ji)術升級(ji)也是不容忽視的(de)(de)重要底座。過去，業內(nei)一直(zhi)在期(qi)待(dai)5G能夠(gou)幫助RTE領域實現4G所未能達(da)到的(de)(de)體(ti)驗(yan)。
一(yi)方面，5G的(de)(de)超大(da)帶寬、超低時延等特征，可(ke)大(da)幅降(jiang)低音視(shi)頻信息(xi)的(de)(de)延遲和(he)緩(huan)沖(chong)時間，提高端到(dao)端毫秒級傳(chuan)輸時延的(de)(de)滿足率，為RTC的(de)(de)數據(ju)傳(chuan)輸奠定了堅實的(de)(de)基(ji)礎。另一(yi)方面，5G的(de)(de)商用之于不斷涌現的(de)(de)實時音視(shi)頻場(chang)景而言也是恰逢其時。
例如，在智慧醫療領域，無(wu)論是5G遠程會(hui)診，還是遠程手術示教(jiao)、遠程教(jiao)學等場(chang)景，都需要低時(shi)延(yan)、高(gao)清晰的實(shi)時(shi)音視頻(pin)系統。
此外，以(yi)聲網(wang)的(de)超低延時平行駕(jia)駛和(he)平行控制(zhi)方(fang)案(an)為例，該方(fang)案(an)面向(xiang)以(yi)無人車(che)、機器人為代表的(de)智能設備遠(yuan)程運維、人工接管和(he)遠(yuan)程控制(zhi)場景(jing)。針(zhen)對于同(tong)(tong)城遠(yuan)程控制(zhi)，聲網(wang)解(jie)決方(fang)案(an)通過(guo)標記(ji)優(you)先級優(you)化(hua)路由(you)調度策略和(he)同(tong)(tong)節(jie)點轉化(hua)方(fang)式(shi)，保障該場景(jing)下的(de)延時傳(chuan)輸(shu)質量。
同時還結合了多運營商物聯網卡場景下，通過Multipath多路徑融合的技術，保證網絡質量的可用性和弱網對抗能力。據悉，實測數據顯示，從無人駕駛車(che)輛攝像頭畫面采集(ji)，到(dao)遠(yuan)程(cheng)(cheng)控制臺(tai)顯(xian)示，聲網能做實(shi)時音視頻端(duan)到(dao)端(duan)時延最(zui)低百毫秒內，5G公網平(ping)均160ms;可(ke)靠(kao)信令可(ke)以做到(dao)端(duan)到(dao)端(duan)25ms之內，5G公網平(ping)均50ms，可(ke)以保障低速自動駕(jia)駛車(che)輛在(zai)30公里時速下，擁有相對可(ke)靠(kao)、安全和高(gao)效沉(chen)浸式的體驗，來(lai)完成所(suo)有的遠(yuan)程(cheng)(cheng)作業。
未來，隨(sui)著AIGC的進一步融合，加(jia)之5G提供更加(jia)穩(wen)定、高可靠的通道，RTE勢必將帶來更多(duo)創新(xin)應(ying)用，讓我們拭目(mu)以待。
參考資料(liao)：1.《全球(qiu)音視頻(pin)社交市(shi)場規(gui)模(mo)達1813億美(mei)元，60%以上用聲(sheng)網》，36氪產業創新2.《加(jia)速邁入“真(zhen)實時”物(wu)聯(lian)網 RTC成智能設備“硬(ying)指標”》，砍柴網3.《聲(sheng)網CEO趙斌：生成式 AI 技術將顛覆式改造社交和(he)泛(fan)娛(yu)樂行業|鈦媒體焦點》，鈦媒體APP
