騰訊云大數據技術已經從第一代(dai)(dai)(dai)(dai)的(de)(de)離線計算(suan),第二代(dai)(dai)(dai)(dai)的(de)(de)實時計算(suan),第三代(dai)(dai)(dai)(dai)的(de)(de)機(ji)器(qi)學習,發展到如今以隱(yin)私計算(suan)、數智融合以及云原生為代(dai)(dai)(dai)(dai)表的(de)(de)第四代(dai)(dai)(dai)(dai)。
剛剛獲悉,騰訊云在首(shou)屆大數(shu)(shu)據峰會(hui)上公布,其大數(shu)(shu)據平臺算力規模已經(jing)突破千萬核(he),日實時計(ji)算量(liang)達百萬億(yi)級、日運行(xing)容器(qi)數(shu)(shu)超(chao)億(yi)級,日計(ji)算數(shu)(shu)據量(liang)數(shu)(shu)百PB,服務的企業客(ke)戶數(shu)(shu)超(chao)2萬家,開源社(she)區代碼貢(gong)獻量(liang)超(chao)800萬行(xing),進一步呈(cheng)現了(le)自(zi)身在大數(shu)(shu)據領域的頂級實力。
騰訊云副總裁黃世飛表示,基于全(quan)新的(de)(de)技術架(jia)構、數(shu)(shu)據(ju)(ju)(ju)治(zhi)理理念以(yi)及產品能力,從底層(ceng)的(de)(de)大(da)數(shu)(shu)據(ju)(ju)(ju)基礎引(yin)擎、中層(ceng)的(de)(de)一(yi)站式大(da)數(shu)(shu)據(ju)(ju)(ju)開發治(zhi)理平臺,再到上層(ceng)的(de)(de)智能推薦、隱私計算(suan)和(he)BI應用,騰訊云已經構筑了國內領先的(de)(de)大(da)數(shu)(shu)據(ju)(ju)(ju)產品矩陣(zhen)。

騰訊云大數據產品矩陣
大數據(ju)與云(yun)(yun)原(yuan)生(sheng)技(ji)術(shu)的(de)結合成為解決目前大數據(ju)技(ji)術(shu)門(men)檻高(gao)、運維部署難(nan)度(du)大等問題的(de)最優解,企(qi)業在利(li)用(yong)大數據(ju)過程(cheng)中(zhong)真正(zheng)需要的(de)是(shi)一套開箱即用(yong)的(de)云(yun)(yun)原(yuan)生(sheng)產品服務(wu)。騰(teng)訊(xun)云(yun)(yun)大數據(ju)基于開源開放理(li)念(nian),以及(ji)內部單集群超萬節點(dian)的(de)大規模(mo)技(ji)術(shu)實踐(jian),沉淀了國內領先的(de)企(qi)業級云(yun)(yun)原(yuan)生(sheng)大數據(ju)技(ji)術(shu)架構的(de)構建能力。
彈性MapReduce (EMR)、Elasticsearch Service (ES)、云數(shu)(shu)(shu)據倉(cang)庫CDW、數(shu)(shu)(shu)據湖計算(suan)DLC、流(liu)計算(suan)Oceanus、數(shu)(shu)(shu)據集成(cheng)DateInLong等構成(cheng)了騰訊(xun)云大(da)數(shu)(shu)(shu)據基礎產品(pin)的(de)(de)核心引擎。以(yi)EMR來(lai)說(shuo),基于云原生技術的(de)(de)安全、低成(cheng)本、高可(ke)(ke)靠開(kai)源大(da)數(shu)(shu)(shu)據計算(suan)框架,幫助(zhu)客(ke)戶(hu)(hu)構建(jian)可(ke)(ke)彈性擴展的(de)(de)企業級大(da)數(shu)(shu)(shu)據技術架構,輕松應對 PB 級海量數(shu)(shu)(shu)據的(de)(de)價值(zhi)挖掘挑戰。數(shu)(shu)(shu)據湖計算(suan)DLC基于存(cun)算(suan)分(fen)離的(de)(de)產品(pin)架構,可(ke)(ke)以(yi)實現數(shu)(shu)(shu)據資產統一(yi)建(jian)設,幫助(zhu)用戶(hu)(hu)敏(min)捷、低成(cheng)本地管(guan)理和分(fen)析海量數(shu)(shu)(shu)據。
全新升(sheng)級(ji)的一(yi)站式大(da)數(shu)(shu)(shu)據(ju)開發(fa)治理(li)平(ping)臺(tai)WeData,基于業(ye)內獨(du)創的 DataOps 數(shu)(shu)(shu)據(ju)開發(fa)模式, 通過(guo)協同、效率、一(yi)體三大(da)核(he)心(xin)優(you)勢(shi), 實現了數(shu)(shu)(shu)據(ju)集成(cheng)、數(shu)(shu)(shu)據(ju)資產、數(shu)(shu)(shu)據(ju)開發(fa)、數(shu)(shu)(shu)據(ju)服務(wu)等(deng)全方(fang)位的數(shu)(shu)(shu)據(ju)治理(li)能力。憑借其(qi)基于開源、簡單易用(yong)、安全穩定、降本增效的優(you)勢(shi),騰(teng)訊云 WeData 能幫助企(qi)業(ye)大(da)幅提升(sheng)數(shu)(shu)(shu)據(ju)管理(li)效率和數(shu)(shu)(shu)據(ju)質量, 為(wei)業(ye)務(wu)創造價值, 目(mu)前已經在企(qi)業(ye)級(ji)數(shu)(shu)(shu)據(ju)倉庫(ku)構建、數(shu)(shu)(shu)據(ju)資產治理(li)等(deng)場(chang)景(jing)中被(bei)廣泛應用(yong)。
大數據和AI技術的融合不僅讓大數據的運維、部署更加智能,還可以打通數據和業務智能化之間的阻隔,實現價值閉環。騰訊云大數據正在加速推進和自主研發的人工智能平臺Ti-One的(de)(de)緊密結合(he),讓經過(guo)騰訊內部海量業務訓練(lian)過(guo)的(de)(de)智(zhi)能(neng)(neng)化真(zhen)能(neng)(neng)融入(ru)大(da)數據業務中(zhong)。新一代智(zhi)能(neng)(neng)推薦(jian)平臺采用業界領先的(de)(de)AI技(ji)術和推薦(jian)算法(fa),能(neng)(neng)夠為信(xin)息(xi)流(liu)分類(lei)頁推薦(jian)、短視頻個性化推薦(jian)、信(xin)息(xi)流(liu)猜你喜歡等場景提供強大(da)技(ji)術支撐。
為(wei)打破(po)數據(ju)孤島實現數據(ju)協(xie)同,全(quan)(quan)自研Angel PowerFL隱私計算(suan)框架(jia)和首創(chuang)的(de)基(ji)于Spark + MQ的(de)隱私計算(suan)模式,為(wei)政(zheng)務、金融(rong)、廣告營銷等眾多行業提(ti)供(gong)了數據(ju)安(an)全(quan)(quan)保障(zhang)。憑借該技術(shu),騰訊云大數據(ju)團隊連續兩(liang)年獲得(de)iDash世界隱私計算(suan)大賽冠軍,安(an)全(quan)(quan)性(xing)能領冠全(quan)(quan)球。
同(tong)時,騰(teng)訊云(yun)大數(shu)(shu)據BI產(chan)品,支(zhi)持騰(teng)訊云(yun)上(shang)各(ge)類數(shu)(shu)據源、數(shu)(shu)據處理(li)平臺快速(su)接入,拖(tuo)拽式敏(min)捷分析(xi)方(fang)式,讓非技術人(ren)員可(ke)快速(su)構建報(bao)表滿足復雜業務分析(xi)需求。
值得一提(ti)的是,這些公有(you)(you)云上的大(da)數(shu)據(ju)(ju)基礎引擎、數(shu)據(ju)(ju)開發治理(li)平臺、智能(neng)推(tui)薦、隱私(si)計算、BI等能(neng)力,也可以(yi)通過騰訊云大(da)數(shu)據(ju)(ju)處理(li)套件(jian)TBDS在(zai)私(si)有(you)(you)云或非云化環境(jing)等比例(li)獲(huo)取。
騰(teng)(teng)訊(xun)云(yun)(yun)副總(zong)裁(cai)劉煜宏表(biao)示:“未來,騰(teng)(teng)訊(xun)云(yun)(yun)大數(shu)(shu)據(ju)(ju)(ju)還(huan)將(jiang)在(zai)(zai)自(zi)適(shi)應計(ji)算架構、流批一(yi)體的(de)實時(shi)湖倉、大數(shu)(shu)據(ju)(ju)(ju)‘自(zi)動駕駛平臺’、云(yun)(yun)原生大數(shu)(shu)據(ju)(ju)(ju)等方向(xiang)上(shang)進一(yi)步發(fa)力(li),攜手合作(zuo)伙伴,為(wei)客戶提(ti)供(gong)(gong)更(geng)(geng)智能、更(geng)(geng)安全(quan)的(de)大數(shu)(shu)據(ju)(ju)(ju)產(chan)品服務。在(zai)(zai)更(geng)(geng)加基礎底層(ceng)的(de)編譯(yi)器(qi)領域(yu),我們將(jiang)深入打造自(zi)主可控的(de)數(shu)(shu)據(ju)(ju)(ju)科學編譯(yi)器(qi)引(yin)擎(qing),為(wei)上(shang)層(ceng)的(de)大數(shu)(shu)據(ju)(ju)(ju)產(chan)品發(fa)展提(ti)供(gong)(gong)強大的(de)技術(shu)保障。”
本次峰會上,騰訊(xun)(xun)云(yun)大數據(ju)(ju)還首次對外宣布“智理無數,心中有數”的品(pin)牌理念。同(tong)(tong)時,為推(tui)動云(yun)原生(sheng)大數據(ju)(ju)技術發展,共(gong)建云(yun)原生(sheng)大數據(ju)(ju)生(sheng)態,騰訊(xun)(xun)云(yun)聯合英偉達、Elastic、StarRocks、Apache Alluxio、SelectDB等多家(jia)軟硬件(jian)技術廠(chang)商與(yu)開源社區,共(gong)同(tong)(tong)發起成(cheng)立云(yun)原生(sheng)大數據(ju)(ju)技術生(sheng)態聯盟。