騰訊云(yun)大數據技術已經從第一代(dai)的離線計算,第二代(dai)的實時計算,第三代(dai)的機器(qi)學習,發展到(dao)如今以(yi)(yi)隱私計算、數智融合以(yi)(yi)及(ji)云(yun)原(yuan)生為代(dai)表(biao)的第四(si)代(dai)。
剛剛獲悉(xi),騰訊(xun)云在首(shou)屆大(da)數(shu)(shu)(shu)據(ju)峰(feng)會上公布,其大(da)數(shu)(shu)(shu)據(ju)平臺算力(li)規(gui)模已經突破千萬(wan)核,日(ri)實(shi)時(shi)計算量(liang)達百萬(wan)億級(ji)、日(ri)運行容器數(shu)(shu)(shu)超(chao)億級(ji),日(ri)計算數(shu)(shu)(shu)據(ju)量(liang)數(shu)(shu)(shu)百PB,服(fu)務的(de)企業客戶數(shu)(shu)(shu)超(chao)2萬(wan)家,開(kai)源(yuan)社區代碼貢(gong)獻量(liang)超(chao)800萬(wan)行,進一步呈現(xian)了自身在大(da)數(shu)(shu)(shu)據(ju)領域的(de)頂級(ji)實(shi)力(li)。
騰(teng)訊(xun)云(yun)(yun)副總裁黃世飛表示,基于全新的(de)技(ji)術架構、數(shu)據(ju)治理理念以及產(chan)品(pin)能力,從底層(ceng)的(de)大(da)(da)(da)數(shu)據(ju)基礎引擎、中層(ceng)的(de)一站式大(da)(da)(da)數(shu)據(ju)開發治理平臺,再到上(shang)層(ceng)的(de)智能推(tui)薦、隱私(si)計算和(he)BI應用,騰(teng)訊(xun)云(yun)(yun)已(yi)經(jing)構筑(zhu)了國內領先的(de)大(da)(da)(da)數(shu)據(ju)產(chan)品(pin)矩陣。
騰訊(xun)云(yun)大數據(ju)產品(pin)矩陣
大(da)數據(ju)與云原生技術(shu)的(de)(de)(de)結合成為解決目前大(da)數據(ju)技術(shu)門(men)檻高、運維部(bu)署難度大(da)等問(wen)題的(de)(de)(de)最優解,企(qi)(qi)業在利用大(da)數據(ju)過(guo)程中真正需要的(de)(de)(de)是一(yi)套開箱即用的(de)(de)(de)云原生產品服務。騰訊(xun)云大(da)數據(ju)基于開源(yuan)開放(fang)理念,以及(ji)內(nei)部(bu)單集群超萬節點的(de)(de)(de)大(da)規(gui)模技術(shu)實踐(jian),沉(chen)淀了國內(nei)領先的(de)(de)(de)企(qi)(qi)業級云原生大(da)數據(ju)技術(shu)架構的(de)(de)(de)構建能力。
彈性(xing)MapReduce (EMR)、Elasticsearch Service (ES)、云(yun)數(shu)(shu)據(ju)(ju)(ju)倉庫(ku)CDW、數(shu)(shu)據(ju)(ju)(ju)湖計算(suan)(suan)(suan)DLC、流計算(suan)(suan)(suan)Oceanus、數(shu)(shu)據(ju)(ju)(ju)集成DateInLong等構成了騰(teng)訊云(yun)大(da)數(shu)(shu)據(ju)(ju)(ju)基(ji)(ji)礎產(chan)品的核心(xin)引擎。以EMR來說(shuo),基(ji)(ji)于(yu)云(yun)原生(sheng)技術的安全、低成本(ben)、高可(ke)靠開源(yuan)大(da)數(shu)(shu)據(ju)(ju)(ju)計算(suan)(suan)(suan)框架,幫助(zhu)客戶構建(jian)可(ke)彈性(xing)擴展的企業級大(da)數(shu)(shu)據(ju)(ju)(ju)技術架構,輕松(song)應對 PB 級海量(liang)數(shu)(shu)據(ju)(ju)(ju)的價值挖掘挑(tiao)戰。數(shu)(shu)據(ju)(ju)(ju)湖計算(suan)(suan)(suan)DLC基(ji)(ji)于(yu)存算(suan)(suan)(suan)分離的產(chan)品架構,可(ke)以實現數(shu)(shu)據(ju)(ju)(ju)資(zi)產(chan)統一建(jian)設,幫助(zhu)用戶敏捷、低成本(ben)地管理和(he)分析海量(liang)數(shu)(shu)據(ju)(ju)(ju)。
全新升級的一(yi)站(zhan)式大(da)數(shu)(shu)(shu)(shu)據(ju)(ju)開(kai)發(fa)(fa)治(zhi)(zhi)理(li)平(ping)臺WeData,基(ji)于業(ye)內獨創的 DataOps 數(shu)(shu)(shu)(shu)據(ju)(ju)開(kai)發(fa)(fa)模式, 通過(guo)協同、效率、一(yi)體三大(da)核心(xin)優(you)勢, 實現了數(shu)(shu)(shu)(shu)據(ju)(ju)集成、數(shu)(shu)(shu)(shu)據(ju)(ju)資產(chan)、數(shu)(shu)(shu)(shu)據(ju)(ju)開(kai)發(fa)(fa)、數(shu)(shu)(shu)(shu)據(ju)(ju)服務等全方位的數(shu)(shu)(shu)(shu)據(ju)(ju)治(zhi)(zhi)理(li)能力。憑(ping)借其基(ji)于開(kai)源(yuan)、簡單易(yi)用、安全穩定、降本增效的優(you)勢,騰訊云 WeData 能幫助企(qi)業(ye)大(da)幅提升數(shu)(shu)(shu)(shu)據(ju)(ju)管理(li)效率和數(shu)(shu)(shu)(shu)據(ju)(ju)質量, 為(wei)業(ye)務創造價值, 目前已經在(zai)企(qi)業(ye)級數(shu)(shu)(shu)(shu)據(ju)(ju)倉庫(ku)構(gou)建、數(shu)(shu)(shu)(shu)據(ju)(ju)資產(chan)治(zhi)(zhi)理(li)等場景(jing)中被廣泛應(ying)用。
大數據和AI技術的融合不僅讓大數據的運維、部署更加智能,還可以打通數據和業務智能化之間的阻隔,實現價值閉環。騰訊云大數據正在加速推進和自主研發的人工智能平臺Ti-One的緊密結合,讓經過(guo)騰訊內(nei)部海量業(ye)務訓練(lian)過(guo)的智能化真能融入(ru)大(da)數(shu)據業(ye)務中。新(xin)一(yi)代智能推(tui)(tui)(tui)薦(jian)平臺采用業(ye)界(jie)領先的AI技(ji)術和推(tui)(tui)(tui)薦(jian)算法(fa),能夠(gou)為信(xin)息流分類(lei)頁推(tui)(tui)(tui)薦(jian)、短視頻個性化推(tui)(tui)(tui)薦(jian)、信(xin)息流猜你(ni)喜歡(huan)等(deng)場景提供強大(da)技(ji)術支撐。
為打破(po)數據孤島實現(xian)數據協同,全自研Angel PowerFL隱(yin)私(si)計(ji)算框架和首創的(de)基于Spark + MQ的(de)隱(yin)私(si)計(ji)算模式,為政務、金(jin)融、廣告營銷(xiao)等(deng)眾多行(xing)業提(ti)供(gong)了數據安全保障。憑借該技術,騰訊(xun)云大數據團隊連續兩年(nian)獲(huo)得iDash世界隱(yin)私(si)計(ji)算大賽冠(guan)軍(jun),安全性(xing)能領冠(guan)全球。
同時,騰訊(xun)云(yun)(yun)大數據(ju)BI產品,支持(chi)騰訊(xun)云(yun)(yun)上各類數據(ju)源、數據(ju)處(chu)理平(ping)臺快速接(jie)入,拖拽式敏(min)捷分析方(fang)式,讓非技術人(ren)員可快速構建報表滿(man)足(zu)復(fu)雜業(ye)務(wu)分析需求。
值得一(yi)提的是,這些公有(you)(you)云(yun)上的大(da)數據(ju)基礎(chu)引擎、數據(ju)開發治理平臺、智能推薦、隱私(si)計(ji)算、BI等能力,也可(ke)以通過(guo)騰訊云(yun)大(da)數據(ju)處(chu)理套件TBDS在(zai)私(si)有(you)(you)云(yun)或非云(yun)化環境等比例獲取。
騰訊云副總(zong)裁劉煜(yu)宏表(biao)示(shi):“未來(lai),騰訊云大(da)(da)(da)數據(ju)還將(jiang)(jiang)在(zai)(zai)自適應計算(suan)架構、流(liu)批(pi)一體的(de)實時湖倉、大(da)(da)(da)數據(ju)‘自動(dong)駕(jia)駛平臺’、云原生大(da)(da)(da)數據(ju)等方向(xiang)上進(jin)一步發力(li),攜手合作伙(huo)伴,為(wei)客戶提供更(geng)智能(neng)、更(geng)安(an)全的(de)大(da)(da)(da)數據(ju)產品服務。在(zai)(zai)更(geng)加(jia)基礎底層的(de)編譯器領(ling)域,我(wo)們(men)將(jiang)(jiang)深入打造(zao)自主可(ke)控的(de)數據(ju)科學編譯器引擎,為(wei)上層的(de)大(da)(da)(da)數據(ju)產品發展提供強大(da)(da)(da)的(de)技術(shu)保障。”
本(ben)次峰會上,騰(teng)訊(xun)云大數(shu)據還首(shou)次對外宣布“智理無數(shu),心中有(you)數(shu)”的(de)品牌理念。同時,為推(tui)動云原(yuan)生(sheng)大數(shu)據技術發(fa)展,共建(jian)云原(yuan)生(sheng)大數(shu)據生(sheng)態,騰(teng)訊(xun)云聯合(he)英偉(wei)達、Elastic、StarRocks、Apache Alluxio、SelectDB等多(duo)家軟硬(ying)件技術廠商與開源社區,共同發(fa)起成(cheng)立云原(yuan)生(sheng)大數(shu)據技術生(sheng)態聯盟。