作為連接物、人和信息資源的智能系統，物聯網實現了對物理和虛擬世界信息的處理，伴隨著 5G 技術的成熟，物聯網正在快速發展并滲透到我們衣食住行的各個方面，給我們的生活帶來智能和便捷。
為(wei)了幫助更多開發者朋友了解與智能物(wu)聯網有關的前沿(yan)技術干貨，4 月(yue) 23 日，以(yi)“智能物(wu)聯網”為(wei)主(zhu)題的百度技術沙(sha)龍(long)第 98 期(qi)再次(ci)如約而至。
本(ben)次，我們邀請到了百(bai)度(du)(du)智(zhi)能(neng)云物聯(lian)(lian)網(wang)(wang)主任架構師(shi)李樂丁、百(bai)度(du)(du)智(zhi)能(neng)云物聯(lian)(lian)網(wang)(wang)高級(ji)產品(pin)經(jing)理徐偉、百(bai)度(du)(du)智(zhi)能(neng)云物聯(lian)(lian)網(wang)(wang)虛擬現(xian)實技(ji)術負責人柴學(xue)智(zhi)以(yi)及(ji)百(bai)度(du)(du)智(zhi)能(neng)云物聯(lian)(lian)網(wang)(wang)產品(pin)經(jing)理杜(du)凱，四位老(lao)師(shi)分別圍繞物聯(lian)(lian)網(wang)(wang)技(ji)術發表了主題(ti)分享。除此以(yi)外(wai)，百(bai)度(du)(du)智(zhi)能(neng)邊緣高級(ji)開(kai)發工程(cheng)師(shi)趙(zhao)鑫、百(bai)度(du)(du)高級(ji)研發工程(cheng)師(shi)袁(yuan)振(zhen)坤以(yi)及(ji)百(bai)度(du)(du)智(zhi)能(neng)云物聯(lian)(lian)網(wang)(wang)部資深研發工程(cheng)師(shi)陳(chen)高飛(fei)，還(huan)結合實際產品(pin)帶(dai)領(ling)開(kai)發者一同進行(xing)實操演(yan)練。
智能物聯網的技術發展和應用實踐
開場(chang)時，百度智能(neng)云(yun)物(wu)(wu)聯(lian)(lian)網主任架構師(shi)李樂丁首先分享了百度天工(gong) AloT 平臺(tai)的(de)應(ying)(ying)用(yong)(yong)發展和(he)實踐。同時介紹了天工(gong) AIoT 平臺(tai)可提(ti)供完(wan)善(shan)易用(yong)(yong)的(de)物(wu)(wu)聯(lian)(lian)網基礎(chu)設施(shi)，進一(yi)步完(wan)善(shan)智能(neng)物(wu)(wu)聯(lian)(lian)網應(ying)(ying)具備的(de)三大特(te)點，第(di)(di)一(yi)是(shi)(shi)連接(jie)萬物(wu)(wu)，通過(guo)物(wu)(wu)聯(lian)(lian)網平臺(tai)跨越時空多維度，連接(jie)設備、數(shu)據(ju)與算力；第(di)(di)二是(shi)(shi)對話萬物(wu)(wu)，提(ti)供領先的(de)視覺、語音、數(shu)據(ju)等(deng)服(fu)務，賦予萬物(wu)(wu)對話的(de)能(neng)力；第(di)(di)三是(shi)(shi)智慧萬物(wu)(wu)，基于(yu)前沿(yan)的(de) AI 技術(shu)及海量數(shu)據(ju)，打造行業智慧應(ying)(ying)用(yong)(yong)，助力行業升級。
端邊云(yun)全面智(zhi)能化(hua)的(de)天工 AIoT 平(ping)臺，具有專(zhuan)業可靠的(de)設備管(guan)理、數據管(guan)理、時空(kong)交互(hu)、視(shi)覺(jue)分析、語音語義理解能力(li)，為企業提供完整價值鏈路。活動中，樂丁老師分別從視(shi)覺(jue)智(zhi)能、數據智(zhi)能、語音語義智(zhi)能三個角度解讀(du)了天工 AIoT 平(ping)臺的(de)核心(xin)技術。
視覺智能與百度視覺部門深度合作，提供了視覺一體終端設備、深度相機、巡檢機器人等一系列視覺中間件；數據智能可以幫助大家獲取各種數據分析模型，比如能源數據分析模型、設備分析模型、運行數據分析模型以及技術優化等，同時我們也提供創建新的模型訓練平臺，可以將物聯網原始數據進行整理和分析，獲取到一些高級策略；語音智能提供了鴻鵠的高級語音芯片，幫助我(wo)(wo)們直接構建智能的終端設備(bei)。基于這(zhe)些中間(jian)件設備(bei)，我(wo)(wo)們在供(gong)熱、電力、燃氣、應急、工業、物流、園區(qu)、環(huan)保、醫(yi)療、家居等各場景(jing)中都(dou)提供(gong)了綜合(he)的服務方(fang)案(an)。
物聯網邊緣計算與視覺智能技術
主題分享
來(lai)(lai)(lai)自(zi)百度智能云的(de)(de)物聯網高級(ji)產品(pin)經(jing)理徐偉，在開(kai)場(chang)時(shi)引用了(le)一(yi)組(zu)數(shu)據，據介紹，根(gen)據百度和(he)波(bo)士頓(dun)咨詢的(de)(de)聯合調研可以(yi)(yi)看到：市場(chang)上定(ding)制(zhi)化 AI 需求占比達到 86%；近三年來(lai)(lai)(lai)，百度 AI 開(kai)放(fang)平臺定(ding)制(zhi)化模型增長超(chao)(chao)過(guo) 6 倍(bei)；同時(shi)，一(yi)份來(lai)(lai)(lai)自(zi)邊(bian)緣(yuan)計算產業研究報告的(de)(de)數(shu)據顯(xian)示，物聯網數(shu)據在邊(bian)緣(yuan)側處理占比達到 45%；AI 模型邊(bian)緣(yuan)部署場(chang)景(jing)比例超(chao)(chao)過(guo) 50%。由此我們可以(yi)(yi)得出一(yi)個初步結論，定(ding)制(zhi)化 AI 模型越來(lai)(lai)(lai)越多，同時(shi) AI 模型邊(bian)緣(yuan)部署場(chang)景(jing)也屢(lv)創新高。
徐偉還(huan)針對 AIoT 視覺(jue)智(zhi)能(neng)整體技術(shu)架構做(zuo)了(le)(le)介紹，百度提(ti)供面(mian)向不同(tong)用(yong)戶(hu)的(de)(de)(de) AI 開(kai)發平(ping)(ping)臺，EasyDL 是(shi)(shi)零門檻 AI 開(kai)發平(ping)(ping)臺，平(ping)(ping)臺可以(yi)覆蓋(gai)圖像、視頻、文本、語(yu)音、OCR、結構化數據(ju)(ju)、商品檢測等(deng)七大(da)方向的(de)(de)(de)數據(ju)(ju)來源，通(tong)過零代碼(ma)的(de)(de)(de)交互方式，能(neng)夠產出可以(yi)部署在公有云(yun)(yun)、設備端 SDK、軟硬一(yi)體和本地服務器等(deng)多(duo)種不同(tong)方式下的(de)(de)(de)靈活(huo)的(de)(de)(de)部署包；BML 是(shi)(shi)面(mian)向算法工(gong)(gong)程師(shi)的(de)(de)(de)全功(gong)能(neng) AI 開(kai)發平(ping)(ping)臺，提(ti)供了(le)(le)從數據(ju)(ju)采(cai)集、數據(ju)(ju)清洗、數據(ju)(ju)擴充、數據(ju)(ju)標(biao)注、模(mo)(mo)(mo)型(xing)構建到模(mo)(mo)(mo)型(xing)管(guan)(guan)理(li)(li)、云(yun)(yun)端及離線推理(li)(li)服務管(guan)(guan)理(li)(li)等(deng) AI 開(kai)發過程的(de)(de)(de)全生(sheng)命周期管(guan)(guan)理(li)(li)功(gong)能(neng)。在完成(cheng)模(mo)(mo)(mo)型(xing)開(kai)發以(yi)后，百度提(ti)供的(de)(de)(de) EasyEdge 模(mo)(mo)(mo)型(xing)轉化工(gong)(gong)具(ju)可以(yi)讓云(yun)(yun)端模(mo)(mo)(mo)型(xing)適配邊緣異(yi)構設備，最終通(tong)過百度天(tian)工(gong)(gong) AIoT 智(zhi)能(neng)邊緣平(ping)(ping)臺的(de)(de)(de)應用(yong)管(guan)(guan)理(li)(li)、應用(yong)編(bian)排和應用(yong)部署能(neng)力來打通(tong)視覺(jue)智(zhi)能(neng)交付(fu)的(de)(de)(de)最后一(yi)公里(li)。
天工智能邊緣 AI 視頻推斷實戰演練
為了加深開發者朋(peng)友們的體(ti)驗，百(bai)度智能邊(bian)緣高級開發工程師趙(zhao)鑫現場帶(dai)領大家進(jin)行了實戰演(yan)練。
在(zai)演練(lian)之前，他首先(xian)給(gei)我(wo)們假設了一(yi)個場景(jing)：如果需(xu)要(yao)(yao)把(ba)一(yi)個應(ying)(ying)(ying)(ying)用(yong)部署到設備(bei)上，我(wo)們需(xu)要(yao)(yao)怎么(me)做(zuo)？常規來看，可以把(ba)應(ying)(ying)(ying)(ying)用(yong)在(zai)設備(bei)上進(jin)行安裝，如果應(ying)(ying)(ying)(ying)用(yong)有(you)更新需(xu)求，就重新進(jin)行安裝、部署、更新以及啟(qi)動。但(dan)如果是一(yi)個路(lu)邊的(de)智能設備(bei)，我(wo)們不方便手動地把(ba)應(ying)(ying)(ying)(ying)用(yong)進(jin)行復(fu)制，那(nei)我(wo)們需(xu)要(yao)(yao)考(kao)慮什么(me)事呢？這時(shi)就需(xu)要(yao)(yao)引(yin)入一(yi)個云端和控(kong)制臺(tai)的(de)概念，只需(xu)要(yao)(yao)把(ba)應(ying)(ying)(ying)(ying)用(yong)提交到云端控(kong)制臺(tai)，控(kong)制臺(tai)發給(gei)后(hou)方的(de)服(fu)務，服(fu)務于端上構建一(yi)條(tiao)連(lian)接，就可以實(shi)現應(ying)(ying)(ying)(ying)用(yong)的(de)遠程(cheng)下發。
這(zhe)便是邊緣計算核心的(de)工(gong)作流程：完(wan)成(cheng)端上狀態的(de)上報(bao)，以及(ji)云端遠程應用的(de)下發(fa)、更(geng)新、部署(shu)能力(li)。在介紹完(wan)邊緣計算的(de)基礎概念以及(ji)基本模塊的(de)使(shi)用方法(fa)后，趙鑫(xin)帶領開發(fa)者朋友進(jin)行了實(shi)操演練。
虛擬現實核心技術剖析與實踐
主題分享
百(bai)度智能云物(wu)聯網虛擬現實技術(shu)(shu)負責人柴學(xue)智通過(guo)虛擬現實技術(shu)(shu)發(fa)展史及趨(qu)勢、虛擬現實核(he)心技術(shu)(shu)要(yao)素剖析(xi)及百(bai)度 VR 產品(pin)技術(shu)(shu)實踐三個部分介紹了(le)虛擬現實技術(shu)(shu)。
虛(xu)(xu)擬現實(shi)產業(ye)(ye)的(de)(de)本質是(shi) VR 內(nei)容(rong)的(de)(de)生產和消費。基于此(ci)，虛(xu)(xu)擬現實(shi)的(de)(de)三大核心技術(shu)(shu)包括數據三維化、交(jiao)互多(duo)人(ren)化以及渲染(ran)云(yun)端化。在這個業(ye)(ye)務模(mo)式下(xia)，柴學智還(huan)介(jie)紹了(le)百度(du) VR 整體(ti)技術(shu)(shu)框架的(de)(de)三個顯著特(te)點(dian)：首先是(shi)能力開放，VR 整體(ti)技術(shu)(shu)架構背靠百度(du)智能云(yun)與百度(du)大腦，在點(dian)直播、云(yun) VR、多(duo)人(ren)互動(dong)、三維重建、VR 編輯、內(nei)容(rong)交(jiao)互場景下(xia)，有著行業(ye)(ye)領先的(de)(de)技術(shu)(shu)積累；其次是(shi)平臺通(tong)用，我(wo)們夯實(shi)了(le) VR 內(nei)容(rong)平臺的(de)(de)全平臺屬(shu)性(xing)，讓 VR 內(nei)容(rong)的(de)(de)生產更(geng)加便利高效，讓 VR 內(nei)容(rong)的(de)(de)消費通(tong)路更(geng)加順暢；最后是(shi)場景豐(feng)(feng)富，依靠豐(feng)(feng)富的(de)(de)產品(pin)矩陣和深厚(hou)的(de)(de)技術(shu)(shu)沉淀，百度(du) VR 團隊在教育、營(ying)銷、政企、工業(ye)(ye)等諸多(duo)方向，為電(dian)商、廣告、會展、黨建等場景擴展了(le)新(xin)的(de)(de)價值與用戶(hu)體(ti)驗。
百度 VR Suite（VR 開發者套件）實戰
在全面地了解百(bai)度(du) VR 技術(shu)以(yi)(yi)后，來自(zi)百(bai)度(du)的高級研發(fa)工程師(shi)袁振(zhen)坤又(you)結合實(shi)操演練，為開發(fa)者們深入介紹了百(bai)度(du) VR Suite 在虛擬現實(shi)領(ling)域的技術(shu)生態以(yi)(yi)及(ji)它的實(shi)現和應用實(shi)踐(jian)。
據他(ta)介紹，百度(du) VR Suite 是百度(du) VR 核心的(de)技(ji)(ji)術套件(jian)，是一種(zhong)渲染(ran)與展示 VR 內(nei)容的(de)技(ji)(ji)術 SDK；可以渲染(ran) 3D 環物、3D 模(mo)型、全(quan)景(jing)(jing)圖、全(quan)景(jing)(jing)視頻(pin)、景(jing)(jing)深漫游等多種(zhong)品類(lei)(lei)，應用于(yu) VR 電商(shang)、VR 看房、VR 看車等多個(ge)領域，解決跨平臺支持、多品類(lei)(lei)渲染(ran)的(de)難(nan)點(dian)，助力(li)開(kai)發者實現全(quan)平臺、全(quan)內(nei)容、高性能(neng)地展示與管理 VR 內(nei)容。
鴻鵠芯片及語音語義一體化
主題分享
百(bai)度智能云物聯網產品(pin)經理(li)杜(du)凱介紹(shao)了(le)度家(jia)語(yu)(yu)音語(yu)(yu)義平臺(tai)架構采用了(le)端到端的設計分為鴻鵠芯(xin)片、語(yu)(yu)音技術以及語(yu)(yu)義解析三部分，同時，度家(jia)平臺(tai)也(ye)會接入百(bai)度天工 AIoT 平臺(tai)進行設備管理(li)和(he)數據處理(li)。
在硬件方面，鴻鵠語音芯片是專門為智能家居和車載語音(yin)(yin)交互場景設(she)(she)計的(de)遠(yuan)場語音(yin)(yin)交互芯片(pian)，具有(you)遠(yuan)場陣列(lie)信號實(shi)時處理、高精度超低誤報語音(yin)(yin)喚醒、離線語音(yin)(yin)識別(bie)、低功(gong)耗等核心能力；在(zai)(zai)產(chan)(chan)品方案設(she)(she)計方面(mian)(mian)，它可(ke)以支持(chi)安卓、Linux 系統等不(bu)同平臺；在(zai)(zai)語義(yi)能力方面(mian)(mian)，度家(jia)語音(yin)(yin)語義(yi)平臺除了(le)(le)可(ke)以提供智能問(wen)答、天氣(qi)、笑話、翻譯等功(gong)能，還特別(bie)針對控制類需求設(she)(she)計開發了(le)(le)一套物模型的(de)產(chan)(chan)品。
實戰演練
學習了理論(lun)知(zhi)識，百(bai)度智(zhi)能云物(wu)聯(lian)網(wang)部資(zi)深研發(fa)工程師陳(chen)高飛(fei)，基于鴻鵠芯片(pian)帶領開(kai)發(fa)者朋友做了一(yi)個(ge)實(shi)戰演練。用戶通過購買度家(jia)語(yu)(yu)音語(yu)(yu)義一(yi)體化(hua)服(fu)務以及鴻鵠芯片(pian)開(kai)發(fa)板后(hou)，便(bian)可跟(gen)隨實(shi)戰演練的步驟，感受端云一(yi)體化(hua)的演示實(shi)例。
