隨著越(yue)來(lai)越(yue)多的研究伙伴加入以及(ji)新(xin)技(ji)術(shu)和(he)(he)新(xin)產品的不(bu)斷披(pi)露，歐盟于2022年(nian)底(di)啟動(dong)的NimbleAI這一(yi)前沿項目在喧囂的GPT熱潮(chao)中(zhong)，開始展現出一(yi)條新(xin)的智能化(hua)和(he)(he)數字化(hua)轉型之道。NimbleAI旨在推動(dong)神經(jing)形(xing)態(tai)視覺（neuromorphic vision）傳感和(he)(he)處理(li)技(ji)術(shu)的發展和(he)(he)研究。作為一(yi)種創新(xin)的視覺感知和(he)(he)處理(li)技(ji)術(shu)，神經(jing)形(xing)態(tai)視覺參(can)考了(le)生(sheng)物(wu)系統工(gong)作方(fang)式，通過檢測動(dong)態(tai)場景中(zhong)的變化(hua)來(lai)決定是(shi)否更細致地查看捕捉到(dao)的內容，而不(bu)是(shi)花費大(da)(da)量(liang)資(zi)(zi)源區連續(xu)分析整個場景，從而節省大(da)(da)量(liang)資(zi)(zi)源和(he)(he)大(da)(da)幅度縮短延(yan)遲。
盡管NimbleAI是一個啟動不久的新項目，它已經在帶動許多新的計算和控制技術的研究和開發。例如，全球領先的定制處理器IP和開發工具提供商Codasip也一直關注和參與該領域的進展；作為Codasip的創新孵化器，該公司旗下的Codasip Labs不斷探索將未來新技術快速推進到應用，因而于近期加入NimbleAI項目，為其開發一個RISC-V可定制內核，賦能神經形態傳感3D集成芯片。
歐盟的NimbleAI項目是一個為期3年、耗資1000萬歐元的研究項目，匯集了來自歐盟和英國的商業組織和學術界的合作伙伴共同參與研發。該項目由歐盟資助，旨在設計一種神經形態視覺傳感和處理的3D集成芯片。在動輒需要上萬張高性能GPU卡和巨量存儲的GPT人工智能時代，這一靈感來自于眼睛對(dui)光線的(de)(de)探測和大腦對(dui)視覺(jue)信(xin)息(xi)處理的(de)(de)新機(ji)器視覺(jue)和智能技術，以其對(dui)資源和算(suan)力的(de)(de)節省再(zai)加更(geng)低的(de)(de)延遲而廣(guang)受關注，因而NimbleAI項目也吸引了(le)眾多的(de)(de)目光。
歐盟NimbleAI項(xiang)目的部(bu)分(fen)成員(yuan)（圖片來(lai)源：NimbleAI）
顯而(er)易見，這是一個受生物(wu)學啟發(fa)的(de)(de)前沿(yan)技(ji)術(shu)，目(mu)標是提高下一代(dai)基于事件的(de)(de)視覺傳感的(de)(de)神經(jing)形態(tai)芯片的(de)(de)能(neng)(neng)源效率(lv)和性能(neng)(neng)。如(ru)果(guo)一切按計劃進行(xing)(xing)，那么會創建一種完整的(de)(de)神經(jing)形態(tai)架構，賦能(neng)(neng)終端設備有(you)效準確地運(yun)行(xing)(xing)和多樣化的(de)(de)計算機視覺算法。目(mu)前這些應用設備通常在資源和面積上受到限制(zhi)，典型的(de)(de)應用領域(yu)包括手(shou)持和電池供電的(de)(de)醫療成像設備、自動駕駛(shi)車輛智能(neng)(neng)顯示器、可穿戴的(de)(de)眼球(qiu)追蹤眼鏡等等。
將生(sheng)物系(xi)統(tong)作為電子系(xi)統(tong)的(de)(de)“黃金(jin)基(ji)(ji)準”是近(jin)年來(lai)的(de)(de)一個(ge)技術趨勢(shi)。受到生(sheng)物學的(de)(de)啟發(fa)，NimbleAI正(zheng)在(zai)利用生(sheng)物眼腦(nao)系(xi)統(tong)作為其系(xi)統(tong)架構。該項(xiang)目正(zheng)在(zai)實施一個(ge)始終在(zai)線的(de)(de)傳感模式，高度專(zhuan)業化的(de)(de)事(shi)(shi)件驅動處理內核和神經網絡，以(yi)使用最少的(de)(de)能量(liang)對選(xuan)定(ding)的(de)(de)刺激進行視覺推理。通(tong)過(guo)基(ji)(ji)于事(shi)(shi)件來(lai)決定(ding)應該發(fa)送(song)和分(fen)(fen)(fen)析什么信息(xi)，計算系(xi)統(tong)就可(ke)以(yi)選(xuan)擇捕(bu)捉(zhuo)和分(fen)(fen)(fen)析有(you)意義(yi)的(de)(de)特征信息(xi)，而不需(xu)要捕(bu)捉(zhuo)和分(fen)(fen)(fen)析所(suo)有(you)信息(xi)。這種基(ji)(ji)于事(shi)(shi)件的(de)(de)方法(fa)可(ke)以(yi)大(da)幅(fu)度降(jiang)低資源(yuan)需(xu)求，節省大(da)量(liang)能耗，并減少延遲。
作(zuo)為定制處理(li)器專家，Codasip在(zai)該(gai)項目中積極(ji)探索RISC-V ISA在(zai)內(nei)存加速器中的擴展，這(zhe)些加速器由合作(zuo)伙伴CEA提(ti)供。定制的RISC-V處理(li)有助(zhu)于(yu)提(ti)高神經(jing)形態芯片(pian)的性(xing)能并降低其功耗。為了實現這(zhe)一目標，項目選(xuan)用(yong)了Codasip Studio工(gong)具(ju)和CodAL架構描述(shu)語言(yan)，這(zhe)些工(gong)具(ju)促使定制工(gong)作(zuo)流程變得直(zhi)接便捷。之后由Codasip開發(fa)的RISC-V內(nei)核會(hui)被映(ying)射到Menta SAS的嵌入式FPGA（eFPGA）模塊上。
改變游戲規則的定制處理器技術
目(mu)(mu)(mu)前(qian)在NimbleAI項目(mu)(mu)(mu)中，Codasip團隊(dui)正(zheng)在開(kai)發(fa)基于RISC-V的下一(yi)代(dai)人(ren)工(gong)智能處理(li)器(qi)。同時(shi)這也是Codasip Labs的系列項目(mu)(mu)(mu)中的一(yi)個完美案例(li)。Codasip Labs專注于關鍵應用(yong)領域，包括安全(quan)、功能安全(quan)和人(ren)工(gong)智能/機器(qi)學習（AI/ML）等等。以發(fa)現(xian)和打造創新(xin)技術(shu)來擴展定(ding)(ding)制(zhi)計算的無限可能性為宗(zong)旨(zhi)。在NimbleAI項目(mu)(mu)(mu)之(zhi)前(qian)，Codasip的可定(ding)(ding)制(zhi)RISC-V處理(li)器(qi)IP和Codasip Studio定(ding)(ding)制(zhi)開(kai)發(fa)工(gong)具已(yi)經得到了實際應用(yong)的廣(guang)泛驗證并獲得了多項業界大獎的褒嘉，搭(da)載其IP的處理(li)器(qi)的出貨(huo)量已(yi)超(chao)過(guo)20億(yi)顆。
NimbleAI項(xiang)目正在證明一個(ge)新(xin)的趨勢：通過定制的、領域(yu)專(zhuan)用(yong)的處(chu)理器設(she)計，可以(yi)加快(kuai)直接針對智能(neng)(neng)化應用(yong)的定制化/差異化處(chu)理器產品的上(shang)市時間，并(bing)能(neng)(neng)夠以(yi)高(gao)性(xing)能(neng)(neng)和(he)(he)低功耗等(deng)特性(xing)來最終(zhong)贏得市場青睞。在為(wei)期(qi)3年的NimbleAI項(xiang)目結(jie)束時，與(yu)目前(qian)基于幀的CPU或GPU處(chu)理視(shi)(shi)頻(pin)標準(zhun)相比，我(wo)們期(qi)望看到重大的性(xing)能(neng)(neng)提升。該項(xiang)目將實現新(xin)的功能(neng)(neng)和(he)(he)實際實現，以(yi)解鎖更先進的人工智能(neng)(neng)和(he)(he)計算機視(shi)(shi)覺算法和(he)(he)應用(yong)。
