日本黄色一级经典视频|伊人久久精品视频|亚洲黄色色周成人视频九九九|av免费网址黄色小短片|黄色Av无码亚洲成年人|亚洲1区2区3区无码|真人黄片免费观看|无码一级小说欧美日免费三级|日韩中文字幕91在线看|精品久久久无码中文字幕边打电话

當(dāng)前位置:首頁 > 嵌入式 > 嵌入式分享
嵌入式AI加速是針對(duì)端側(cè)硬件資源受限場(chǎng)景,對(duì)AI推理全流程進(jìn)行優(yōu)化的技術(shù)體系,核心目標(biāo)是在保證識(shí)別精度的前提下,降低算力消耗、提升推理速度、減少內(nèi)存占用,適配掃地機(jī)器人的嵌入式硬件平臺(tái)。其技術(shù)框架分為硬件加速層、模型優(yōu)化層、推理引擎層三層結(jié)構(gòu),逐層協(xié)同實(shí)現(xiàn)高效算力釋放。
硬件加速層:端側(cè)算力載體選型
掃地機(jī)器人嵌入式硬件無法搭載高性能GPU,需選用輕量化、低功耗的AI加速硬件,主流方案分為三類,可根據(jù)產(chǎn)品定位靈活搭配:
集成NPU的主控MCU:內(nèi)置神經(jīng)網(wǎng)絡(luò)處理單元(NPU)的嵌入式微控制器,專為端側(cè)AI推理設(shè)計(jì),功耗低、體積小、成本可控,可直接處理圖像數(shù)據(jù),無需額外加速芯片,是中低端掃地機(jī)器人的主流選擇。
獨(dú)立AI加速芯片:針對(duì)高算力需求,搭載專用邊緣AI加速器,算力更強(qiáng),支持復(fù)雜模型并行計(jì)算,適配高端機(jī)型的多類別、高精度識(shí)別場(chǎng)景,功耗控制優(yōu)于傳統(tǒng)GPU。
FPGA可編程加速:基于現(xiàn)場(chǎng)可編程門陣列,可根據(jù)算法邏輯定制硬件電路,算力利用率高,適配需要定制化識(shí)別邏輯的場(chǎng)景,但開發(fā)門檻相對(duì)較高。
硬件選型需兼顧算力、功耗、成本三者平衡,優(yōu)先選用支持INT8量化、算子加速的硬件,匹配嵌入式平臺(tái)的低功耗要求。
模型優(yōu)化層:輕量化深度學(xué)習(xí)模型改造
深度學(xué)習(xí)模型體積大、算力消耗高,需通過輕量化改造適配嵌入式端,核心優(yōu)化手段包括裁剪、量化、蒸餾、輕量化架構(gòu)設(shè)計(jì),在識(shí)別精度損失可控的前提下,大幅壓縮模型體積、降低推理耗時(shí)。
模型裁剪:剔除模型中冗余的神經(jīng)元、卷積層與通道,保留對(duì)障礙物識(shí)別關(guān)鍵的算子,減少無效運(yùn)算,降低模型參數(shù)量與計(jì)算量。
量化壓縮:將模型參數(shù)從高精度浮點(diǎn)型(FP32)轉(zhuǎn)換為低精度整型(INT8/INT16),減少內(nèi)存占用與算力消耗,量化后模型體積可壓縮70%以上,推理速度顯著提升。
知識(shí)蒸餾:以高精度大模型為教師模型,訓(xùn)練輕量化小模型,讓小模型學(xué)習(xí)大模型的識(shí)別能力,兼顧輕量化與識(shí)別精度。
輕量化網(wǎng)絡(luò)架構(gòu):采用MobileNet、ShuffleNet、YOLO-Nano等專為端側(cè)設(shè)計(jì)的網(wǎng)絡(luò)結(jié)構(gòu),通過深度可分離卷積、分組卷積等操作,減少計(jì)算量,適配嵌入式算力。
推理引擎層:端側(cè)推理部署適配
推理引擎是連接模型與硬件的橋梁,負(fù)責(zé)將優(yōu)化后的模型編譯為硬件可執(zhí)行的指令,發(fā)揮加速硬件的算力潛力。針對(duì)掃地機(jī)器人場(chǎng)景,需選用輕量級(jí)、開源的端側(cè)推理引擎,如TensorFlow Lite for Microcontrollers、NCNN、MNN、Tengine等,這類引擎支持跨平臺(tái)部署、算子優(yōu)化、內(nèi)存復(fù)用,可針對(duì)嵌入式硬件進(jìn)行定制化編譯,消除推理過程中的性能瓶頸。
本站聲明: 本文章由作者或相關(guān)機(jī)構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點(diǎn),本站亦不保證或承諾內(nèi)容真實(shí)性等。需要轉(zhuǎn)載請(qǐng)聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請(qǐng)及時(shí)聯(lián)系本站刪除。
換一批
延伸閱讀

特朗普集團(tuán)近日取消了其新推出的T1智能手機(jī)“將在美國制造”的宣傳標(biāo)語,此舉源于外界對(duì)這款手機(jī)能否以當(dāng)前定價(jià)在美國本土生產(chǎn)的質(zhì)疑。

關(guān)鍵字: 特朗普 蘋果 AI

美國總統(tǒng)特朗普在公開場(chǎng)合表示,他已要求蘋果公司CEO蒂姆·庫克停止在印度建廠,矛頭直指該公司生產(chǎn)多元化的計(jì)劃。

關(guān)鍵字: 特朗普 蘋果 AI

4月10日消息,據(jù)媒體報(bào)道,美國總統(tǒng)特朗普宣布,美國對(duì)部分貿(mào)易伙伴暫停90天執(zhí)行新關(guān)稅政策,同時(shí)對(duì)中國的關(guān)稅提高到125%,該消息公布后蘋果股價(jià)飆升了15%。這次反彈使蘋果市值增加了4000多億美元,目前蘋果市值接近3萬...

關(guān)鍵字: 特朗普 AI 人工智能 特斯拉

3月25日消息,據(jù)報(bào)道,當(dāng)?shù)貢r(shí)間3月20日,美國總統(tǒng)特朗普在社交媒體平臺(tái)“真實(shí)社交”上發(fā)文寫道:“那些被抓到破壞特斯拉的人,將有很大可能被判入獄長達(dá)20年,這包括資助(破壞特斯拉汽車)者,我們正在尋找你。”

關(guān)鍵字: 特朗普 AI 人工智能 特斯拉

1月22日消息,剛剛,新任美國總統(tǒng)特朗普放出重磅消息,將全力支持美國AI發(fā)展。

關(guān)鍵字: 特朗普 AI 人工智能

特朗普先生有兩件事一定會(huì)載入史冊(cè),一個(gè)是筑墻,一個(gè)是挖坑。在美墨邊境筑墻的口號(hào)確保邊境安全,降低因非法移民引起的犯罪率過高問題;在中美科技產(chǎn)業(yè)之間挖坑的口號(hào)也是安全,美國企業(yè)不得使用對(duì)美國國家安全構(gòu)成威脅的電信設(shè)備,總統(tǒng)...

關(guān)鍵字: 特朗普 孤立主義 科技產(chǎn)業(yè)

據(jù)路透社1月17日消息顯示,知情人士透露,特朗普已通知英特爾、鎧俠在內(nèi)的幾家華為供應(yīng)商,將要撤銷其對(duì)華為的出貨的部分許可證,同時(shí)將拒絕其他數(shù)十個(gè)向華為供貨的申請(qǐng)。據(jù)透露,共有4家公司的8份許可被撤銷。另外,相關(guān)公司收到撤...

關(guān)鍵字: 華為 芯片 特朗普

曾在2018年時(shí)被美國總統(tǒng)特朗普稱作“世界第八奇跡”的富士康集團(tuán)在美國威斯康星州投資建設(shè)的LCD顯示屏工廠項(xiàng)目,如今卻因?yàn)楦皇靠祵㈨?xiàng)目大幅縮水并拒絕簽訂新的合同而陷入了僵局。這也導(dǎo)致富士康無法從當(dāng)?shù)卣抢铽@得約40億美...

關(guān)鍵字: 特朗普 富士康

今年5月,因自己發(fā)布的推文被貼上“無確鑿依據(jù)”標(biāo)簽而與推特發(fā)生激烈爭執(zhí)后,美國總統(tǒng)特朗普簽署了一項(xiàng)行政令,下令要求重審《通信規(guī)范法》第230條。

關(guān)鍵字: 谷歌 facebook 特朗普

眾所周知,寄往白宮的所有郵件在到達(dá)白宮之前都會(huì)在他地進(jìn)行分類和篩選。9月19日,根據(jù)美國相關(guān)執(zhí)法官員的通報(bào),本周早些時(shí)候,執(zhí)法人員截獲了一個(gè)寄給特朗普總統(tǒng)的包裹,該包裹內(nèi)包含蓖麻毒蛋白。

關(guān)鍵字: 美國 白宮 特朗普
關(guān)閉