日本黄色一级经典视频|伊人久久精品视频|亚洲黄色色周成人视频九九九|av免费网址黄色小短片|黄色Av无码亚洲成年人|亚洲1区2区3区无码|真人黄片免费观看|无码一级小说欧美日免费三级|日韩中文字幕91在线看|精品久久久无码中文字幕边打电话

當(dāng)前位置:首頁 > 嵌入式 > 嵌入式分享
掃地機(jī)器人單目視覺環(huán)境感知系統(tǒng)采用“硬件采集—預(yù)處理—特征提取—三維推理—場(chǎng)景建模—決策輸出”的分層架構(gòu),全程在嵌入式端本地運(yùn)行,保證感知實(shí)時(shí)性。整體架構(gòu)分為感知硬件層、數(shù)據(jù)處理層、算法核心層、應(yīng)用輸出層,各模塊協(xié)同完成環(huán)境信息獲取與障礙物判斷,貼合家用清掃場(chǎng)景的功能需求。
感知硬件層配置
感知硬件以單目攝像頭為核心,搭配輔助器件實(shí)現(xiàn)穩(wěn)定的圖像采集:攝像頭選用廣角定焦鏡頭,擴(kuò)大視野覆蓋范圍,減少感知盲區(qū),分辨率適配嵌入式算力,常見為720P或1080P,幀率控制在15-30幀/秒,平衡數(shù)據(jù)量與實(shí)時(shí)性;鏡頭采用防塵鍍膜工藝,適應(yīng)家庭粉塵環(huán)境,減少污漬對(duì)成像的影響;主控單元選用中低端嵌入式MCU或輕量化MPU,負(fù)責(zé)圖像數(shù)據(jù)的接收與算法運(yùn)算,搭配存儲(chǔ)單元緩存圖像幀與感知結(jié)果;部分機(jī)型搭配IMU慣性傳感器,輔助單目視覺進(jìn)行位姿推算,提升深度估計(jì)與環(huán)境建模精度。
分層處理流程
數(shù)據(jù)處理層負(fù)責(zé)圖像降噪、畸變校正、尺度歸一化,消除硬件與環(huán)境帶來的圖像失真;算法核心層是感知系統(tǒng)的核心,包含單目深度估計(jì)、特征匹配、目標(biāo)檢測(cè)、場(chǎng)景分割模塊,實(shí)現(xiàn)從二維圖像到三維環(huán)境信息的推理;應(yīng)用輸出層整合感知結(jié)果,輸出障礙物位置、類別、距離,以及可通行區(qū)域、地面材質(zhì)等環(huán)境信息,為路徑規(guī)劃與避障提供數(shù)據(jù)支撐。
單目視覺環(huán)境感知關(guān)鍵技術(shù)實(shí)現(xiàn)
單目視覺環(huán)境感知的核心是從二維圖像中推理三維環(huán)境信息,構(gòu)建家庭場(chǎng)景的可通行區(qū)域與環(huán)境模型,為機(jī)器人自主導(dǎo)航提供基礎(chǔ)依據(jù),主要包含深度估計(jì)、場(chǎng)景分割、位姿推算三大模塊。
單目深度估計(jì)
深度估計(jì)是解決單目視覺無三維信息的核心手段,通過深度學(xué)習(xí)或幾何推理方法,為每個(gè)像素分配深度值,實(shí)現(xiàn)二維圖像到三維深度圖的轉(zhuǎn)換。針對(duì)掃地機(jī)器人低算力平臺(tái)特性,采用輕量化深度估計(jì)網(wǎng)絡(luò),摒棄復(fù)雜的深層網(wǎng)絡(luò)結(jié)構(gòu),通過卷積下采樣、特征融合提取圖像中的深度特征,結(jié)合相機(jī)內(nèi)參將像素坐標(biāo)轉(zhuǎn)換為實(shí)際距離值。同時(shí),利用機(jī)器人運(yùn)動(dòng)過程中的幀間圖像關(guān)聯(lián),結(jié)合運(yùn)動(dòng)恢復(fù)結(jié)構(gòu)(SFM)思路,通過多幀特征匹配優(yōu)化深度結(jié)果,提升近距離障礙物的深度估計(jì)精度,滿足清掃場(chǎng)景下的測(cè)距需求。
室內(nèi)場(chǎng)景分割
場(chǎng)景分割用于區(qū)分家庭環(huán)境中的可通行區(qū)域、障礙物區(qū)域、地面、家具等不同語義區(qū)域,幫助機(jī)器人理解環(huán)境布局。采用輕量化語義分割算法,對(duì)單目圖像進(jìn)行像素級(jí)分類,標(biāo)注出地面、墻體、地毯、桌椅等區(qū)域,剔除天花板、背景等無關(guān)區(qū)域。針對(duì)家庭場(chǎng)景特點(diǎn),重點(diǎn)強(qiáng)化地面與障礙物的邊界分割精度,區(qū)分硬質(zhì)地面與地毯等不同清掃區(qū)域,同時(shí)識(shí)別狹窄通道、臺(tái)階等特殊地形,為路徑規(guī)劃提供場(chǎng)景依據(jù)。分割過程中引入紋理約束與顏色約束,減少光照變化對(duì)分割結(jié)果的干擾,提升復(fù)雜背景下的分割穩(wěn)定性。
機(jī)器人位姿與環(huán)境建模
結(jié)合單目視覺特征與IMU數(shù)據(jù),實(shí)現(xiàn)機(jī)器人自身位姿推算與局部環(huán)境地圖構(gòu)建。通過提取連續(xù)幀圖像中的SIFT、ORB等穩(wěn)定特征點(diǎn),匹配幀間特征并計(jì)算相機(jī)運(yùn)動(dòng)位移與姿態(tài),結(jié)合IMU慣性測(cè)量數(shù)據(jù)修正漂移誤差,得到機(jī)器人實(shí)時(shí)位置與姿態(tài)?;谏疃裙烙?jì)與場(chǎng)景分割結(jié)果,構(gòu)建局部柵格地圖,標(biāo)記可通行區(qū)域與障礙區(qū)域,隨著機(jī)器人移動(dòng)不斷更新地圖,形成完整的清掃環(huán)境模型,為全局導(dǎo)航提供支撐。建模過程中采用增量式更新策略,僅更新機(jī)器人周邊局部區(qū)域,降低算力消耗。
本站聲明: 本文章由作者或相關(guān)機(jī)構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點(diǎn),本站亦不保證或承諾內(nèi)容真實(shí)性等。需要轉(zhuǎn)載請(qǐng)聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請(qǐng)及時(shí)聯(lián)系本站刪除。
換一批
延伸閱讀

特朗普集團(tuán)近日取消了其新推出的T1智能手機(jī)“將在美國(guó)制造”的宣傳標(biāo)語,此舉源于外界對(duì)這款手機(jī)能否以當(dāng)前定價(jià)在美國(guó)本土生產(chǎn)的質(zhì)疑。

關(guān)鍵字: 特朗普 蘋果 AI

美國(guó)總統(tǒng)特朗普在公開場(chǎng)合表示,他已要求蘋果公司CEO蒂姆·庫克停止在印度建廠,矛頭直指該公司生產(chǎn)多元化的計(jì)劃。

關(guān)鍵字: 特朗普 蘋果 AI

4月10日消息,據(jù)媒體報(bào)道,美國(guó)總統(tǒng)特朗普宣布,美國(guó)對(duì)部分貿(mào)易伙伴暫停90天執(zhí)行新關(guān)稅政策,同時(shí)對(duì)中國(guó)的關(guān)稅提高到125%,該消息公布后蘋果股價(jià)飆升了15%。這次反彈使蘋果市值增加了4000多億美元,目前蘋果市值接近3萬...

關(guān)鍵字: 特朗普 AI 人工智能 特斯拉

3月25日消息,據(jù)報(bào)道,當(dāng)?shù)貢r(shí)間3月20日,美國(guó)總統(tǒng)特朗普在社交媒體平臺(tái)“真實(shí)社交”上發(fā)文寫道:“那些被抓到破壞特斯拉的人,將有很大可能被判入獄長(zhǎng)達(dá)20年,這包括資助(破壞特斯拉汽車)者,我們正在尋找你?!?/p> 關(guān)鍵字: 特朗普 AI 人工智能 特斯拉

1月22日消息,剛剛,新任美國(guó)總統(tǒng)特朗普放出重磅消息,將全力支持美國(guó)AI發(fā)展。

關(guān)鍵字: 特朗普 AI 人工智能

特朗普先生有兩件事一定會(huì)載入史冊(cè),一個(gè)是筑墻,一個(gè)是挖坑。在美墨邊境筑墻的口號(hào)確保邊境安全,降低因非法移民引起的犯罪率過高問題;在中美科技產(chǎn)業(yè)之間挖坑的口號(hào)也是安全,美國(guó)企業(yè)不得使用對(duì)美國(guó)國(guó)家安全構(gòu)成威脅的電信設(shè)備,總統(tǒng)...

關(guān)鍵字: 特朗普 孤立主義 科技產(chǎn)業(yè)

據(jù)路透社1月17日消息顯示,知情人士透露,特朗普已通知英特爾、鎧俠在內(nèi)的幾家華為供應(yīng)商,將要撤銷其對(duì)華為的出貨的部分許可證,同時(shí)將拒絕其他數(shù)十個(gè)向華為供貨的申請(qǐng)。據(jù)透露,共有4家公司的8份許可被撤銷。另外,相關(guān)公司收到撤...

關(guān)鍵字: 華為 芯片 特朗普

曾在2018年時(shí)被美國(guó)總統(tǒng)特朗普稱作“世界第八奇跡”的富士康集團(tuán)在美國(guó)威斯康星州投資建設(shè)的LCD顯示屏工廠項(xiàng)目,如今卻因?yàn)楦皇靠祵㈨?xiàng)目大幅縮水并拒絕簽訂新的合同而陷入了僵局。這也導(dǎo)致富士康無法從當(dāng)?shù)卣抢铽@得約40億美...

關(guān)鍵字: 特朗普 富士康

今年5月,因自己發(fā)布的推文被貼上“無確鑿依據(jù)”標(biāo)簽而與推特發(fā)生激烈爭(zhēng)執(zhí)后,美國(guó)總統(tǒng)特朗普簽署了一項(xiàng)行政令,下令要求重審《通信規(guī)范法》第230條。

關(guān)鍵字: 谷歌 facebook 特朗普

眾所周知,寄往白宮的所有郵件在到達(dá)白宮之前都會(huì)在他地進(jìn)行分類和篩選。9月19日,根據(jù)美國(guó)相關(guān)執(zhí)法官員的通報(bào),本周早些時(shí)候,執(zhí)法人員截獲了一個(gè)寄給特朗普總統(tǒng)的包裹,該包裹內(nèi)包含蓖麻毒蛋白。

關(guān)鍵字: 美國(guó) 白宮 特朗普
關(guān)閉