基于雙目相機(jī)與毫米波雷達(dá)的可穿戴避障裝置及避障方法
【專(zhuān)利摘要】本發(fā)明涉及一種基于雙目相機(jī)與毫米波雷達(dá)的可穿戴避障裝置及避障方法，屬于可穿戴設(shè)備領(lǐng)域，主要用在幫助視覺(jué)障礙人士，或運(yùn)動(dòng)設(shè)備等，躲避障礙物。該方法包括以下步驟：步驟1，對(duì)雙目相機(jī)進(jìn)行標(biāo)定，以滿(mǎn)足獲得深度圖像的基本條件；步驟2，分別利用毫米波雷達(dá)和雙目相機(jī)進(jìn)行數(shù)據(jù)采集；步驟3，分別對(duì)毫米波雷達(dá)和雙目相機(jī)采集的數(shù)據(jù)進(jìn)行處理，得到障礙物相對(duì)行人或設(shè)備的距離，速度，方向等信息；步驟4，綜合毫米波雷達(dá)和雙目相機(jī)的數(shù)據(jù)處理結(jié)果，給出兩種設(shè)備相互驗(yàn)證后的結(jié)果。本發(fā)明融合了毫米波雷達(dá)和雙目相機(jī)的信息，能夠解決單一設(shè)備測(cè)量結(jié)果不可靠等問(wèn)題，提高測(cè)量的精度和可靠度，幫助視覺(jué)障礙人士或者運(yùn)動(dòng)設(shè)備躲避存在的障礙物。
【專(zhuān)利說(shuō)明】
基于雙目相機(jī)與毫米波雷達(dá)的可穿戴避障裝置及避障方法
技術(shù)領(lǐng)域
[0001] 本發(fā)明涉及可穿戴設(shè)備領(lǐng)域，尤其涉及一種基于雙目相機(jī)與毫米波雷達(dá)的可穿戴 避障裝置及避障方法，具體涉及了雙目相機(jī)和毫米波雷達(dá)技術(shù)，是融合雙目相機(jī)的深度圖 像和毫米波雷達(dá)信息，幫助視覺(jué)障礙人士或運(yùn)動(dòng)設(shè)備，躲避障礙物的裝置和方法。
【背景技術(shù)】
[0002] 眼睛是人類(lèi)獲取外部信息最多的器官，存在視覺(jué)障礙的人，很難應(yīng)對(duì)日常生活中 經(jīng)常出現(xiàn)的障礙物。簡(jiǎn)單的盲杖提供的幫助有限，經(jīng)常會(huì)出現(xiàn)漏檢的情況;導(dǎo)盲犬則需要長(zhǎng) 達(dá)數(shù)年的專(zhuān)業(yè)訓(xùn)練，并且在有的場(chǎng)合不允許進(jìn)入;仿生眼植入對(duì)人體有創(chuàng)傷，并且高昂的費(fèi) 用，并不適合普通視覺(jué)障礙人士使用。而傳統(tǒng)的電子視覺(jué)輔助工具主要包括雙目視覺(jué)輔助 系統(tǒng)、主動(dòng)光深度相機(jī)輔助系統(tǒng)、激光測(cè)距系統(tǒng)等。
[0003] 基于雙目相機(jī)的視覺(jué)輔助技術(shù)可以提供一定范圍內(nèi)的深度圖像，為視覺(jué)障礙人士 躲避障礙物能夠提供一定的幫助，但是單套雙目相機(jī)系統(tǒng)，對(duì)于圖像匹配有很高的要求，對(duì) 于紋理不顯著的地方容易造成漏檢，并且需要的匹配算法復(fù)雜，需要的計(jì)算量大，容易造成 處理結(jié)果延遲。
[0004] 主動(dòng)光深度相機(jī)相比雙目相機(jī)優(yōu)點(diǎn)在于能夠?qū)崟r(shí)獲取稠密精確深度圖像，但是在 室外受日光的影響較大，造成遠(yuǎn)處障礙物無(wú)法準(zhǔn)確探測(cè)。并且相機(jī)都有固定的視場(chǎng)角，不能 準(zhǔn)確探測(cè)視場(chǎng)角以外的環(huán)境狀況。而激光測(cè)距或者超聲波測(cè)距系統(tǒng)只能針對(duì)單點(diǎn)物體測(cè) 距，不能有限探測(cè)障礙物的整體形貌，也很容易造成障礙物的誤判和漏判。
[0005] 隨著電子技術(shù)的發(fā)展，小型化低功耗的毫米波雷達(dá)系統(tǒng)已經(jīng)出現(xiàn)，并開(kāi)始大規(guī)模 應(yīng)用。探測(cè)距離超過(guò)l〇m，功耗僅有200mW左右的毫米波雷達(dá)天線(xiàn)已經(jīng)出現(xiàn)，非常適合用在可 穿戴設(shè)備領(lǐng)域，幫助視覺(jué)障礙人士躲避存在的障礙物。小體積低功耗的特點(diǎn)也使其在無(wú)人 機(jī)等注重體積和功耗的運(yùn)動(dòng)設(shè)備領(lǐng)域有廣闊的應(yīng)用。

【發(fā)明內(nèi)容】

[0006] 本發(fā)明針對(duì)現(xiàn)有技術(shù)的不足，提供了一種基于雙目相機(jī)與毫米波雷達(dá)的可穿戴避 障裝置及避障方法。
[0007] 為了實(shí)現(xiàn)上述目的，本發(fā)明采用如下技術(shù)方案予以解決:一種基于雙目相機(jī)與毫 米波雷達(dá)的可穿戴避障裝置的避障方法，具體包括下述步驟：
[0008] 步驟1、對(duì)雙目相機(jī)進(jìn)行標(biāo)定，獲取雙目相機(jī)參數(shù)，校正雙目相機(jī)圖片，并進(jìn)行圖像 匹配，以獲取相機(jī)視場(chǎng)內(nèi)的深度圖像；
[0009] 步驟2、開(kāi)啟雙目相機(jī)和毫米波雷達(dá)，接受雙目相機(jī)和毫米波雷達(dá)的數(shù)據(jù)；
[0010] 步驟3、對(duì)雙目相機(jī)的數(shù)據(jù)結(jié)果進(jìn)行處理分析，獲取運(yùn)動(dòng)路徑上的障礙物的距離和 方向，
[0011] 步驟4、對(duì)毫米波雷達(dá)的數(shù)據(jù)進(jìn)行處理分析，排除虛假目標(biāo)，獲取運(yùn)動(dòng)路徑上的障 礙物的距離，方向和運(yùn)動(dòng)速度；
[0012]步驟5、根據(jù)步驟3和步驟4得到雙目相機(jī)和毫米波雷達(dá)的數(shù)據(jù)處理結(jié)果，給出兩種 設(shè)備相互驗(yàn)證后的結(jié)果，并通過(guò)交互模塊告知使用者，幫助其躲避存在的障礙物。
[0013]進(jìn)一步的，所述步驟3具體為：
[0014]步驟3.1、用雙目相機(jī)獲取視場(chǎng)范圍內(nèi)的RGB圖像和紅外圖像；
[0015] 步驟3.2、通過(guò)雙目相機(jī)兩個(gè)單目圖像的匹配，計(jì)算出深度圖像信息；
[0016] 步驟3.2、根據(jù)步驟3.2獲得的深度圖像信息判斷障礙物的位置和尺寸；
[0017]步驟3.3、根據(jù)前后測(cè)量多幀圖像來(lái)獲得運(yùn)動(dòng)物體的運(yùn)動(dòng)速度和運(yùn)動(dòng)方向。
[0018]進(jìn)一步的，所述步驟4具體為：
[0019] 步驟4.1、毫米波雷達(dá)采用FMCW模式，將三角波輸入到毫米波雷達(dá)天線(xiàn)的VC0端口；
[0020] 步驟4.2、天線(xiàn)向外輻射電磁波，該電磁波在遇到行人、行車(chē)或其它障礙物時(shí)，返回 信號(hào)；
[0021] 步驟4.3、對(duì)返回的信號(hào)依次進(jìn)行放大處理、AD轉(zhuǎn)化以及數(shù)字時(shí)域?yàn)V波；
[0022] 步驟4.4、對(duì)步驟4.3得到的信號(hào)進(jìn)行加窗處理，以防止在進(jìn)行傅里葉變換的時(shí)候 出現(xiàn)數(shù)據(jù)斷點(diǎn)或數(shù)據(jù)不平滑；
[0023] 步驟4.5、對(duì)加窗處理后的數(shù)據(jù)的順序進(jìn)行位置變化；
[0024] 步驟4.6、對(duì)步驟4.5位置變化后的數(shù)據(jù)進(jìn)行快速傅里葉變換；
[0025] 步驟4.7、將步驟4.6快速傅里葉變換后的數(shù)據(jù)在頻域再次對(duì)其進(jìn)行濾波處理；
[0026] 步驟4.8、根據(jù)三角波調(diào)制的計(jì)算公式計(jì)算出障礙物的運(yùn)動(dòng)速度、與設(shè)備佩戴者之 間的距離和角度信息。
[0027] 進(jìn)一步的，所述三角波調(diào)制的計(jì)算公式計(jì)算出障礙物的運(yùn)動(dòng)速度，與設(shè)備佩戴者 之間的距離信息，具體如下：
[0030] 其中CQ為光速，fup為發(fā)射波在三角波調(diào)制時(shí)一個(gè)周期內(nèi)前半周期和后半周期的頻 率差值和心。胃為接受波在三角波調(diào)制時(shí)一個(gè)周期內(nèi)前半周期和后半周期的頻率差值，Af 為調(diào)頻寬度，T為調(diào)制信號(hào)周期，fo為雷達(dá)發(fā)射頻率，v為物體運(yùn)動(dòng)速度，R為障礙物和雷達(dá)之 間的距離。
[0031] 進(jìn)一步的，所述步驟5具體包括以下步驟：
[0032] 步驟5.1、比較雙目相機(jī)給出的計(jì)算結(jié)果和毫米波雷達(dá)給出的計(jì)算結(jié)果，如果兩個(gè) 結(jié)果相同，則直接將這個(gè)結(jié)果通過(guò)交互模塊告知使用者；
[0033] 步驟5.2、如果兩個(gè)結(jié)果相差不大，則將兩個(gè)結(jié)果進(jìn)行平均，然后將平均值通過(guò)交 互模塊告知使用者；
[0034] 步驟5.3、如果兩個(gè)結(jié)果相差很大，則將該結(jié)果排除，等待下次計(jì)算結(jié)果。
[0035] -種基于雙目相機(jī)與毫米波雷達(dá)的可穿戴避障裝置，包括雙目相機(jī)、毫米波雷達(dá)、 處理模塊和交互模塊;所述雙目相機(jī)、毫米波雷達(dá)和交互模塊均與處理模塊相連;所述雙目 相機(jī)通過(guò)雙目匹配的方法獲得深度圖像;所述毫米波雷達(dá)用于檢測(cè)障礙物的后向散射電磁 波;所述處理模塊接收雙目相機(jī)和毫米波雷達(dá)的數(shù)據(jù)，并將這些數(shù)據(jù)進(jìn)行計(jì)算，排除虛假信 息，進(jìn)行數(shù)據(jù)互驗(yàn)，融合的處理;處理模塊將處理好的障礙物運(yùn)動(dòng)速度，與設(shè)備佩戴者之間 的距離和方向數(shù)據(jù)通過(guò)交互模塊實(shí)時(shí)與使用者進(jìn)行信息交互。
[0036] 進(jìn)一步的，所述毫米波雷達(dá)是一種功耗很低體積很小的新型毫米波雷達(dá)。
[0037] 進(jìn)一步的，所述交互模塊包括合成語(yǔ)音的語(yǔ)音合成器和振動(dòng)電機(jī)構(gòu)成的觸覺(jué)傳感 器。
[0038] 本發(fā)明的有益效果是:本發(fā)明融合了毫米波雷達(dá)和雙目相機(jī)的信息，能夠解決單 一設(shè)備測(cè)量結(jié)果不可靠等問(wèn)題，提高測(cè)量的精度和可靠度，幫助視覺(jué)障礙人士或者運(yùn)動(dòng)設(shè) 備躲避存在的障礙物。
【附圖說(shuō)明】
[0039]圖1為本發(fā)明系統(tǒng)流程圖；
[0040]圖2為本發(fā)明的毫米波雷達(dá)信號(hào)處理流程圖；
[0041]圖3為本發(fā)明的FMCW毫米波雷達(dá)三角波調(diào)制計(jì)算方法示意圖。
【具體實(shí)施方式】
[0042]下面結(jié)合附圖對(duì)本發(fā)明作進(jìn)一步的說(shuō)明。
[0043] 本發(fā)明提出了一種基于雙目相機(jī)與毫米波雷達(dá)的可穿戴避障裝置，旨在幫助視覺(jué) 障礙人士或運(yùn)動(dòng)設(shè)備躲避存在的障礙物。將雙目相機(jī)系統(tǒng)和低功耗毫米波雷達(dá)系統(tǒng)有機(jī)結(jié) 合起來(lái)，以提高整個(gè)系統(tǒng)的穩(wěn)定性和魯棒性。該裝置包括雙目相機(jī)、毫米波雷達(dá)、處理模塊 和交互模塊;所述雙目相機(jī)、毫米波雷達(dá)和交互模塊均與處理模塊相連;所述雙目相機(jī)通過(guò) 雙目匹配的方法獲得深度圖像;所述毫米波雷達(dá)用于檢測(cè)障礙物的后向散射電磁波;所述 處理模塊接收雙目相機(jī)和毫米波雷達(dá)的數(shù)據(jù)，并將這些數(shù)據(jù)進(jìn)行計(jì)算，排除虛假信息，進(jìn)行 數(shù)據(jù)互驗(yàn)，融合的處理;處理模塊將處理好的障礙物運(yùn)動(dòng)速度，與設(shè)備佩戴者之間的距離和 方向數(shù)據(jù)通過(guò)交互模塊實(shí)時(shí)與使用者進(jìn)行信息交互
[0044] 如圖1所示，可穿戴避障裝置的避障方法包括以下步驟：
[0045] 步驟1、對(duì)雙目相機(jī)進(jìn)行標(biāo)定，以滿(mǎn)足獲得深度圖像的基本條件；用雙目相機(jī)對(duì)標(biāo) 準(zhǔn)的棋盤(pán)格進(jìn)行照相，對(duì)雙目相機(jī)產(chǎn)生的兩幅RGB圖像進(jìn)行圖像匹配，獲取雙目相機(jī)參數(shù)， 得到視場(chǎng)內(nèi)的深度圖像；
[0046] 步驟2、佩戴該可穿戴避障裝置的視覺(jué)障礙人士，或者運(yùn)動(dòng)設(shè)備，在行走(運(yùn)動(dòng))過(guò) 程中開(kāi)啟雙目相機(jī)和毫米波雷達(dá)，接受雙目相機(jī)和毫米波雷達(dá)系統(tǒng)的數(shù)據(jù)；
[0047]步驟3、對(duì)步驟2中雙目相機(jī)檢測(cè)到的數(shù)據(jù)結(jié)果進(jìn)行處理分析，獲取運(yùn)動(dòng)路徑上的 障礙物的距離和方向，具體包括以下步驟：
[0048]步驟3.1、用雙目相機(jī)獲取視場(chǎng)范圍內(nèi)的RGB圖像和紅外圖像；
[0049] 步驟3.2、通過(guò)雙目相機(jī)兩個(gè)單目圖像的匹配，計(jì)算出深度圖像信息；
[0050] 步驟3.2、根據(jù)步驟3.2獲得的深度圖像信息判斷障礙物的位置和尺寸；
[0051] 步驟3.3、根據(jù)前后測(cè)量多幀圖像來(lái)獲得運(yùn)動(dòng)物體的運(yùn)動(dòng)速度和運(yùn)動(dòng)方向；
[0052]步驟4、對(duì)步驟2中毫米波雷達(dá)檢測(cè)到的數(shù)據(jù)進(jìn)行處理分析，排除虛假目標(biāo)，獲取運(yùn) 動(dòng)路徑上的障礙物的距離、方向和運(yùn)動(dòng)速度，如圖2所示，具體包括以下步驟：
[0053] 步驟4.1、毫米波雷達(dá)采用FMCW模式，并且使用三角波調(diào)制，系統(tǒng)MCU的DAC產(chǎn)生頻 率一定的三角波，或采用其它方式產(chǎn)生頻率穩(wěn)定的三角波，輸入到天線(xiàn)的VC0端口；
[0054] 步驟4.2、天線(xiàn)向外輻射電磁波，該電磁波在遇到行人、行車(chē)或其它障礙物時(shí)，返回 信號(hào)；
[0055]步驟4.3、由于該信號(hào)十分微弱，需要低噪聲前置放大器給予放大，并將其進(jìn)行AD 轉(zhuǎn)化，變成數(shù)字信號(hào)，然后進(jìn)行數(shù)字時(shí)域?yàn)V波，以消除其它信號(hào)的干擾；
[0056]步驟4.4、數(shù)字時(shí)域?yàn)V波后，對(duì)該信號(hào)進(jìn)行加窗處理，以防止在進(jìn)行傅里葉變換的 時(shí)候出現(xiàn)數(shù)據(jù)斷點(diǎn)或數(shù)據(jù)不平滑；
[0057]步驟4.5、由于快速傅里葉變換是基于蝶形運(yùn)算的，所以加窗處理后的數(shù)據(jù)的順序 需要根據(jù)需求進(jìn)行位置變化，以方便進(jìn)行快速傅里葉變換；
[0058]步驟4.6、對(duì)步驟4.5位置變化后的數(shù)據(jù)進(jìn)行快速傅里葉變換；
[0059]步驟4.7、將步驟4.6快速傅里葉變換后的數(shù)據(jù)在頻域再次對(duì)其進(jìn)行濾波處理； [0060]步驟4.8、根據(jù)三角波調(diào)制的計(jì)算公式計(jì)算出障礙物的運(yùn)動(dòng)速度，與設(shè)備佩戴者之 間的距離等信息；
[0061 ]三角波調(diào)制毫米波雷達(dá)的計(jì)算公式如下(示意圖見(jiàn)圖3):
[0064] 其中CQ為光速，fup為發(fā)射波在三角波調(diào)制時(shí)一個(gè)周期內(nèi)前半周期和后半周期的頻 率差值和心。胃為接受波在三角波調(diào)制時(shí)一個(gè)周期內(nèi)前半周期和后半周期的頻率差值，Af 為調(diào)頻寬度，T為調(diào)制信號(hào)周期，fo為雷達(dá)發(fā)射頻率，v為物體運(yùn)動(dòng)速度，R為障礙物和雷達(dá)之 間的距離；
[0065] 步驟5、根據(jù)步驟3和步驟4得到雙目相機(jī)和毫米波雷達(dá)的數(shù)據(jù)處理結(jié)果，給出兩種 設(shè)備相互驗(yàn)證后的結(jié)果，并通過(guò)交互模塊告知使用者，幫助其躲避存在的障礙物;具體包括 以下步驟：
[0066] 步驟5.1、比較雙目相機(jī)給出的計(jì)算結(jié)果和毫米波雷達(dá)給出的計(jì)算結(jié)果，如果兩個(gè) 結(jié)果相同，則直接將這個(gè)結(jié)果通過(guò)交互模塊告知使用者；
[0067] 步驟5.2、如果兩個(gè)結(jié)果相差不大，則將兩個(gè)結(jié)果進(jìn)行平均，然后將平均值通過(guò)交 互模塊告知使用者；
[0068] 步驟5.3、如果兩個(gè)結(jié)果相差很大，則將該結(jié)果排除，等待下次計(jì)算結(jié)果；
[0069]步驟5.4、交互模塊包括合成語(yǔ)音的語(yǔ)音合成器和振動(dòng)電機(jī)構(gòu)成的觸覺(jué)傳感器。
【主權(quán)項(xiàng)】
1. 一種基于雙目相機(jī)與毫米波雷達(dá)的可穿戴避障裝置的避障方法，其特征在于，具體 包括下述步驟： 步驟1、對(duì)雙目相機(jī)進(jìn)行標(biāo)定，獲取雙目相機(jī)參數(shù)，校正雙目相機(jī)圖片，并進(jìn)行圖像匹 配，以獲取相機(jī)視場(chǎng)內(nèi)的深度圖像； 步驟2、開(kāi)啟雙目相機(jī)和毫米波雷達(dá)，接受雙目相機(jī)和毫米波雷達(dá)的數(shù)據(jù)； 步驟3、對(duì)雙目相機(jī)的數(shù)據(jù)結(jié)果進(jìn)行處理分析，獲取運(yùn)動(dòng)路徑上的障礙物的距離和方 向， 步驟4、對(duì)毫米波雷達(dá)的數(shù)據(jù)進(jìn)行處理分析，排除虛假目標(biāo)，獲取運(yùn)動(dòng)路徑上的障礙物 的距離，方向和運(yùn)動(dòng)速度； 步驟5、根據(jù)步驟3和步驟4得到雙目相機(jī)和毫米波雷達(dá)的數(shù)據(jù)處理結(jié)果，給出兩種設(shè)備 相互驗(yàn)證后的結(jié)果，并通過(guò)交互模塊告知使用者，幫助其躲避存在的障礙物。2. 根據(jù)權(quán)利要求1所述的基于雙目相機(jī)與毫米波雷達(dá)的可穿戴避障裝置的避障方法， 其特征在于，所述步驟3具體為： 步驟3.1、用雙目相機(jī)獲取視場(chǎng)范圍內(nèi)的RGB圖像和紅外圖像； 步驟3.2、通過(guò)雙目相機(jī)兩個(gè)單目圖像的匹配，計(jì)算出深度圖像信息； 步驟3.2、根據(jù)步驟3.2獲得的深度圖像信息判斷障礙物的位置和尺寸； 步驟3.3、根據(jù)前后測(cè)量多幀圖像來(lái)獲得運(yùn)動(dòng)物體的運(yùn)動(dòng)速度和運(yùn)動(dòng)方向。3. 根據(jù)權(quán)利要求1所述的基于雙目相機(jī)與毫米波雷達(dá)的可穿戴避障裝置的避障方法， 其特征在于，所述步驟4具體為： 步驟4.1、毫米波雷達(dá)采用FMCW模式，將三角波輸入到毫米波雷達(dá)天線(xiàn)的VCO端口； 步驟4.2、天線(xiàn)向外輻射電磁波，該電磁波在遇到行人、行車(chē)或其它障礙物時(shí)，返回信 號(hào)； 步驟4.3、對(duì)返回的信號(hào)依次進(jìn)行放大處理、AD轉(zhuǎn)化以及數(shù)字時(shí)域?yàn)V波； 步驟4.4、對(duì)步驟4.3得到的信號(hào)進(jìn)行加窗處理，以防止在進(jìn)行傅里葉變換的時(shí)候出現(xiàn) 數(shù)據(jù)斷點(diǎn)或數(shù)據(jù)不平滑； 步驟4.5、對(duì)加窗處理后的數(shù)據(jù)的順序進(jìn)行位置變化； 步驟4.6、對(duì)步驟4.5位置變化后的數(shù)據(jù)進(jìn)行快速傅里葉變換； 步驟4.7、將步驟4.6快速傅里葉變換后的數(shù)據(jù)在頻域再次對(duì)其進(jìn)行濾波處理； 步驟4.8、根據(jù)三角波調(diào)制的計(jì)算公式計(jì)算出障礙物的運(yùn)動(dòng)速度、與設(shè)備佩戴者之間的 距離和角度信息。4. 根據(jù)權(quán)利要求3所述的基于雙目相機(jī)與毫米波雷達(dá)的可穿戴避障裝置的避障方法， 其特征在于，所述三角波調(diào)制的計(jì)算公式計(jì)算出障礙物的運(yùn)動(dòng)速度，與設(shè)備佩戴者之間的 距離信息，具體如下：其中cq為光速，fup為發(fā)射波在三角波調(diào)制時(shí)一個(gè)周期內(nèi)前半周期和后半周期的頻率差 值和心_為接受波在三角波調(diào)制時(shí)一個(gè)周期內(nèi)前半周期和后半周期的頻率差值，△ f為調(diào) 頻寬度，T為調(diào)制信號(hào)周期，fo為雷達(dá)發(fā)射頻率，v為物體運(yùn)動(dòng)速度，R為障礙物和雷達(dá)之間的 距離。5. 根據(jù)權(quán)利要求1所述的基于雙目相機(jī)與毫米波雷達(dá)的可穿戴避障裝置的避障方法， 其特征在于，所述步驟5具體包括以下步驟： 步驟5.1、比較雙目相機(jī)給出的計(jì)算結(jié)果和毫米波雷達(dá)給出的計(jì)算結(jié)果，如果兩個(gè)結(jié)果 相同，則直接將這個(gè)結(jié)果通過(guò)交互模塊告知使用者； 步驟5.2、如果兩個(gè)結(jié)果相差不大，則將兩個(gè)結(jié)果進(jìn)行平均，然后將平均值通過(guò)交互模 塊告知使用者； 步驟5.3、如果兩個(gè)結(jié)果相差很大，則將該結(jié)果排除，等待下次計(jì)算結(jié)果。6. -種基于雙目相機(jī)與毫米波雷達(dá)的可穿戴避障裝置，其特征在于，包括雙目相機(jī)、毫 米波雷達(dá)、處理模塊和交互模塊;所述雙目相機(jī)、毫米波雷達(dá)和交互模塊均與處理模塊相 連;所述雙目相機(jī)通過(guò)雙目匹配的方法獲得深度圖像;所述毫米波雷達(dá)用于檢測(cè)障礙物的 后向散射電磁波;所述處理模塊接收雙目相機(jī)和毫米波雷達(dá)的數(shù)據(jù)，并將這些數(shù)據(jù)進(jìn)行計(jì) 算，排除虛假信息，進(jìn)行數(shù)據(jù)互驗(yàn)，融合的處理;處理模塊將處理好的障礙物運(yùn)動(dòng)速度，與設(shè) 備佩戴者之間的距離和方向數(shù)據(jù)通過(guò)交互模塊實(shí)時(shí)與使用者進(jìn)行信息交互。7. 根據(jù)權(quán)利要求6所述的基于雙目相機(jī)與毫米波雷達(dá)的可穿戴避障裝置，其特征在于， 所述毫米波雷達(dá)是一種功耗很低體積很小的新型毫米波雷達(dá)。8. 根據(jù)權(quán)利要求6所述的基于雙目相機(jī)與毫米波雷達(dá)的可穿戴避障裝置，其特征在于， 所述交互模塊包括合成語(yǔ)音的語(yǔ)音合成器和振動(dòng)電機(jī)構(gòu)成的觸覺(jué)傳感器。
【文檔編號(hào)】G06T7/00GK105866779SQ201610212637
【公開(kāi)日】2016年8月17日
【申請(qǐng)日】2016年4月6日
【發(fā)明人】龍寧波, 汪凱巍, 楊?lèi)饌? 胡偉健, 趙向東
【申請(qǐng)人】浙江大學(xué)