本發(fā)明涉及一種基于激光導航、行為識別的智能展示平臺。
背景技術:
服務機器人的整體技術,最近幾年飛速發(fā)展,部分技術,如自主導航系統(tǒng),已經(jīng)具備產(chǎn)業(yè)化的價值。同時,隨著大數(shù)據(jù)技術的發(fā)展,精準營銷,成為絕大部分企業(yè)的需求。因此,企業(yè)產(chǎn)生兩大需求:
一:擴大產(chǎn)品展示途徑,讓更多的人,看到企業(yè)產(chǎn)品。
二:在產(chǎn)品設計階段,就能基本預知客戶對產(chǎn)品的喜好,從而可以更準確地開發(fā)更適合市場的產(chǎn)品。比如:一個系列十個產(chǎn)品外觀,企業(yè)希望更精準地預先知道大量客戶比較喜歡哪個外觀的產(chǎn)品,從而進行針對性的生產(chǎn)布局。而不是每個產(chǎn)品都先生產(chǎn)同樣的數(shù)量投放市場。根據(jù)銷量,再來判斷客戶對產(chǎn)品的喜好。這樣做一是成本高,二是時間消耗長。本發(fā)明可以為企業(yè)解決這個問題,從而節(jié)省大量的市場成本。
本發(fā)明產(chǎn)品的技術背景是:采用服務機器人技術,較好地解決了企業(yè)的上述需求。通過開發(fā)服務機器人自主移動技術,行為識別軟件,結(jié)合產(chǎn)品機械結(jié)構(gòu)設計。讓掛在墻壁上的顯示屏動起來,大大拓展了受眾客戶面積;通過行為識別技術,以及統(tǒng)計算法,云端聯(lián)網(wǎng);有效預判客戶對展示產(chǎn)品的喜好,形成較準確的客戶對產(chǎn)品的反饋信息數(shù)據(jù)統(tǒng)計。
目前國內(nèi)市場上,并無比較近似的產(chǎn)品,現(xiàn)有的產(chǎn)品,只能解決上述一個問題。電梯以及商場墻壁上的展示屏,首先不能移動,受眾人群小,二是不能收集客戶看到產(chǎn)品視頻后的反應。游戲廳里有一些高端游戲機,能夠辨識客戶表情,但主要用于打游戲,和企業(yè)產(chǎn)品推廣無關。
在美國,商場里有一款類似于自動售貨機的產(chǎn)品,有部分類似功能。該產(chǎn)品是個不能移動的展示柜,里面陳列的企業(yè)的產(chǎn)品,有攝像頭,統(tǒng)計客戶觀看產(chǎn)品時的表情,從而形成客戶反饋數(shù)據(jù)。但是該產(chǎn)品,首先是不能移動,受眾人群比較小。其次只有表情識別軟件,并無行為識別軟件,只能統(tǒng)計到來觀看客戶的數(shù)量,而不能知道總共有多少客戶經(jīng)過該產(chǎn)品,也就不能知道感興趣客戶的百分比,而這個數(shù)據(jù)是對企業(yè)及其重要的數(shù)據(jù)。
現(xiàn)有技術的缺點:
一:掛在墻壁上,以及任何地方的顯示屏,受到電源,電線的限制,不能移動。只能給路過的人群看。而人普遍對靜態(tài)的物品,是興趣不大的。
二:目前的人臉識別技術,表情識別技術,都是單一技術,并不能對客戶人群的整體行為作出判斷,也就是說:這些軟件,并不知道,100個人里面,有多少人是對產(chǎn)品很感興趣,愿意觀看產(chǎn)品介紹以及了解產(chǎn)品,在產(chǎn)品前面停留的時間等行為。而這些數(shù)據(jù),對企業(yè)來說,是重要的判斷產(chǎn)品受歡迎程度的數(shù)據(jù)。
三:現(xiàn)有可以移動的屏幕,是人工推動一個架子,上面放個屏幕,為了讓屏幕移動起來;需要消耗一個人工,這是不合算的。
技術實現(xiàn)要素:
為克服現(xiàn)有技術的缺陷,本發(fā)明提供基于激光導航、行為識別的智能展示平臺,本發(fā)明的技術方案是:
一種基于激光導航、行為識別的智能展示平臺,包括激光slam自主導航底盤、具有識別和行為分析功能的顯示器和云端服務器,所述的顯示器安裝在激光slam自主導航底盤上,并與云端服務器通過通訊模塊進行數(shù)據(jù)交互,該激光slam自主導航底盤和顯示器均通過控制終端控制。
在所述的顯示器上安裝有攝像頭,該攝像頭根據(jù)周圍光線亮度變化情況,自動開關的led燈,以每秒24幀的頻率,捕捉攝像頭可視范圍內(nèi)的圖像;顯示器內(nèi)的存儲器存儲有對行為進行分析的程序,并被顯示器的執(zhí)行器執(zhí)行以下步驟:(1)將攝像頭捕捉到的圖像信息,經(jīng)過預處理后定位,分析圖像中人的簡單行為,包括:行走,行走方向,停留,停留時間,表情;以及進行身份鑒別;(2)將行為分析產(chǎn)生的人群數(shù)據(jù)進行統(tǒng)計,并且將統(tǒng)計結(jié)果保存發(fā)送至云端服務器。
所述的統(tǒng)計結(jié)果包括x小時內(nèi),經(jīng)過攝像頭可視范圍內(nèi)的人數(shù),原地停留的人數(shù),原地停留的時間;走到展示平臺前的人數(shù),停留的時間,以及他們的表情統(tǒng)計。
所述的控制終端包括人機交互的觸摸屏,該控制終端的存儲器上還存儲有人機交互的程序,通過控制終端的執(zhí)行器執(zhí)行:響應于觸摸屏上的人機交互的指令,實現(xiàn)對顯示器內(nèi)容的播放、對攝像頭的控制、激光slam自主導航底盤的移動以及與云端服務器進行數(shù)據(jù)交互;還包括與顯示器連接的互聯(lián)網(wǎng)視頻模塊,所述的互聯(lián)網(wǎng)視頻模塊負責交互數(shù)據(jù)的壓縮、解壓和校驗。
該激光slam自主導航底盤的存儲器存儲有程序,并被激光slam自主導航底盤的執(zhí)行器執(zhí)行以下步驟:(1)接收人機交互的指令;(2)根據(jù)slam算法,分析處理收到的傳感器的導航數(shù)據(jù),生成地圖信息數(shù)據(jù),同時根據(jù)收到的路徑指令信息,進行路徑規(guī)劃,最終生成行動指令;(3)機械傳動機構(gòu)用于接收行動指令,按照行動指令移動到指定位置。
所述的激光slam自主導航底盤上還設置有防碰機構(gòu),該防碰撞機構(gòu)包括紅外傳感器和防撞條,該紅外傳感器和防撞條均接入激光slam自主導航底盤的存儲器,并被激光slam自主導航底盤的執(zhí)行器執(zhí)行以下步驟:(1)通過紅外傳感器,感知到前方的障礙物,停止運動;(2)當人碰到了在運動中的展示平臺時,防撞條產(chǎn)生應激信號,根據(jù)防撞數(shù)據(jù)判斷是否可以繼續(xù)移動,或者停止。
所述的行為分析的具體方法如下:計算特征點的相對位置,通過對腳,膝蓋,臀部,腰,手,胸,頭頸,頭部采集特征點,來標記不同的人;所述特征點的采集,采用的是標準的asm算法。
所述的asm算法以框的中心來進行計算,對于不形變的物體而言,不管物體怎么移動旋轉(zhuǎn),其上面的特征點相對中心的距離是在縮放比例下是確定的,
在asm算法中,首先計算前一幀的框中的特征點的光流,從而得到當前幀的特征點位置,再計算當前幀的特征點,并與上一幀的特征點進行匹配,得到相匹配的特征點,然后把兩個得到的特征點都融合在一起;就得到了下一幀的初步的特征點,然后在對特征點進行篩選。本發(fā)明的優(yōu)點是:以較低的成本,解決企業(yè)的兩大需求:擴大營銷面積,獲取精準營銷數(shù)據(jù)。即通過自主移動的底盤,配合顯示屏,在銀行營業(yè)廳,機場,商場,顯示屏根據(jù)事先規(guī)劃的路線,自主移動;擴大顯示屏播放內(nèi)容的受眾人群。通過行為識別技術和軟硬件,收集客戶對產(chǎn)品的反饋,幫助企業(yè)以極小的代價,獲得客戶對產(chǎn)品的感觀數(shù)據(jù)。在銀行以及其他需要知道用戶身份的場所;通過人臉識別技術,辨別大屏幕前觀看客戶的身份,有目的地向客戶播放適合該客戶消費的產(chǎn)品,達到精準營銷的目的。
附圖說明
圖1是本發(fā)明的主體結(jié)構(gòu)示意圖。
圖2是本發(fā)明的工作狀態(tài)示意圖。
具體實施方式
下面結(jié)合具體實施例來進一步描述本發(fā)明,本發(fā)明的優(yōu)點和特點將會隨著描述而更為清楚。但這些實施例僅是范例性的,并不對本發(fā)明的范圍構(gòu)成任何限制。本領域技術人員應該理解的是,在不偏離本發(fā)明的精神和范圍下可以對本發(fā)明技術方案的細節(jié)和形式進行修改或替換,但這些修改和替換均落入本發(fā)明的保護范圍內(nèi)。
參見圖1和圖2,本發(fā)明涉及一種基于激光導航、行為識別的智能展示平臺,包括激光slam自主導航底盤1、具有識別和行為分析功能的顯示器2和云端服務器3,所述的顯示器2安裝在激光slam自主導航底盤1上,并與云端服務器3通過通訊模塊進行數(shù)據(jù)交互,該激光slam自主導航底盤1和顯示器2均通過控制終端4控制。
在所述的顯示器上安裝有攝像頭5,該攝像頭5根據(jù)周圍光線亮度變化情況,自動開關的led燈,以每秒24幀的頻率,捕捉攝像頭可視范圍內(nèi)的圖像;顯示器內(nèi)的存儲器存儲有對行為進行分析的程序,并被顯示器的執(zhí)行器執(zhí)行以下步驟:(1)將攝像頭捕捉到的圖像信息,經(jīng)過預處理后定位,分析圖像中人的簡單行為,包括:行走,行走方向,停留,停留時間,表情;以及進行身份鑒別;(2)將行為分析產(chǎn)生的人群數(shù)據(jù)進行統(tǒng)計,并且將統(tǒng)計結(jié)果保存發(fā)送至云端服務器。
所述的統(tǒng)計結(jié)果包括x小時內(nèi),經(jīng)過攝像頭可視范圍內(nèi)的人數(shù),原地停留的人數(shù),原地停留的時間;走到展示平臺前的人數(shù),停留的時間,以及他們的表情統(tǒng)計。
所述的控制終端包括人機交互的觸摸屏6,該控制終端的存儲器上還存儲有人機交互的程序,通過控制終端的執(zhí)行器執(zhí)行:響應于觸摸屏上的人機交互的指令,實現(xiàn)對顯示器內(nèi)容的播放、對攝像頭的控制、激光slam自主導航底盤的移動以及與云端服務器進行數(shù)據(jù)交互;還包括與顯示器連接的互聯(lián)網(wǎng)視頻模塊9,所述的互聯(lián)網(wǎng)視頻模塊9負責交互數(shù)據(jù)的壓縮、解壓和校驗。
該激光slam自主導航底盤的存儲器存儲有程序,并被激光slam自主導航底盤的執(zhí)行器執(zhí)行以下步驟:(1)接收人機交互的指令;(2)根據(jù)slam算法,分析處理收到的傳感器11(激光傳感器、紅外傳感器、陀螺儀)的導航數(shù)據(jù),生成地圖信息數(shù)據(jù),同時根據(jù)收到的路徑指令信息,進行路徑規(guī)劃,最終生成行動指令;(3)機械傳動機構(gòu)10用于接收行動指令,按照行動指令移動到指定位置。
所述的激光slam自主導航底盤上還設置有防碰機構(gòu),該防碰撞機構(gòu)包括紅外傳感器12和防撞條13,該紅外傳感器12和防撞條13均接入激光slam自主導航底盤的存儲器,并被激光slam自主導航底盤的執(zhí)行器執(zhí)行以下步驟:(1)通過紅外傳感器,感知到前方的障礙物,停止運動;(2)當人碰到了在運動中的展示平臺時,防撞條產(chǎn)生應激信號,根據(jù)防撞數(shù)據(jù)判斷是否可以繼續(xù)移動,或者停止。
所述的行為分析的具體方法如下:計算特征點的相對位置,通過對腳,膝蓋,臀部,腰,手,胸,頭頸,頭部采集特征點,來標記不同的人;所述特征點的采集,采用的是標準的asm算法。
所述的asm算法以框的中心來進行計算,對于不形變的物體而言,不管物體怎么移動旋轉(zhuǎn),其上面的特征點相對中心的距離是在縮放比例下是確定的,
在asm算法中,首先計算前一幀的框中的特征點的光流,從而得到當前幀的特征點位置,再計算當前幀的特征點,并與上一幀的特征點進行匹配,得到相匹配的特征點,然后把兩個得到的特征點都融合在一起;就得到了下一幀的初步的特征點,然后在對特征點進行篩選。
本發(fā)明的大屏幕顯示器可以自主移動,與自主移動底盤的結(jié)合,形成非人形的服務機器人產(chǎn)品設計;行為識別程序:統(tǒng)計傳感器感應范圍內(nèi)通過的人群數(shù)目,人群原地停留觀看數(shù)目,人群走近觀看的數(shù)目;人群原地停留時間,人群走近觀看停留時間。觀看視頻人群年齡構(gòu)成,對產(chǎn)品的感興趣程度。