一種基于圖像搜索的數(shù)據(jù)處理方法及系統(tǒng)的制作方法
【專利摘要】本發(fā)明涉及一種基于圖像搜索的數(shù)據(jù)處理系統(tǒng)和方法，所述系統(tǒng)包括：終端設(shè)備，捕獲目標(biāo)對(duì)象以創(chuàng)建目標(biāo)對(duì)象圖像，對(duì)目標(biāo)對(duì)象圖像進(jìn)行圖像識(shí)別分析以將所述目標(biāo)對(duì)象進(jìn)行分類，通過(guò)自動(dòng)地驅(qū)動(dòng)與所分類的目標(biāo)對(duì)象的類型相對(duì)應(yīng)的解碼器來(lái)對(duì)所述目標(biāo)對(duì)象圖像進(jìn)行解碼，以獲得目標(biāo)對(duì)象信息，獲取與增強(qiáng)現(xiàn)實(shí)相關(guān)的附加數(shù)據(jù)，將附加數(shù)據(jù)與目標(biāo)對(duì)象信息發(fā)送給服務(wù)器。所述系統(tǒng)還包括服務(wù)器，接收目標(biāo)對(duì)象信息和附加數(shù)據(jù)，根據(jù)目標(biāo)對(duì)象信息進(jìn)行搜索以獲得與目標(biāo)對(duì)象信息相關(guān)的呈現(xiàn)數(shù)據(jù)，根據(jù)附加數(shù)據(jù)對(duì)呈現(xiàn)數(shù)據(jù)進(jìn)行增強(qiáng)現(xiàn)實(shí)處理，以獲得經(jīng)過(guò)增強(qiáng)現(xiàn)實(shí)處理的呈現(xiàn)數(shù)據(jù)，并且將所述增強(qiáng)現(xiàn)實(shí)處理的呈現(xiàn)數(shù)據(jù)發(fā)送給終端設(shè)備。
【專利說(shuō)明】 一種基于圖像搜索的數(shù)據(jù)處理方法及系統(tǒng)

【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及數(shù)據(jù)處理領(lǐng)域，并且更具體地，涉及一種基于圖像搜索的數(shù)據(jù)處理方法及系統(tǒng)。

【背景技術(shù)】
[0002]圖像識(shí)別技術(shù)是指利用計(jì)算機(jī)對(duì)圖像進(jìn)行處理、分析和理解，以識(shí)別各種不同模式的目標(biāo)和對(duì)象的技術(shù)。一般工業(yè)使用中，采用工業(yè)相機(jī)拍攝圖片，然后再利用軟件根據(jù)圖片灰階差做進(jìn)一步識(shí)別處理。另外，在地理學(xué)中指將遙感圖像進(jìn)行分類的技術(shù)。
[0003]然而，隨著移動(dòng)終端和互聯(lián)網(wǎng)應(yīng)用的飛速發(fā)展，越來(lái)越多的需求是針對(duì)日常生活中的各種對(duì)象進(jìn)行圖像識(shí)別。當(dāng)用戶在電視機(jī)上觀看電影或廣告節(jié)目時(shí)、在旅游時(shí)找到喜歡的對(duì)象(例如，人或事物)的情況下，或者在找到用戶感興趣的預(yù)定對(duì)象的情況下，用戶期望通過(guò)對(duì)對(duì)象采用備忘錄或者利用移動(dòng)終端的相機(jī)捕獲對(duì)象來(lái)記住該對(duì)象。
[0004]當(dāng)用戶發(fā)現(xiàn)某個(gè)建筑物、某處景色，但是不知道這個(gè)建筑物的名字或景色所處的風(fēng)景區(qū)在何處時(shí)，通常會(huì)拍下照片后發(fā)到網(wǎng)上來(lái)尋求答案?；蛘?，用戶需要手工輸入圖像中顯露的信息，以用于利用所捕獲的圖像搜索期望的對(duì)象。例如，用戶需要輸入在圖像中顯露的產(chǎn)品的名稱或產(chǎn)品編號(hào)、形狀、顏色等。
[0005]但是，一方面，這種方式獲得答案的時(shí)間是無(wú)法確定的，另一方面，需要用戶輸入大量的描述信息。上述方面都會(huì)造成用戶的不良體驗(yàn)。


【發(fā)明內(nèi)容】

[0006]為了解決上述問題，本發(fā)明提供一種利用移動(dòng)終端和無(wú)線網(wǎng)絡(luò)來(lái)進(jìn)行圖像識(shí)別的方法和系統(tǒng)，以此來(lái)滿足用戶對(duì)圖像識(shí)別的需要。另外，還需要滿足用戶對(duì)圖像進(jìn)行增強(qiáng)現(xiàn)實(shí)處理的需求。
[0007]根據(jù)本發(fā)明的一個(gè)方面，提供一種基于圖像搜索的數(shù)據(jù)處理系統(tǒng)，所述系統(tǒng)包括:
[0008]終端設(shè)備，捕獲目標(biāo)對(duì)象以創(chuàng)建目標(biāo)對(duì)象圖像，對(duì)目標(biāo)對(duì)象圖像進(jìn)行圖像識(shí)別分析以將所述目標(biāo)對(duì)象進(jìn)行分類，通過(guò)自動(dòng)地驅(qū)動(dòng)與所分類的目標(biāo)對(duì)象的類型相對(duì)應(yīng)的解碼器來(lái)對(duì)所述目標(biāo)對(duì)象圖像進(jìn)行解碼，以獲得目標(biāo)對(duì)象信息，獲取與增強(qiáng)現(xiàn)實(shí)相關(guān)的附加數(shù)據(jù)，將附加數(shù)據(jù)與目標(biāo)對(duì)象信息發(fā)送給服務(wù)器；以及
[0009]服務(wù)器，接收目標(biāo)對(duì)象信息和附加數(shù)據(jù)，根據(jù)目標(biāo)對(duì)象信息進(jìn)行搜索以獲得與目標(biāo)對(duì)象信息相關(guān)的呈現(xiàn)數(shù)據(jù)，根據(jù)附加數(shù)據(jù)對(duì)呈現(xiàn)數(shù)據(jù)進(jìn)行增強(qiáng)現(xiàn)實(shí)處理，以獲得經(jīng)過(guò)增強(qiáng)現(xiàn)實(shí)處理的呈現(xiàn)數(shù)據(jù)，并且將所述增強(qiáng)現(xiàn)實(shí)處理的呈現(xiàn)數(shù)據(jù)發(fā)送給終端設(shè)備。
[0010]根據(jù)本發(fā)明的另一方面，提供一種基于圖像搜索的數(shù)據(jù)處理方法，所述方法包括:
[0011 ] 由終端設(shè)備捕獲目標(biāo)對(duì)象以創(chuàng)建目標(biāo)對(duì)象圖像，對(duì)目標(biāo)對(duì)象圖像進(jìn)行圖像識(shí)別分析以將所述目標(biāo)對(duì)象進(jìn)行分類，通過(guò)自動(dòng)地驅(qū)動(dòng)與所分類的目標(biāo)對(duì)象的類型相對(duì)應(yīng)的解碼器來(lái)對(duì)所述目標(biāo)對(duì)象圖像進(jìn)行解碼，以獲得目標(biāo)對(duì)象信息，獲取與增強(qiáng)現(xiàn)實(shí)相關(guān)的附加數(shù)據(jù)，將附加數(shù)據(jù)與目標(biāo)對(duì)象信息發(fā)送給服務(wù)器；以及
[0012]由服務(wù)器接收目標(biāo)對(duì)象信息和附加數(shù)據(jù)，根據(jù)目標(biāo)對(duì)象信息進(jìn)行搜索以獲得與目標(biāo)對(duì)象信息相關(guān)的呈現(xiàn)數(shù)據(jù)，根據(jù)附加數(shù)據(jù)對(duì)呈現(xiàn)數(shù)據(jù)進(jìn)行增強(qiáng)現(xiàn)實(shí)處理，以獲得經(jīng)過(guò)增強(qiáng)現(xiàn)實(shí)處理的呈現(xiàn)數(shù)據(jù)，并且將所述增強(qiáng)現(xiàn)實(shí)處理的呈現(xiàn)數(shù)據(jù)發(fā)送給終端設(shè)備。
[0013]優(yōu)選地，其中在終端設(shè)備中預(yù)先設(shè)置與增強(qiáng)現(xiàn)實(shí)相關(guān)的附加數(shù)據(jù)，或者在獲得目標(biāo)對(duì)象信息后，通過(guò)終端設(shè)備的輸入單元來(lái)輸入與增強(qiáng)現(xiàn)實(shí)相關(guān)的附加數(shù)據(jù)。
[0014]優(yōu)選地，其中對(duì)目標(biāo)對(duì)象圖像進(jìn)行圖像識(shí)別分析以將所述目標(biāo)對(duì)象進(jìn)行分類包括:基于圖像識(shí)別技術(shù)從所述目標(biāo)對(duì)象圖像中提取特征點(diǎn)，并基于所提取出的特征點(diǎn)來(lái)對(duì)所述目標(biāo)對(duì)象的類型進(jìn)行分類。
[0015]優(yōu)選地，所述終端設(shè)備包括能夠根據(jù)所述對(duì)象的類型進(jìn)行解碼的多個(gè)解碼器。
[0016]優(yōu)選地，其中，所述多個(gè)解碼器包括以下解碼器中的一個(gè)或多個(gè):條形碼解碼器、快速響應(yīng)QR碼解碼器、近場(chǎng)通信NFC解碼器、射頻識(shí)別RFID解碼器、光學(xué)字符識(shí)別OCR解碼器、面部識(shí)別解碼器和圖像識(shí)別解碼器。

【專利附圖】

【附圖說(shuō)明】
[0017]通過(guò)結(jié)合附圖閱讀優(yōu)選示例性實(shí)施方式的下列詳細(xì)描述，可以更好地理解本發(fā)明的這些以及進(jìn)一步的特點(diǎn)和優(yōu)勢(shì)，其中:
[0018]圖1示出了現(xiàn)有技術(shù)中的移動(dòng)終端的結(jié)構(gòu)圖。
[0019]圖2示出了根據(jù)本發(fā)明優(yōu)選實(shí)施方式的移動(dòng)終端的結(jié)構(gòu)圖；
[0020]圖3示出了根據(jù)本發(fā)明優(yōu)選實(shí)施方式的服務(wù)器的結(jié)構(gòu)圖；
[0021]圖4示出了根據(jù)本發(fā)明優(yōu)選實(shí)施方式的數(shù)據(jù)處理系統(tǒng)的結(jié)構(gòu)圖；以及
[0022]圖5示出了根據(jù)本發(fā)明優(yōu)選實(shí)施方式的數(shù)據(jù)處理方法的流程圖。
[0023]需要注意的是，這些附圖意在描述方法的一般特性、在特定示例性實(shí)施方式中使用的結(jié)構(gòu)和/或材料，并意在對(duì)下面提供的描述進(jìn)行補(bǔ)充。然而，這些附圖不是按比例的，并且也不是精確地反映任意給出的實(shí)施方式的精細(xì)結(jié)構(gòu)或性能特性，并且也不應(yīng)解釋為通過(guò)示例性實(shí)施方式對(duì)所包含的數(shù)值范圍或?qū)傩赃M(jìn)行定義或限定。在各個(gè)附圖中使用同樣或相同的附圖標(biāo)記意在指示存在同樣或相同的元素或特征。

【具體實(shí)施方式】
[0024]盡管示例性實(shí)施方式能夠進(jìn)行各種修改并采用替代形式，但是其實(shí)施方式作為實(shí)施例在附圖中給出，并將在這里進(jìn)行詳細(xì)描述。然而，應(yīng)當(dāng)理解的是，不應(yīng)將示例性實(shí)施方式限定為所公開的特定形式，相反，示例性實(shí)施方式意在涵蓋落入權(quán)利要求范圍內(nèi)的所有修改、等同物和替代物。在整個(gè)附圖的描述中，相同的附圖標(biāo)記表示相同的元素。
[0025]圖1示出了現(xiàn)有技術(shù)中的移動(dòng)終端的結(jié)構(gòu)圖。如圖1所示，移動(dòng)終端100包括拍攝單元101、處理器102、存儲(chǔ)單元103以及接口單元104。當(dāng)需要辨識(shí)某個(gè)圖像，通常利用拍攝單元101拍下照片并且存儲(chǔ)到存儲(chǔ)單元103中。然后，將照片通過(guò)接口單元104發(fā)布到互聯(lián)網(wǎng)上尋求答案。通常，用戶需要手工輸入圖像中顯露的信息，以用于利用所捕獲的圖像搜索期望的對(duì)象。例如，用戶需要輸入在圖像中顯露的產(chǎn)品的名稱或產(chǎn)品編號(hào)、形狀、顏色等。
[0026]圖2示出了根據(jù)本發(fā)明優(yōu)選實(shí)施方式的移動(dòng)終端的結(jié)構(gòu)圖。如圖2所示，移動(dòng)終端200包括:拍攝單元201、分類單元202、識(shí)別單元203、輸入單元204、處理單元205、接口單元206和存儲(chǔ)單元207。移動(dòng)終端200能夠獲取期望被搜索的目標(biāo)對(duì)象的圖像，并且在對(duì)圖像進(jìn)行初步處理之后將其經(jīng)由通信網(wǎng)絡(luò)發(fā)送給服務(wù)器，以獲得查詢響應(yīng)。
[0027]當(dāng)移動(dòng)終端200是能夠經(jīng)由通信網(wǎng)絡(luò)發(fā)送和接收數(shù)據(jù)并且獲得對(duì)象的圖像的終端時(shí)，終端200可以是能夠運(yùn)行和存儲(chǔ)各種應(yīng)用的任意類型設(shè)備，例如個(gè)人數(shù)字助理(PDA)、智能手機(jī)、平板計(jì)算機(jī)、無(wú)線電話、移動(dòng)計(jì)算設(shè)備、照相機(jī)、視頻記錄器、音頻/視頻播放器、定位設(shè)備(例如，全球定位系統(tǒng)(GPS)設(shè)備)、游戲設(shè)備、無(wú)線電設(shè)備或各種其它類似的設(shè)備或其組合。
[0028]優(yōu)選地，拍攝單元201用于獲取目標(biāo)對(duì)象的圖像。例如，當(dāng)用戶發(fā)現(xiàn)某個(gè)電影海報(bào)或電影票時(shí)，可以掃描或拍照電影海報(bào)或電影票以獲得圖像。當(dāng)用戶發(fā)現(xiàn)某個(gè)建筑物、某處景色，但是不知道這個(gè)建筑物的名字或景色所處的風(fēng)景區(qū)在何處時(shí)，可以拍攝單元201拍下該建筑或景色的照片。用戶也可以利用拍攝單元201拍攝各種平面材料，例如建筑物或景色的宣傳畫。優(yōu)選地，拍攝單元201可以是任何類型的圖像獲取器件。
[0029]優(yōu)選地，分類單元202用于對(duì)拍攝單元201獲取的目標(biāo)對(duì)象的圖像進(jìn)行分類。例如，目標(biāo)對(duì)象的圖像可以分為人物、風(fēng)景、建筑物、文字、宣傳畫、條碼或二維碼等。分類單元202對(duì)所獲得的目標(biāo)對(duì)象的圖像分析數(shù)據(jù)類型、顏色、預(yù)定圖案等來(lái)對(duì)目標(biāo)對(duì)象的類型進(jìn)行分類，并可基于所分類的類型選擇和應(yīng)用解碼器，從而使得能夠針對(duì)多種對(duì)象進(jìn)行集成識(shí)另O。分類單元202通過(guò)基于特征點(diǎn)提取將圖像識(shí)別方法應(yīng)用于利用拍攝單元201所拍攝的目標(biāo)對(duì)象的圖像，來(lái)分析目標(biāo)對(duì)象的數(shù)據(jù)類型、顏色、特征圖案(特征點(diǎn)的形狀、圖案、位置值)等，并通過(guò)該分析來(lái)對(duì)對(duì)象的類型進(jìn)行分類。目標(biāo)對(duì)象包括基于對(duì)象類型的圖像特征點(diǎn)。例如，當(dāng)目標(biāo)對(duì)象是條形碼時(shí)，目標(biāo)對(duì)象包括能夠識(shí)別條形碼的形式的唯一特征點(diǎn)信息。當(dāng)對(duì)象是二維碼時(shí)，對(duì)象包括能夠識(shí)別二維碼的形式的唯一特征點(diǎn)信息。如上所述，當(dāng)利用圖像識(shí)別技術(shù)從對(duì)象的圖像中提取出特征點(diǎn)時(shí)，可以基于特征點(diǎn)信息來(lái)驗(yàn)證各個(gè)對(duì)象的類型。
[0030]優(yōu)選地，識(shí)別單元203能夠從存儲(chǔ)單元207讀取識(shí)別目標(biāo)對(duì)象所需的解碼器和特征點(diǎn)信息?；谀繕?biāo)對(duì)象的類型對(duì)所述特征點(diǎn)信息和解碼器進(jìn)行分類。將特征點(diǎn)信息提供給分類單元202，并從而被應(yīng)用于驗(yàn)證對(duì)象的類型。識(shí)別單元203基于目標(biāo)對(duì)象的類型來(lái)選擇解碼器，從而對(duì)目標(biāo)對(duì)象的圖像進(jìn)行解碼/識(shí)別。
[0031]優(yōu)選地，輸入單元204用于輸入附加數(shù)據(jù)。當(dāng)目標(biāo)對(duì)象為商品時(shí)，附加數(shù)據(jù)可以包括關(guān)于事物的詳細(xì)信息、購(gòu)物購(gòu)買信息(價(jià)格信息、銷售地點(diǎn)信息等)、價(jià)格比較信息等。當(dāng)目標(biāo)對(duì)象是人時(shí)，所述附加數(shù)據(jù)可以包括與該人相關(guān)的詳細(xì)信息(例如，該人所穿著的衣月艮、配飾信息、生日、年齡、經(jīng)歷等)。當(dāng)目標(biāo)對(duì)象是建筑物時(shí)，附加數(shù)據(jù)可以是建筑物建成年代、相關(guān)任務(wù)、相關(guān)歷史事件、建筑特色等。當(dāng)目標(biāo)對(duì)象是風(fēng)景時(shí)，附加數(shù)據(jù)可以是風(fēng)景區(qū)名稱、風(fēng)景區(qū)等級(jí)、主要景點(diǎn)介紹、停車場(chǎng)信息、餐廳信息等。優(yōu)選地，附加數(shù)據(jù)可以是用戶的照片、用戶喜歡的圖片、用戶錄制的音頻、用戶設(shè)計(jì)的視覺內(nèi)容等。
[0032]優(yōu)選地，處理單元205控制各個(gè)單元的整體操作，并且通過(guò)接口單元206控制數(shù)據(jù)的發(fā)送和接收。處理單元205控制將利用拍攝單元201所捕獲的對(duì)象圖像存儲(chǔ)在存儲(chǔ)單元207 中。
[0033]優(yōu)選地，接口單元206用于移動(dòng)終端200與其他設(shè)備的數(shù)據(jù)通信。接口單元206能夠根據(jù)各種協(xié)議來(lái)接收或發(fā)送數(shù)據(jù)。接口單元206能夠利用有線互聯(lián)網(wǎng)，并且可以通過(guò)移動(dòng)通信網(wǎng)絡(luò)(碼分多址(CDMA)、寬帶碼分多址(W-CDMA)等)連接的無(wú)線數(shù)據(jù)網(wǎng)絡(luò)(互聯(lián)網(wǎng)、IP多媒體子系統(tǒng)(MS)等)、衛(wèi)星通信網(wǎng)絡(luò)、通過(guò)無(wú)線保真(W1-Fi)連接的互聯(lián)網(wǎng)等進(jìn)行通信。特別地，在CDMA網(wǎng)絡(luò)的情況下，接口單元206可以通過(guò)分組數(shù)據(jù)服務(wù)節(jié)點(diǎn)(PDSN)接入數(shù)據(jù)網(wǎng)絡(luò)。在W-CDMA網(wǎng)絡(luò)的情況下，接口單元206可以通過(guò)網(wǎng)關(guān)GPRS支持節(jié)點(diǎn)(GGSN)接入數(shù)據(jù)網(wǎng)絡(luò)。另外，在諸如熱點(diǎn)等的區(qū)域中，接口單元206可以通過(guò)諸如W1-Fi等的NFC接入互聯(lián)網(wǎng)。
[0034]優(yōu)選地，存儲(chǔ)單元207可以存儲(chǔ)通過(guò)利用拍攝單元201所捕獲的目標(biāo)對(duì)象的圖像，并且可以存儲(chǔ)利用分類單元202和識(shí)別單元203所識(shí)別出的目標(biāo)對(duì)象信息。存儲(chǔ)單元207還可以存儲(chǔ)附加數(shù)據(jù)。所述附加數(shù)據(jù)可以是用戶預(yù)先輸入的，也可以是在獲得了目標(biāo)對(duì)象信息之后輸入的。
[0035]圖3示出了根據(jù)本發(fā)明優(yōu)選實(shí)施方式的服務(wù)器的結(jié)構(gòu)圖。如圖3所述，服務(wù)器300包括:查詢單元301、融合單元302、接口單元303、處理單元304和存儲(chǔ)單元305。服務(wù)器300經(jīng)由通信網(wǎng)絡(luò)從移動(dòng)終端接收包含目標(biāo)對(duì)象信息和附加數(shù)據(jù)的查詢請(qǐng)求。響應(yīng)于查詢請(qǐng)求，服務(wù)器300在存儲(chǔ)單元305中進(jìn)行數(shù)據(jù)查詢，并且對(duì)查詢結(jié)果進(jìn)行數(shù)據(jù)融合以獲得經(jīng)增強(qiáng)現(xiàn)實(shí)處理的數(shù)據(jù)。服務(wù)器300將經(jīng)增強(qiáng)現(xiàn)實(shí)處理的數(shù)據(jù)作為響應(yīng)發(fā)送給移動(dòng)終端。
[0036]優(yōu)選地，查詢單元301根據(jù)處理單元304處理的查詢請(qǐng)求，在存儲(chǔ)單元305中進(jìn)行查詢。查詢單元301分析查詢請(qǐng)求中的目標(biāo)對(duì)象信息，以獲得目標(biāo)對(duì)象的類別、目標(biāo)對(duì)象的圖像等內(nèi)容。首先，查詢單元301根據(jù)目標(biāo)對(duì)象的類別確定所要查詢的內(nèi)容涉及存儲(chǔ)單元305中的哪些數(shù)據(jù)庫(kù)。然后，通過(guò)圖像識(shí)別技術(shù)將目標(biāo)對(duì)象的圖像與存儲(chǔ)單元305所涉及數(shù)據(jù)庫(kù)中的內(nèi)容進(jìn)行比對(duì)，以查找匹配項(xiàng)。當(dāng)找到匹配項(xiàng)時(shí)，查詢單元301根據(jù)附加數(shù)據(jù)來(lái)確定需要獲取的查詢數(shù)據(jù)。最后，查詢單元301將獲取的查詢數(shù)據(jù)以及查詢請(qǐng)求中的附加數(shù)據(jù)發(fā)送給融合單元302。
[0037]優(yōu)選地，融合單元302接收查詢單元301發(fā)送的查詢數(shù)據(jù)和附加數(shù)據(jù)。融合單元302根據(jù)附加數(shù)據(jù)對(duì)查詢數(shù)據(jù)進(jìn)行增強(qiáng)現(xiàn)實(shí)處理，以獲得經(jīng)增強(qiáng)現(xiàn)實(shí)處理的數(shù)據(jù)。例如，當(dāng)目標(biāo)對(duì)象為電影并且附加數(shù)據(jù)是電影簡(jiǎn)介、主演信息、上映時(shí)間、院線信息等，融合單元302可將電影簡(jiǎn)介、主演信息、上映時(shí)間、院線信息等信息融合到電影介紹視頻中，以獲得經(jīng)增強(qiáng)現(xiàn)實(shí)處理的電影介紹視頻。經(jīng)增強(qiáng)現(xiàn)實(shí)處理的電影介紹視頻能夠使用戶在觀看精彩鏡頭的同時(shí)獲得自己需要了解的內(nèi)容。例如，當(dāng)目標(biāo)對(duì)象為商品并且附加數(shù)據(jù)包括關(guān)于商品的詳細(xì)信息、購(gòu)物購(gòu)買信息(價(jià)格信息、銷售地點(diǎn)信息等)、價(jià)格比較信息等時(shí)，融合單元302可將關(guān)于商品的詳細(xì)信息、購(gòu)物購(gòu)買信息(價(jià)格信息、銷售地點(diǎn)信息等)、價(jià)格比較信息等融合到商品的介紹短片中，以獲得經(jīng)增強(qiáng)現(xiàn)實(shí)處理的商品介紹短片。經(jīng)增強(qiáng)現(xiàn)實(shí)處理的商品介紹短片能夠使用戶在觀看商品外觀的同時(shí)了解商品的其他屬性。例如，當(dāng)目標(biāo)對(duì)象是人并且附加數(shù)據(jù)包括與該人相關(guān)的詳細(xì)信息(例如，該人所穿著的衣服、配飾信息、生日、年齡、經(jīng)歷等)時(shí)，融合單元302可將與該人相關(guān)的詳細(xì)信息(例如，該人所穿著的衣服、配飾信息、生日、年齡、經(jīng)歷等)融合到個(gè)人簡(jiǎn)介視頻中，以獲得經(jīng)增強(qiáng)現(xiàn)實(shí)處理的個(gè)人簡(jiǎn)介視頻。經(jīng)增強(qiáng)現(xiàn)實(shí)處理的個(gè)人簡(jiǎn)介視頻能夠使觀看者始終可以查看該人的相關(guān)信息，而不會(huì)因?yàn)殄e(cuò)過(guò)視頻的某個(gè)部分而遺漏相關(guān)信息。例如，當(dāng)目標(biāo)對(duì)象是建筑物并且附加數(shù)據(jù)是建筑物建成年代、相關(guān)任務(wù)、相關(guān)歷史事件、建筑特色等時(shí)，融合單元302可將建筑物建成年代、相關(guān)任務(wù)、相關(guān)歷史事件、建筑特色等信息融合到介紹建筑物外部和內(nèi)部的介紹視頻中，以獲得經(jīng)增強(qiáng)現(xiàn)實(shí)處理的建筑物介紹視頻。經(jīng)增強(qiáng)現(xiàn)實(shí)處理的建筑物介紹視頻能夠使用戶對(duì)建筑物進(jìn)行充分了解，并且能夠?qū)?nèi)部結(jié)構(gòu)進(jìn)行直觀感受。例如，當(dāng)目標(biāo)對(duì)象是風(fēng)景并且附加數(shù)據(jù)是風(fēng)景區(qū)名稱、風(fēng)景區(qū)等級(jí)、主要景點(diǎn)介紹、停車場(chǎng)信息、餐廳信息等時(shí)，融合單元302可將風(fēng)景區(qū)名稱、風(fēng)景區(qū)等級(jí)、主要景點(diǎn)介紹、停車場(chǎng)信息、餐廳信息等融合到風(fēng)景區(qū)介紹短片中，以獲得經(jīng)增強(qiáng)現(xiàn)實(shí)處理的風(fēng)景區(qū)介紹短片。用戶可以通過(guò)經(jīng)增強(qiáng)現(xiàn)實(shí)處理的風(fēng)景區(qū)介紹短片在瀏覽風(fēng)景區(qū)美景的同時(shí)，了解風(fēng)景區(qū)名稱、風(fēng)景區(qū)等級(jí)、主要景點(diǎn)介紹、停車場(chǎng)信息、餐廳信息等內(nèi)容。優(yōu)選地，附加數(shù)據(jù)還可以是用戶的照片、用戶喜歡的圖片、用戶錄制的音頻、用戶設(shè)計(jì)的視覺內(nèi)容等。融合單元302可將用戶的照片、用戶喜歡的圖片、用戶錄制的音頻、用戶設(shè)計(jì)的視覺內(nèi)容等融合到上述各種數(shù)據(jù)中。
[0038]優(yōu)選地，用戶可以將用戶的照片、用戶喜歡的圖片、用戶錄制的音頻、用戶設(shè)計(jì)的視覺內(nèi)容等預(yù)先存儲(chǔ)到服務(wù)器的存儲(chǔ)單元305中。或者用戶將用戶的照片、用戶喜歡的圖片、用戶錄制的音頻、用戶設(shè)計(jì)的視覺內(nèi)容等添加到附加數(shù)據(jù)中發(fā)送給服務(wù)器。
[0039]優(yōu)選地，接口單元303用于服務(wù)器300與移動(dòng)終端或其他設(shè)備進(jìn)行數(shù)據(jù)通信。接口單元303能夠根據(jù)各種協(xié)議來(lái)接收或發(fā)送數(shù)據(jù)。接口單元303能夠利用有線互聯(lián)網(wǎng)，并且可以通過(guò)移動(dòng)通信網(wǎng)絡(luò)(碼分多址(CDMA)、寬帶碼分多址(W-CDMA)等)連接的無(wú)線數(shù)據(jù)網(wǎng)絡(luò)(互聯(lián)網(wǎng)、IP多媒體子系統(tǒng)(MS)等)、衛(wèi)星通信網(wǎng)絡(luò)、通過(guò)無(wú)線保真(W1-Fi)連接的互聯(lián)網(wǎng)等進(jìn)行通信。特別地，在CDMA網(wǎng)絡(luò)的情況下，接口單元303可以通過(guò)分組數(shù)據(jù)服務(wù)節(jié)點(diǎn)(PDSN)接入數(shù)據(jù)網(wǎng)絡(luò)。在W-CDMA網(wǎng)絡(luò)的情況下，接口單元303可以通過(guò)網(wǎng)關(guān)GPRS支持節(jié)點(diǎn)(GGSN)接入數(shù)據(jù)網(wǎng)絡(luò)。另外，在諸如熱點(diǎn)等的區(qū)域中，接口單元303可以通過(guò)諸如W1-Fi等的NFC接入互聯(lián)網(wǎng)。
[0040]優(yōu)選地，處理單元304控制各個(gè)單元的整體操作，并且通過(guò)接口單元303控制數(shù)據(jù)的發(fā)送和接收。
[0041]優(yōu)選地，存儲(chǔ)單元305可以存儲(chǔ)多個(gè)庫(kù)，其中每個(gè)庫(kù)分別對(duì)應(yīng)每種類別。存儲(chǔ)單元305還存儲(chǔ)用戶的附加數(shù)據(jù)，例如用戶的照片、用戶喜歡的圖片、用戶錄制的音頻、用戶設(shè)計(jì)的視覺內(nèi)容。
[0042]圖4示出了根據(jù)本發(fā)明優(yōu)選實(shí)施方式的數(shù)據(jù)處理系統(tǒng)400的結(jié)構(gòu)圖。如圖4所示，數(shù)據(jù)處理系統(tǒng)400包括多個(gè)移動(dòng)終端401-1，401-2，…，401-N、通信網(wǎng)絡(luò)402和服務(wù)器403。
[0043]移動(dòng)終端401-1，401-2，…，401-N能夠獲取期望被搜索的目標(biāo)對(duì)象的圖像，并且在對(duì)圖像進(jìn)行初步處理之后將其經(jīng)由通信網(wǎng)絡(luò)402發(fā)送給服務(wù)器403，以獲得查詢響應(yīng)。服務(wù)器403經(jīng)由通信網(wǎng)絡(luò)402從移動(dòng)終端接收包含目標(biāo)對(duì)象信息和附加數(shù)據(jù)的查詢請(qǐng)求。響應(yīng)于查詢請(qǐng)求，服務(wù)器403進(jìn)行數(shù)據(jù)查詢，并且將對(duì)查詢結(jié)果進(jìn)行數(shù)據(jù)融合以獲得經(jīng)增強(qiáng)現(xiàn)實(shí)處理的數(shù)據(jù)。服務(wù)器403將經(jīng)增強(qiáng)現(xiàn)實(shí)處理的數(shù)據(jù)作為響應(yīng)發(fā)送給移動(dòng)終端401-1，401-2，…，401-N。據(jù)此，移動(dòng)終端401-1，401-2，…，401-N能夠呈現(xiàn)經(jīng)增強(qiáng)現(xiàn)實(shí)處理的數(shù)據(jù)。通信網(wǎng)絡(luò)402可以是有線互聯(lián)網(wǎng)、移動(dòng)通信網(wǎng)絡(luò)(碼分多址(CDMA)、寬帶碼分多址(W-CDMA)等)連接的無(wú)線數(shù)據(jù)網(wǎng)絡(luò)(互聯(lián)網(wǎng)、IP多媒體子系統(tǒng)(MS)等)、衛(wèi)星通信網(wǎng)絡(luò)、通過(guò)無(wú)線保真(W1-Fi)連接的互聯(lián)網(wǎng)等。
[0044]圖5示出了根據(jù)本發(fā)明優(yōu)選實(shí)施方式的數(shù)據(jù)處理方法500的流程圖。如圖5所示，方法500從步驟501處開始。然后方法500進(jìn)入步驟502，由終端設(shè)備捕獲目標(biāo)對(duì)象以創(chuàng)建目標(biāo)對(duì)象圖像，對(duì)目標(biāo)對(duì)象圖像進(jìn)行圖像識(shí)別分析以將所述目標(biāo)對(duì)象進(jìn)行分類。終端設(shè)備基于圖像識(shí)別從所述目標(biāo)對(duì)象圖像中提取特征點(diǎn)，并基于所提取出的特征點(diǎn)來(lái)對(duì)所述目標(biāo)對(duì)象的類型進(jìn)行分類。通過(guò)自動(dòng)地驅(qū)動(dòng)與所分類的目標(biāo)對(duì)象的類型相對(duì)應(yīng)的解碼器來(lái)對(duì)所述目標(biāo)對(duì)象圖像進(jìn)行解碼，以獲得目標(biāo)對(duì)象信息。所述終端設(shè)備包括能夠根據(jù)所述對(duì)象的類型進(jìn)行解碼的多個(gè)解碼器。所述多個(gè)解碼器包括以下全部解碼器:條形碼解碼器、快速響應(yīng)(QR)碼解碼器、近場(chǎng)通信(NFC)解碼器、射頻識(shí)別(RFID)解碼器、光學(xué)字符識(shí)別(OCR)解碼器、面部識(shí)別解碼器和圖像識(shí)別解碼器。
[0045]然后，方法500進(jìn)入步驟503，由移動(dòng)終端獲取與增強(qiáng)現(xiàn)實(shí)相關(guān)的附加數(shù)據(jù)，將附加數(shù)據(jù)與目標(biāo)對(duì)象信息發(fā)送給服務(wù)器。其中在終端設(shè)備中預(yù)先設(shè)置與增強(qiáng)現(xiàn)實(shí)相關(guān)的附加數(shù)據(jù)，或者在獲得目標(biāo)對(duì)象信息后，通過(guò)終端設(shè)備的輸入單元來(lái)輸入與增強(qiáng)現(xiàn)實(shí)相關(guān)的附加數(shù)據(jù)。優(yōu)選地，用戶終端可以將與增強(qiáng)現(xiàn)實(shí)相關(guān)的附加數(shù)據(jù)發(fā)送給服務(wù)器，并且存儲(chǔ)在服務(wù)器的存儲(chǔ)單元匯總。
[0046]接著，方法500進(jìn)入步驟504，由服務(wù)器接收目標(biāo)對(duì)象信息和附加數(shù)據(jù)，根據(jù)目標(biāo)對(duì)象信息進(jìn)行搜索以獲得與目標(biāo)對(duì)象信息相關(guān)的呈現(xiàn)數(shù)據(jù)，根據(jù)附加數(shù)據(jù)對(duì)呈現(xiàn)數(shù)據(jù)進(jìn)行增強(qiáng)現(xiàn)實(shí)處理，以獲得經(jīng)過(guò)增強(qiáng)現(xiàn)實(shí)處理的呈現(xiàn)數(shù)據(jù)，并且將所述增強(qiáng)現(xiàn)實(shí)處理的呈現(xiàn)數(shù)據(jù)發(fā)送給終端設(shè)備。
[0047]最后，方法500在步驟505處結(jié)束。
【權(quán)利要求】
1.一種基于圖像搜索的數(shù)據(jù)處理系統(tǒng)，所述系統(tǒng)包括: 終端設(shè)備，捕獲目標(biāo)對(duì)象以創(chuàng)建目標(biāo)對(duì)象圖像，對(duì)目標(biāo)對(duì)象圖像進(jìn)行圖像識(shí)別分析以將所述目標(biāo)對(duì)象進(jìn)行分類，通過(guò)自動(dòng)地驅(qū)動(dòng)與所分類的目標(biāo)對(duì)象的類型相對(duì)應(yīng)的解碼器來(lái)對(duì)所述目標(biāo)對(duì)象圖像進(jìn)行解碼，以獲得目標(biāo)對(duì)象信息，獲取與增強(qiáng)現(xiàn)實(shí)相關(guān)的附加數(shù)據(jù)，將附加數(shù)據(jù)與目標(biāo)對(duì)象信息發(fā)送給服務(wù)器；以及 服務(wù)器，接收目標(biāo)對(duì)象信息和附加數(shù)據(jù)，根據(jù)目標(biāo)對(duì)象信息進(jìn)行搜索以獲得與目標(biāo)對(duì)象信息相關(guān)的呈現(xiàn)數(shù)據(jù)，根據(jù)附加數(shù)據(jù)對(duì)呈現(xiàn)數(shù)據(jù)進(jìn)行增強(qiáng)現(xiàn)實(shí)處理，以獲得經(jīng)過(guò)增強(qiáng)現(xiàn)實(shí)處理的呈現(xiàn)數(shù)據(jù)，并且將所述增強(qiáng)現(xiàn)實(shí)處理的呈現(xiàn)數(shù)據(jù)發(fā)送給終端設(shè)備。
2.根據(jù)權(quán)利要求1所述的系統(tǒng)，其中在終端設(shè)備中預(yù)先設(shè)置與增強(qiáng)現(xiàn)實(shí)相關(guān)的附加數(shù)據(jù)，或者在獲得目標(biāo)對(duì)象信息后，通過(guò)終端設(shè)備的輸入單元來(lái)輸入與增強(qiáng)現(xiàn)實(shí)相關(guān)的附加數(shù)據(jù)。
3.根據(jù)權(quán)利要求1所述的系統(tǒng)，其中對(duì)目標(biāo)對(duì)象圖像進(jìn)行圖像識(shí)別分析以將所述目標(biāo)對(duì)象進(jìn)行分類包括:基于圖像識(shí)別技術(shù)從所述目標(biāo)對(duì)象圖像中提取特征點(diǎn)，并基于所提取出的特征點(diǎn)來(lái)對(duì)所述目標(biāo)對(duì)象的類型進(jìn)行分類。
4.根據(jù)權(quán)利要求1所述的系統(tǒng)，所述終端設(shè)備包括能夠根據(jù)所述對(duì)象的類型進(jìn)行解碼的多個(gè)解碼器。
5.根據(jù)權(quán)利要求4所述的系統(tǒng)，其中，所述多個(gè)解碼器包括以下解碼器中的一個(gè)或多個(gè):條形碼解碼器、快速響應(yīng)QR碼解碼器、近場(chǎng)通信NFC解碼器、射頻識(shí)別RFID解碼器、光學(xué)字符識(shí)別OCR解碼器、面部識(shí)別解碼器和圖像識(shí)別解碼器。
6.一種基于圖像搜索的數(shù)據(jù)處理方法，所述方法包括: 由終端設(shè)備捕獲目標(biāo)對(duì)象以創(chuàng)建目標(biāo)對(duì)象圖像，對(duì)目標(biāo)對(duì)象圖像進(jìn)行圖像識(shí)別分析以將所述目標(biāo)對(duì)象進(jìn)行分類，通過(guò)自動(dòng)地驅(qū)動(dòng)與所分類的目標(biāo)對(duì)象的類型相對(duì)應(yīng)的解碼器來(lái)對(duì)所述目標(biāo)對(duì)象圖像進(jìn)行解碼，以獲得目標(biāo)對(duì)象信息，獲取與增強(qiáng)現(xiàn)實(shí)相關(guān)的附加數(shù)據(jù)，將附加數(shù)據(jù)與目標(biāo)對(duì)象信息發(fā)送給服務(wù)器；以及 由服務(wù)器接收目標(biāo)對(duì)象信息和附加數(shù)據(jù)，根據(jù)目標(biāo)對(duì)象信息進(jìn)行搜索以獲得與目標(biāo)對(duì)象信息相關(guān)的呈現(xiàn)數(shù)據(jù)，根據(jù)附加數(shù)據(jù)對(duì)呈現(xiàn)數(shù)據(jù)進(jìn)行增強(qiáng)現(xiàn)實(shí)處理，以獲得經(jīng)過(guò)增強(qiáng)現(xiàn)實(shí)處理的呈現(xiàn)數(shù)據(jù)，并且將所述增強(qiáng)現(xiàn)實(shí)處理的呈現(xiàn)數(shù)據(jù)發(fā)送給終端設(shè)備。
7.根據(jù)權(quán)利要求6所述的方法，其中在終端設(shè)備中預(yù)先設(shè)置與增強(qiáng)現(xiàn)實(shí)相關(guān)的附加數(shù)據(jù)，或者在獲得目標(biāo)對(duì)象信息后，通過(guò)終端設(shè)備的輸入單元來(lái)輸入與增強(qiáng)現(xiàn)實(shí)相關(guān)的附加數(shù)據(jù)。
8.根據(jù)權(quán)利要求6所述的方法，其中對(duì)目標(biāo)對(duì)象圖像進(jìn)行圖像識(shí)別分析以將所述目標(biāo)對(duì)象進(jìn)行分類包括:基于圖像識(shí)別技術(shù)從所述目標(biāo)對(duì)象圖像中提取特征點(diǎn)，并基于所提取出的特征點(diǎn)來(lái)對(duì)所述目標(biāo)對(duì)象的類型進(jìn)行分類。
9.根據(jù)權(quán)利要求6所述的方法，所述終端設(shè)備包括能夠根據(jù)所述對(duì)象的類型進(jìn)行解碼的多個(gè)解碼器。
10.根據(jù)權(quán)利要求9所述的方法，其中，所述多個(gè)解碼器包括以下全部解碼器:條形碼解碼器、快速響應(yīng)(QR)碼解碼器、近場(chǎng)通信(NFC)解碼器、射頻識(shí)別(RFID)解碼器、光學(xué)字符識(shí)別(OCR)解碼器、面部識(shí)別解碼器和圖像識(shí)別解碼器。
【文檔編號(hào)】G06F17/30GK104504402SQ201510019429
【公開日】2015年4月8日 申請(qǐng)日期:2015年1月15日 優(yōu)先權(quán)日:2015年1月15日
【發(fā)明者】劉暢 申請(qǐng)人:劉暢