區(qū)域的信息,高度可靠的差異區(qū)域信息被輸出。
[0138]根據(jù)本實施例,以類似于第二、第三、以及第四實施例的方式,由于即使在不需要提前將參照圖像中的差異區(qū)域注冊在數(shù)據(jù)庫中的情況下也能夠估計參照圖像中的差異區(qū)域,本實施例在其中諸如當從大量的產(chǎn)品中僅區(qū)分某一部分或另一部分中具有缺陷的產(chǎn)品時不能提前將關于差異區(qū)域的信息注冊在利用物體識別的物品檢驗系統(tǒng)中的情況下是有效的。附加地,雖然能夠根據(jù)本實施例來估計參照圖像中的差異區(qū)域而無論差異區(qū)域為整個物體還是物體的一部分,由于相比于第二實施例等能夠獲得高度可靠的差異區(qū)域,能夠達到高度精確的識別。此外,在本實施例中,如果差異區(qū)域估計單元21被配置為如圖23或圖24中所示,則可以在錯誤對應特征點密集度搜索單元2103之前添加物體區(qū)域估計單元。在這樣的情況下,差異候補區(qū)域將通過在所估計的物體區(qū)域當中執(zhí)行錯誤對應特征點密集度搜索來估計。此時,由于能夠在以與第三和第四實施例類似的方式首先去除背景的影響之后估計差異區(qū)域,本實施例在諸如為圖10和圖11中所示的示例的情況下特別有效。
[0139]第六實施例
[0140]將參照附圖來描述本發(fā)明的第六實施例。
[0141]圖25為示出根據(jù)本發(fā)明的第六實施例的物體識別裝置的配置的框圖。如圖25中所示,根據(jù)第六實施例的物體識別裝置包括:局部描述符提取單元11、局部描述符匹配單元12、輸入圖像差異區(qū)域確定單元13、輸入圖像差異區(qū)域描述符提取單元14、描述符匹配單元15、差異區(qū)域估計單元22、以及差異區(qū)域描述符提取單元18。如上所述,根據(jù)第六實施例的物體識別裝置與第四實施例的區(qū)別在于根據(jù)第四實施例的物體識別裝置的差異區(qū)域估計單元20已經(jīng)變?yōu)椴町悈^(qū)域估計單元22。差異區(qū)域估計單元22的細節(jié)將稍后描述。由于其他組件類似于第四實施例的那些,組件將由相同的附圖標記來標記并且將省略其具體描述。
[0142]圖26和圖27為表示差異區(qū)域估計單元22的配置示例的框圖。以下將描述各附圖。
[0143]如圖26中所示,差異區(qū)域估計單元22包括模板匹配單元2201。模板匹配單元2201接收與從局部描述符匹配單元12輸出的局部特征已識別圖像ID對應的參照圖像(或者與局部特征已識別圖像ID相關聯(lián)的參照圖像組),并且同時接收對應于從局部描述符匹配單元12輸出的局部特征已識別圖像ID的差異區(qū)域的模板圖像(或者與局部特征已識別圖像ID相關聯(lián)的模板圖像組),并基于所接收的圖像組來輸出差異區(qū)域信息。具體而言,模板圖像為在差異區(qū)域的周邊典型的可見的圖像圖案。模板匹配單元2201通過執(zhí)行其中將參照圖像中的每個區(qū)域與模板圖像匹配的模板匹配處理來估計參照圖像中的差異區(qū)域,并搜索與模板圖像最類似的區(qū)域。換而言之,將參照圖像中與規(guī)定的圖案圖像的相似度等于或高于規(guī)定值的區(qū)域設置為參照圖像中的差異區(qū)域。模板圖像可以提前存儲在如圖25中所示的數(shù)據(jù)庫中,或者可以從物體識別裝置的外部獲取。
[0144]可選地,作為變型,如圖27中所示,差異區(qū)域估計單元22可以包括物體區(qū)域估計單元901和模板匹配單元2202。圖27中所示的物體區(qū)域估計單元901與為圖17中所示的差異區(qū)域估計單元19的組件的物體區(qū)域估計單元901相同,并且將省略其具體描述。
[0145]模板匹配單元2202類似于為圖26中所示的差異區(qū)域估計單元22的組件的模板匹配單元2201。模板匹配單元2202與模板匹配單元2201的區(qū)別在于除了對應于從局部描述符匹配單元12輸出的局部特征已識別圖像ID的參照圖像、以及對應于從局部描述符匹配單元12輸出的局部特征已識別圖像ID的差異區(qū)域的模板圖像之外,從物體區(qū)域估計單元901輸出的物體區(qū)域信息被輸入。模板匹配單元2202能夠通過僅僅對參照圖像中的物體區(qū)域執(zhí)行使用模板圖像的模板匹配來估計參照圖像中的差異區(qū)域。附加地,使用模板匹配單元2202,由于參照圖像中將與模板圖像匹配的區(qū)域的范圍被限制,模板匹配單元2202能夠以比匹配等于整個參照圖像的區(qū)域的范圍與模板圖像的模板匹配單元2201更高的速度來執(zhí)行處理。
[0146]在本實施例中,雖然以與第二到第五實施例類似的方式、參照圖像中的差異區(qū)域不需要提前注冊在數(shù)據(jù)庫中,如果提前知曉典型地在差異區(qū)域中可見的圖像圖案,則能夠通過使用圖像圖案作為模板圖像來估計差異區(qū)域。例如,當從示出相同的信封并且僅僅在地址上區(qū)別于另一方的多個郵件圖像中僅識別特殊郵件,能夠將描述地址的區(qū)域定義為其中表示郵政編碼、住址、收件人等字符串的布局或多或少被確定的圖像圖案。因此,在這樣的情況下,本實施例是有效的。附加地,雖然根據(jù)本實施例的參照圖像中的差異區(qū)域的估計能夠被執(zhí)行而無論差異區(qū)域是整個物體還是物體的一部分,由于當差異區(qū)域估計單元22如圖27中所示地被配置時差異區(qū)域能夠以類似于第三到第五實施例的方式通過首先估計物體區(qū)域來在去除背景的影響之后被估計,差異區(qū)域能夠以高精確性被估計。對應地,本實施例在諸如為圖10和11中所示的示例的情況下特別有效。
[0147]第七實施例
[0148]將參照附圖來描述本發(fā)明的第七實施例。
[0149]圖28為示出根據(jù)本發(fā)明的第七實施例的物體識別裝置的配置的框圖。如圖28中所示,根據(jù)第七實施例的物體識別裝置包括:局部描述符提取單元11、局部描述符匹配單元16、輸入圖像差異區(qū)域確定單元13、輸入圖像差異區(qū)域描述符提取單元14、描述符匹配單元15、差異區(qū)域估計單元23、以及差異區(qū)域描述符提取單元18。如上所述,根據(jù)第七實施例的物體識別裝置被配置為使得組合根據(jù)第二實施例的物體識別裝置和根據(jù)第六實施例的物體識別裝置。根據(jù)第七實施例的物體識別裝置與根據(jù)第二實施例的物體識別裝置的區(qū)別在于差異區(qū)域估計單元17已經(jīng)變?yōu)椴町悈^(qū)域估計單元23。差異區(qū)域估計單元23的細節(jié)將稍后描述。由于其他組件類似于第二實施例的那些,組件將由相同的附圖標記來標記并且將省略其具體描述。
[0150]圖29、圖30和圖31為表示差異區(qū)域估計單元23的配置示例的框圖。以下將描述各附圖。
[0151]圖29中所示的差異區(qū)域估計單元23包括錯誤對應特征點密集度搜索單元2103和模板匹配單元2301。圖29中所示的錯誤對應特征點密集度搜索單元2103與為圖23中所示的差異區(qū)域估計單元21的組件的錯誤對應特征點密集度搜索單元2103相同,并且將省略其具體描述。
[0152]附加地,圖29中所示的模板匹配單元2301類似于為圖27中所示的差異區(qū)域估計單元22的組件的模板匹配單元2202,但是區(qū)別在于差異候補區(qū)域信息將替代物體區(qū)域信息而被輸入。換而言之,圖29中所示的模板匹配單元2301通過僅僅對由錯誤對應特征點密集度搜索單元2103估計的參照圖像中的差異候補區(qū)域執(zhí)行使用模板圖像的模板匹配來估計參照圖像中的差異區(qū)域。由于從模板匹配單元2301輸出的差異區(qū)域信息表示差異區(qū)域由模板匹配單元2301從由錯誤對應特征點密集度搜索單元2103估計的差異候補區(qū)域中進一步向下收窄,具有高可靠性的差異區(qū)域信息被輸出。
[0153]此外,圖30中所示的差異區(qū)域估計單元23還能夠由模板匹配單元2302和錯誤對應特征點密集度搜索單元2102構成。圖30中所示的模板匹配單元2302基本上與為圖26中所示的差異區(qū)域估計單元22的組件的模板匹配單元2201相同,但是與模板匹配單元2201的區(qū)別在于替代差異區(qū)域信息,模板匹配單元2302輸出差異候補區(qū)域信息。由模板匹配單元2302輸出的差異候補區(qū)域信息可以與由模板匹配單元2201輸出的差異區(qū)域信息相同,或者為表示略微大于差異區(qū)域信息的區(qū)域可以被采用以替代的區(qū)域信息。
[0154]附加地,圖30中所示的錯誤對應特征點密集度搜索單元2102與為圖22中所示的差異區(qū)域估計單元21的組件的錯誤對應特征點密集度搜索單元2102相同,并且將省略其具體描述。具體而言,圖30中所示的錯誤對應特征點密集度搜索單元2102僅僅關注于對應特征點中存在于由模板匹配單元2302估計的參照圖像中的差異候補區(qū)域內(nèi)的點,搜索具有錯誤對應的特征點的密集度的區(qū)域,并且估計差異區(qū)域。由于從錯誤對應特征點密集度搜索單元2102輸出的差異區(qū)域信息表示從由模板匹配單元2302估計的差異候補區(qū)域中由錯誤對應特征點密集度搜索單元2102進一步向下收窄的差異區(qū)域,具有高可靠性的差異區(qū)域信息被輸出。
[0155]進而,圖31中所示的差異區(qū)域估計單元23包括錯誤對應特征點密集度搜索單元2103、模板匹配單元2302、以及差異候補區(qū)域重疊檢測單元2106。圖31中所示的錯誤對應特征點密集度搜索單元2103與為圖23中所示的差異區(qū)域估計單元21的組件的錯誤對應特征點密集度搜索單元2103相同,并且將省略其具體描述。圖31中所述的模板匹配單元2302與為圖30中所示的差異區(qū)域估計單元23的組件的模板匹配單元2302相同,并且將省略其具體描述。差異候補區(qū)域重疊檢測單元2106與為圖24中所示的差異區(qū)域估計單元21的組件的差異候補區(qū)域重疊檢測單元2106相同,并且將省略其具體描述。
[0156]由于在圖31中所示的配置中從差異候補區(qū)域重疊檢測單元2106輸出的差異區(qū)域信息為關于由錯誤對應特征點密集度搜索單元2103和模板匹配單元2302兩者確定為差異候補區(qū)域的信息,并且高度可靠的差異區(qū)域信息被輸出。
[0157]在本實施例中,雖然以類似于第二到第六實施例的方式無需將參照圖像中的差異區(qū)域提前注冊在數(shù)據(jù)庫中,如果以類似于第六實施例的方式提前知曉差異區(qū)域中典型地可見的圖像圖案,則差異區(qū)域能夠通過使用圖像圖案作為模板圖像來估計。例如,當從示出相同的信封并且僅僅在地址中區(qū)別于另一方的多個郵件圖像之中僅識別特殊郵件時,能夠將其中描述地址的區(qū)域定義為其中其中表示郵政編碼、地址、收件人等的字符串的布置或多或少被確定的圖像圖案。因此,在此情況下,本實施例是有效的。附加地,雖然根據(jù)本實施例的參照圖像中的差異區(qū)域能夠被估計而無論差異區(qū)域是整個物體還是物體的一部分,由于與第二實施例等相比能夠以類似于第五實施例的方式來獲得高度可靠的差異區(qū)域,能夠達到高度準確的識別。此外,雖然至此所描述的本實施例表示組合根據(jù)第二實施例的物體識別裝置與根據(jù)第六實施例的物體識別裝置的配置,圖28中所示的配置還可以被認為是組合根據(jù)第三實施例的物體識別裝置與根據(jù)第六實施例的物體識別裝置的配置。具體而言,當差異區(qū)域估計單元23被配置為如圖29、圖30、以及圖31中所示時,能夠在錯誤對應特征點密集度搜索單元2103和模板匹配單元2302之前添加物體區(qū)域估計單元。在此情況下,由于差異區(qū)域將在去除背景的影響之后從物體區(qū)域中估計,配置在諸如為圖10和圖11中所示的示例的情況下特別有效。
[0158]第八實施例
[0159]將參照附圖來描述本發(fā)明的第八實施例。
[0160]圖32為示出根據(jù)本發(fā)明的第八實施例的物體識別裝置的配置的框圖。如圖32中所示,根據(jù)第八實施例的物體識別裝置包括:局部描述符提取單元11、局部描述符匹配單元12、輸入圖像差異區(qū)域確定單元13、輸入圖像差異區(qū)域描述符提取單元14、描述符匹配單元15、差異區(qū)域估計單元24、以及差異區(qū)域描述符提取單元18。如上所述,根據(jù)第八實施例的物體識別裝置被配置為使得組合根據(jù)第四實施例的物體識別裝置和根據(jù)第六實施例的物體識別裝置。根據(jù)第八實施例的物體識別裝置與根據(jù)第四實施例的物體識別裝置的區(qū)別在于差異區(qū)域估計單元20已經(jīng)變?yōu)椴町悈^(qū)域估計單元24。差異區(qū)域估計單元24的細節(jié)將稍后描述。由于其他組件類似于第四實施例的那些,組件將由相同的附圖標記來標記,并且將省略其具體描述。
[0161]圖33至圖35為表示差異區(qū)域估計單元24的配置示例的框圖。以下將描述各附圖。
[0162]圖33中所示的差異區(qū)域估計單元24包括:轉換圖像生成單元2001、差異圖像生成單元2002、物體區(qū)域估計單元2003、大差異區(qū)域檢測單元2101、以及模板匹配單元2301。圖33中所示的轉換圖像生成單元2001、差異圖像生成單元2002、以及物體區(qū)域估計單元2003與為圖19中所示的差異區(qū)域估計單元20的組件的轉換圖像生成單元2001、差異圖像生成單元2002、以及物體區(qū)域估計單元2003相同,并且將省略其具體描述。圖33中所示的大差異區(qū)域檢測單元2101與為圖22中所示的差異區(qū)域估計單元21的組件的大差異區(qū)域檢測單元2101相同,并且將省略其具體描述。附加地,圖33中所示的模板匹配單元2301與為圖29中所示的差異區(qū)域估計單元23的組件的模板匹配單元2301相同,并且將省略其具體描述。
[0163]換而言之,圖33中所示的模板匹配單元2301通過僅僅對由大差異區(qū)域檢測單元2101估計的參照圖像中的差異候補區(qū)域執(zhí)行使用模板圖像的模板匹配來估計參照圖像中的差異區(qū)域。由于從模板匹配單元2301輸出的差異區(qū)域信息表示差異區(qū)域從由大差異區(qū)域檢測單元2101估計的差異候補區(qū)域中由模板匹配單元2301進一步向下收窄,具有高可靠性的差異區(qū)域信息被輸出。
[0164]進而,圖34中所示的差異區(qū)域估計單元24包括:轉換圖像生成單元2001、模板匹配單元2302、差異圖像生成單元2104、以及大差異區(qū)域檢測單元2105。圖34中所示的轉換圖像生成單元2001與為圖19中所示的差異區(qū)域估計單元20的組件的轉換圖像生成單元2001相同,并且將省略其具體描述。附加地,圖34中所示的模板匹配單元2302與為圖30中所示的差異區(qū)域估計單元23的組件的模板匹配單元2302相同,并且將省略其具體描述。圖34中所示的差異圖像生成單元2104和大差異區(qū)域檢測單元2105分別與為圖23中所示的差異區(qū)域估計單元21的組件的差異圖像生成單元2104和大差異區(qū)域檢測單元2105相同,并且將省略其具體描述。
[0165]由于從大差異區(qū)域檢測單元2105輸出的差異區(qū)域信息表示從由模板匹配單元2302估計的差異候補區(qū)域中由大差異區(qū)域檢測單元2105進一步向下收窄的差異區(qū)域,具有可靠性的差異區(qū)域信息被輸出。
[0166]附加地,圖35中所示的差異區(qū)域估計單元24包括:轉換圖像生成單元2001、差異圖像生成單元2002、物體區(qū)域估計單元2003、大差異區(qū)域檢測單元2101、模板匹配單元2302、以及差異候補區(qū)域重疊檢測單元2106。
[0167]圖35中所示的轉換圖像生成單元2001、差異圖像生成單元2002、以及物體區(qū)域估計單元2003與為圖19中所示的差異區(qū)域估計單元20的組件的轉換圖像生成單元2001、差異圖像生成單元2002、以及物體區(qū)域估計單元2003相同,并且將省略其具體描述。附加地,圖35中所示的大差異區(qū)域檢測單元2101與為圖22中所示的差異區(qū)域估計單元21的組件的大差異區(qū)域檢測單元2101相同,并且將省略其具體描述。進而,圖35中所示的模板匹配單元2302與為圖30中所示的差異區(qū)域估計單元23的組件的模板匹配單元2302相同,并且將省略其具體描述。此外,圖35中所示的差異候補區(qū)域重疊檢測單元2106與為圖24中所示的差異區(qū)域估計單元21的組件的差異候補區(qū)域重疊檢測單元2106相同,并且將省略其具體描述。
[0168]由于從圖35中所示的配置中的差異候補區(qū)域重疊檢測單元2106輸出的差異區(qū)域信息為關于將由大差異區(qū)域檢測單元2101和模板匹配單元2302兩者確定為差異候補區(qū)域的區(qū)域的信息,高度可靠的差異區(qū)域信息被輸出。
[0169]在本實施例中,以類似于第二到第七實施例的方式而無需提前將參照圖像中的差異區(qū)域注冊到數(shù)據(jù)庫中,并且如果以類似于第六和第七實施例的方式提前知曉在差異區(qū)域中典型地可見的圖像圖案,則能夠通過將圖像圖案作為模板圖像來估計差異區(qū)域。例如,當僅從示出相同的信封并且僅僅在地址上區(qū)別于另一方的多個郵件圖像中識別特殊郵件時,能夠將描述了地址的區(qū)域定義為其中表示郵政編碼、住址、收件人等的字符串的布置或多或少被確定的圖像圖案。因此,在這樣的情況下,本實施例是有效的。附加地,雖然能夠根據(jù)本實施例估計參照圖像中的差異區(qū)域而無論差異區(qū)域為整個物體還是物體的一部分,由于與第二實施例等相比、能夠以與第五和第七實施例相同類似的方式來獲得高度可靠的差異區(qū)域,能夠達到高度精確的識別。此外,在本實施例中,當將差異區(qū)域估計單元24