專利名稱：通過使用照相機(jī)參數(shù)產(chǎn)生立體圖像數(shù)據(jù)流的方法和設(shè)備以及通過使用照相機(jī)參數(shù)恢復(fù)立 ...的制作方法
技術(shù)領(lǐng)域：
與本發(fā)明一致的方法和設(shè)備涉及對立體圖像編碼和解碼。
背景技術(shù)：
當(dāng)前，正在積極地對三維(3D)圖像顯示方法進(jìn)行研究以更逼真地且更自然地顯 示圖像數(shù)據(jù)。在多種3D圖像顯示方法中，由于各種原因，這樣的3D圖像顯示方法被認(rèn)為是 具有潛力的，在所述3D圖像顯示方法中，左視圖像和右視圖像分開顯示在傳統(tǒng)顯示器裝置 的相應(yīng)位置，從而不同的圖像被形成以分別對應(yīng)于觀看者的左眼和右眼，從而利用人類視 覺的特性來提供3D效果。作為可采用3D圖像顯示方法的裝置的例子的具有柵欄液晶顯示 器(LCD)的便攜式終端在再現(xiàn)立體內(nèi)容的同時，可向用戶提供更逼真的圖像。

發(fā)明內(nèi)容
本發(fā)明提供一種用于對立體圖像編碼和解碼的方法和設(shè)備。根據(jù)本發(fā)明的一方面，提供一種立體圖像數(shù)據(jù)流產(chǎn)生方法，該方法包括對立體圖 像的圖像數(shù)據(jù)編碼；基于捕獲了立體圖像的一個或多個相機(jī)的每一個的各個特性確定相機(jī) 參數(shù)；將圖像數(shù)據(jù)和相機(jī)參數(shù)插入數(shù)據(jù)流中。本申請要求于2008年5月27日提交到美國專利商標(biāo)局的第61/056，174號美國 臨時申請的權(quán)益以及于2008年7月23日提交到韓國知識產(chǎn)權(quán)局的第10-2008-0071897號 韓國專利申請的權(quán)益，該申請全部公開于此以資參考。有益效果根據(jù)本發(fā)明的實(shí)施例，照相機(jī)參數(shù)可以單個參數(shù)，并且可以包括下述參數(shù)中的至 少一個焦距參數(shù)、角度寬高比參數(shù)、主點(diǎn)參數(shù)、旋轉(zhuǎn)角參數(shù)和平移參數(shù)。焦距參數(shù)、角度寬 高比參數(shù)和主點(diǎn)參數(shù)的每一個是用于單個相機(jī)的參數(shù)并且被定義為相機(jī)內(nèi)參數(shù)，而旋轉(zhuǎn)角 參數(shù)和平移參數(shù)是關(guān)于多個相機(jī)之間的相互關(guān)系的參數(shù)并且被定義為相機(jī)外參數(shù)。相機(jī)參 數(shù)可被應(yīng)用到各種處理，例如核線約束處理和調(diào)整處理，從而提高3D圖像的質(zhì)量。


通過下面結(jié)合附圖對示例性實(shí)施例進(jìn)行的詳細(xì)描述，本發(fā)明的上述和其他示例性 方面將會變得更加清楚，其中圖1是根據(jù)本發(fā)明的示例性實(shí)施例的立體圖像數(shù)據(jù)流產(chǎn)生設(shè)備的框圖；圖2是根據(jù)本發(fā)明的示例性實(shí)施例的立體圖像恢復(fù)設(shè)備的框圖；圖3是顯示世界坐標(biāo)系統(tǒng)和相機(jī)坐標(biāo)系統(tǒng)之間的相互關(guān)系的示圖；圖4是顯示相機(jī)坐標(biāo)系統(tǒng)上的坐標(biāo)和圖像上的相應(yīng)坐標(biāo)之間的相互關(guān)系的示圖；圖5是顯示拍攝的圖像上的坐標(biāo)和再現(xiàn)圖像上的坐標(biāo)之間的相互關(guān)系的示圖；圖6是顯示立體相機(jī)的平移信息和旋轉(zhuǎn)角信息的表；5
圖7是顯示主視點(diǎn)相機(jī)坐標(biāo)系統(tǒng)和次視點(diǎn)相機(jī)坐標(biāo)系統(tǒng)；圖8是示出基于國際標(biāo)準(zhǔn)化組織(ISO)的媒體文件格式的結(jié)構(gòu)的示圖；圖9是示出基于ISO的媒體文件格式的各種框的列表的示圖；圖10是示出根據(jù)本發(fā)明的示例性實(shí)施例的實(shí)現(xiàn)關(guān)于立體圖像的各種參數(shù)的語法 的示圖；圖11是示出根據(jù)本發(fā)明的示例性實(shí)施例的實(shí)現(xiàn)關(guān)于立體圖像的相機(jī)焦距參數(shù)的 語法的示圖；圖12是示出根據(jù)本發(fā)明的另一示例性實(shí)施例的實(shí)現(xiàn)關(guān)于立體圖像的相機(jī)焦距參 數(shù)的語法的示圖；圖13是示出根據(jù)本發(fā)明的另一示例性實(shí)施例的實(shí)現(xiàn)關(guān)于立體圖像的相機(jī)焦距參 數(shù)的語法的示圖；圖14是示出根據(jù)本發(fā)明的另一示例性實(shí)施例的實(shí)現(xiàn)關(guān)于立體圖像的相機(jī)焦距參 數(shù)的語法的示圖；圖15是示出根據(jù)本發(fā)明的另一示例性實(shí)施例的實(shí)現(xiàn)關(guān)于立體圖像的相機(jī)焦距參 數(shù)的語法的示圖；圖16是示出根據(jù)本發(fā)明的示例性實(shí)施例的實(shí)現(xiàn)關(guān)于立體圖像的相機(jī)主點(diǎn)參數(shù)的 語法的示圖；圖17是示出根據(jù)本發(fā)明的另一示例性實(shí)施例的實(shí)現(xiàn)關(guān)于立體圖像的相機(jī)主點(diǎn)參 數(shù)的語法的示圖；圖18是示出根據(jù)本發(fā)明的示例性實(shí)施例的實(shí)現(xiàn)關(guān)于立體圖像的相機(jī)旋轉(zhuǎn)角參數(shù) 的語法的示圖；圖19是示出根據(jù)本發(fā)明的示例性實(shí)施例的使用立體圖像數(shù)據(jù)流產(chǎn)生方法的立體 圖像文件產(chǎn)生系統(tǒng)的框圖；圖20是示出根據(jù)本發(fā)明的示例性實(shí)施例的使用立體圖像恢復(fù)方法的立體圖像恢 復(fù)/再現(xiàn)系統(tǒng)的框圖；圖21是示出根據(jù)本發(fā)明的示例性實(shí)施例的立體圖像數(shù)據(jù)流產(chǎn)生方法的流程圖；圖22是示出根據(jù)本發(fā)明的示例性實(shí)施例的立體圖像恢復(fù)方法的流程圖。最佳實(shí)施方式根據(jù)本發(fā)明的一方面，提供一種立體圖像數(shù)據(jù)流產(chǎn)生方法，該方法包括對立體圖 像的圖像數(shù)據(jù)編碼；基于捕獲了立體圖像的一個或多個相機(jī)的每一個的各個特性確定相機(jī) 參數(shù)；將圖像數(shù)據(jù)和相機(jī)參數(shù)插入數(shù)據(jù)流中。確定相機(jī)參數(shù)的步驟可包括確定主焦距參數(shù)和次焦距參數(shù)，其中，主焦距參數(shù)表 示一個或多個相機(jī)的主視點(diǎn)相機(jī)的主焦距，次焦距參數(shù)表示一個或多個相機(jī)的次視點(diǎn)相機(jī) 的次焦距。確定相機(jī)參數(shù)的步驟可還包括確定焦距差別參數(shù)，其中，焦距差別參數(shù)指示一個 或多個相機(jī)的主視點(diǎn)相機(jī)的主焦距是否與一個或多個相機(jī)的次視點(diǎn)相機(jī)的次焦距不同。如果焦距差別參數(shù)指示主焦距與次焦距一致，則確定相機(jī)參數(shù)的步驟可還包括 確定主焦距參數(shù)和次焦距參數(shù)中的一個，其中，主焦距參數(shù)表述主焦距，次焦距參數(shù)表示次 焦距。
如果焦距差別參數(shù)指示主焦距與次焦距不同，則確定相機(jī)參數(shù)的步驟可還包括 確定主焦距參數(shù)和次焦距參數(shù)，其中，主焦距參數(shù)表述主焦距，次焦距參數(shù)表示次焦距。確定相機(jī)參數(shù)的步驟可還包括確定水平焦距參數(shù)和垂直焦距參數(shù)，其中，水平焦 距參數(shù)表示相機(jī)的焦距的水平分量，垂直焦距參數(shù)表示相機(jī)的焦距的垂直分量。確定相機(jī)參數(shù)的步驟可還包括確定焦距寬高比參數(shù)，其中，焦距寬高比參數(shù)表示 相機(jī)的焦距的水平分量和垂直分量之間的寬高比；確定水平焦距參數(shù)和垂直焦距參數(shù)中的 一個，其中，水平焦距參數(shù)表示焦距的水平分量，垂直焦距參數(shù)表示焦距的垂直分量。確定相機(jī)參數(shù)的步驟可還包括確定焦距寬高比使用參數(shù)，其中，焦距寬高比使用 參數(shù)指示是否基于焦距的水平分量和垂直分量之間的寬高比來設(shè)置關(guān)于相機(jī)的焦距的信 肩、ο如果焦距寬高比使用參數(shù)指示焦距的水平分量和垂直分量之間的寬高比被使用， 則確定相機(jī)參數(shù)的步驟可還包括確定焦距寬高比參數(shù)，其中，焦距寬高比參數(shù)表示焦距的 水平分量和垂直分量之間的寬高比。如果焦距寬高比使用參數(shù)指示焦距寬高比使用參數(shù)指示焦距的水平分量和垂直 分量之間的寬高比沒有被使用，則確定相機(jī)參數(shù)的步驟可還包括確定焦距的水平分量和 垂直分量之間的寬高比具有值‘1’。確定相機(jī)參數(shù)的步驟可還包括確定基本主點(diǎn)參數(shù)和次主點(diǎn)參數(shù)，其中，基本主點(diǎn) 參數(shù)表示立體圖像的主視點(diǎn)圖像的主點(diǎn)，次主點(diǎn)參數(shù)表示立體圖像的次視點(diǎn)圖像的主點(diǎn)。確定相機(jī)參數(shù)的步驟可還包括對于χ分量和y分量確定基本主點(diǎn)參數(shù)和次主點(diǎn) 參數(shù)中的一個。確定相機(jī)參數(shù)的步驟可還包括確定主點(diǎn)信息設(shè)置參數(shù)，其中，主點(diǎn)信息設(shè)置參數(shù) 指示關(guān)于立體圖像的主視點(diǎn)圖像的主點(diǎn)和次視點(diǎn)圖像的主點(diǎn)的每一個的信息是否被設(shè)置。如果主點(diǎn)信息設(shè)置參數(shù)指示關(guān)于主點(diǎn)的信息被設(shè)置，則確定相機(jī)參數(shù)的步驟可還 包括確定基本主點(diǎn)參數(shù)和次主點(diǎn)參數(shù)，其中，基本主點(diǎn)參數(shù)表示立體圖像的主視點(diǎn)圖像的 主點(diǎn)，次主點(diǎn)參數(shù)表示立體圖像的次視點(diǎn)圖像的主點(diǎn)，并且可對于χ分量和y分量確定基本 主點(diǎn)參數(shù)和次主點(diǎn)參數(shù)的每一個。如果主點(diǎn)信息設(shè)置參數(shù)指示關(guān)于主點(diǎn)的信息沒有被設(shè)置，則確定相機(jī)參數(shù)的步驟 可還包括確定由一個或多個相機(jī)的預(yù)定視點(diǎn)相機(jī)拍攝的區(qū)域的中心點(diǎn)匹配立體圖像的預(yù) 定視點(diǎn)圖像的主點(diǎn)。確定相機(jī)參數(shù)的步驟可包括在相機(jī)的旋轉(zhuǎn)角中確定χ軸旋轉(zhuǎn)角參數(shù)、y軸旋轉(zhuǎn)角 參數(shù)和ζ軸旋轉(zhuǎn)角參數(shù)，其中，χ軸旋轉(zhuǎn)角參數(shù)表示關(guān)于χ軸的旋轉(zhuǎn)角，y軸旋轉(zhuǎn)角參數(shù)表示 關(guān)于ι軸的旋轉(zhuǎn)角，ζ軸旋轉(zhuǎn)角參數(shù)表示關(guān)于ζ軸的旋轉(zhuǎn)角。確定相機(jī)參數(shù)的步驟可還包括確定旋轉(zhuǎn)角參數(shù)，其中，關(guān)于χ軸的旋轉(zhuǎn)角、關(guān)于y 軸的旋轉(zhuǎn)角和關(guān)于ζ軸的旋轉(zhuǎn)角被表示為3X3矩陣和九位陣列之一。如果數(shù)據(jù)流是基于國際標(biāo)準(zhǔn)化組織(ISO)的媒體文件格式，則基于ISO的媒體文 件格式包括moov框、mdat框和第一 meta框，并且插入步驟可包括將相機(jī)參數(shù)插入下述框 中的至少一個中第一 meta框的子級框、moov框的第一子級框、作為moov框的第二子級框 的trak框的第一子級框以及作為trak框的第二子級框的第二 meta框的子級框。根據(jù)本發(fā)明的另一方面，提供一種立體圖像恢復(fù)方法，包括將接收的數(shù)據(jù)流解析為立體圖像的圖像數(shù)據(jù)和關(guān)于立體圖像的信息；提取表示捕獲了立體圖像的一個或多個相 機(jī)的每一個的各個特性的相機(jī)參數(shù)；解碼并恢復(fù)立體圖像的圖像數(shù)據(jù)。解碼和恢復(fù)的步驟可包括使用相機(jī)參數(shù)來再現(xiàn)立體圖像的圖像數(shù)據(jù)。提取相機(jī)參數(shù)的步驟可包括提取主焦距參數(shù)和次焦距參數(shù)，其中，主焦距參數(shù)表 示一個或多個相機(jī)的主視點(diǎn)相機(jī)的焦距，次焦距參數(shù)表示一個或多個相機(jī)的次視點(diǎn)相機(jī)的 焦距。提取相機(jī)參數(shù)的步驟還可包括提取焦距差別參數(shù)，其中，焦距差別參數(shù)指示一個 或多個相機(jī)的主視點(diǎn)相機(jī)的主焦距是否與一個或多個相機(jī)的次視點(diǎn)相機(jī)的次焦距不同。如果焦距差別參數(shù)指示主焦距與次焦距一致，則提取相機(jī)參數(shù)的步驟還可包括 提取主焦距參數(shù)和次焦距參數(shù)中的一個，其中，主焦距參數(shù)表示主焦距，次焦距參數(shù)表示次 焦距。如果焦距差別參數(shù)指示主焦距與次焦距不同，則提取相機(jī)參數(shù)的步驟還可包括 提取主焦距參數(shù)和次焦距參數(shù)，其中，主焦距參數(shù)表示主焦距，次焦距參數(shù)表示次焦距。提取相機(jī)參數(shù)的步驟可包括提取水平焦距參數(shù)和垂直焦距參數(shù)，其中，水平焦距 參數(shù)表示相機(jī)的焦距的水平分量，垂直焦距參數(shù)表示相機(jī)的焦距的垂直分量。提取相機(jī)參數(shù)的步驟還可包括提取焦距寬高比參數(shù)，其中，焦距寬高比參數(shù)表示 相機(jī)的焦距的水平分量和垂直分量之間的寬高比；提取水平焦距參數(shù)和垂直焦距參數(shù)中的 一個，其中，水平焦距參數(shù)表示焦距的水平分量，垂直焦距參數(shù)表示焦距的垂直分量。提取相機(jī)參數(shù)的步驟還可包括提取焦距寬高比使用參數(shù)，其中，焦距寬高比使用 參數(shù)指示是否通過使用焦距的水平分量和垂直分量之間的寬高比來設(shè)置關(guān)于相機(jī)的焦距 的信息。如果焦距寬高比使用參數(shù)指示焦距的水平分量和垂直分量之間的寬高比被使用， 則提取相機(jī)參數(shù)的步驟可還包括提取焦距寬高比參數(shù)，其中，焦距寬高比參數(shù)表示焦距的 水平分量和垂直分量之間的寬高比。如果焦距寬高比使用參數(shù)指示焦距的水平分量和垂直分量之間的寬高比沒有被 使用，則提取相機(jī)參數(shù)的步驟可還包括確定焦距的水平分量和垂直分量之間的寬高比具 有值‘1’。提取相機(jī)參數(shù)的步驟可還包括提取基本主點(diǎn)參數(shù)和次主點(diǎn)參數(shù)，其中，基本主點(diǎn) 參數(shù)表示立體圖像的主視點(diǎn)圖像的主點(diǎn)，次主點(diǎn)參數(shù)表示立體圖像的次視點(diǎn)圖像的主點(diǎn)。提取相機(jī)參數(shù)的步驟可包括對于χ分量和y分量提取基本主點(diǎn)參數(shù)和次主點(diǎn)參 數(shù)的每一個。提取相機(jī)參數(shù)的步驟可包括提取主點(diǎn)信息設(shè)置參數(shù)，其中，主點(diǎn)信息設(shè)置參數(shù)指 示關(guān)于立體圖像的主視點(diǎn)圖像的主點(diǎn)和次視點(diǎn)圖像的主點(diǎn)的每一個的信息是否被設(shè)置的 fn息ο如果主點(diǎn)信息設(shè)置參數(shù)指示關(guān)于主點(diǎn)的信息被設(shè)置，則提取相機(jī)參數(shù)的步驟可還 包括提取基本主點(diǎn)參數(shù)和次主點(diǎn)參數(shù)，其中，基本主點(diǎn)參數(shù)表示立體圖像的主視點(diǎn)圖像的 主點(diǎn)，次主點(diǎn)參數(shù)表示立體圖像的次視點(diǎn)圖像的主點(diǎn)，并且對于χ分量和y分量提取基本主 點(diǎn)參數(shù)和次主點(diǎn)參數(shù)的每一個。如果主點(diǎn)信息設(shè)置參數(shù)指示關(guān)于主點(diǎn)的信息沒有被設(shè)置，則提取相機(jī)參數(shù)的步驟8可還包括確定由一個或多個相機(jī)的預(yù)定視點(diǎn)相機(jī)拍攝的區(qū)域的中心點(diǎn)匹配立體圖像的預(yù) 定視點(diǎn)圖像的主點(diǎn)。提取相機(jī)參數(shù)的步驟可包括在相機(jī)的旋轉(zhuǎn)角中提取χ軸旋轉(zhuǎn)角參數(shù)、y軸旋轉(zhuǎn)角 參數(shù)和ζ軸旋轉(zhuǎn)角參數(shù)，其中，χ軸旋轉(zhuǎn)角參數(shù)表示關(guān)于χ軸的旋轉(zhuǎn)角，y軸旋轉(zhuǎn)角參數(shù)表示 關(guān)于y軸的旋轉(zhuǎn)角，ζ軸旋轉(zhuǎn)角參數(shù)表示關(guān)于ζ軸的旋轉(zhuǎn)角。提取相機(jī)參數(shù)的步驟可包括提取旋轉(zhuǎn)角參數(shù)，其中，基于χ軸的旋轉(zhuǎn)角、基于y軸 的旋轉(zhuǎn)角和基于ζ軸的旋轉(zhuǎn)角被表示為3X3矩陣和九位陣列之如果數(shù)據(jù)流是基于國際標(biāo)準(zhǔn)化組織(ISO)的媒體文件格式，則基于ISO的媒體文 件格式包括moov框、mdat框和第一 meta框，并且解析步驟可包括從下述框中的至少一個 中提取相機(jī)參數(shù)第一 meta框的子級框、moov框的第一子級框、作為moov框的第二子級框 的trak框的第一子級框以及作為trak框的第二子級框的第二 meta框的子級框；從mdat 框中提取立體圖像的圖像數(shù)據(jù)。根據(jù)本發(fā)明的另一方面，提供一種記載有用于執(zhí)行立體圖像恢復(fù)方法的計(jì)算機(jī)程 序的計(jì)算機(jī)可讀記錄介質(zhì)，該方法包括將接收的圖像流解析為立體圖像的圖像數(shù)據(jù)和關(guān) 于立體圖像的信息；提取表示捕獲了立體圖像的一個或多個相機(jī)的每一個的各個特性的相 機(jī)參數(shù)；解碼并恢復(fù)立體圖像的圖像數(shù)據(jù)。根據(jù)本發(fā)明的另一方面，提供一種在其上記載有用于執(zhí)行立體圖像數(shù)據(jù)流產(chǎn)生方 法的計(jì)算機(jī)程序的計(jì)算機(jī)可讀記錄介質(zhì)，該方法包括對立體圖像的圖像數(shù)據(jù)編碼；基于 捕獲了立體圖像的一個或多個相機(jī)的每一個的各個特性來確定相機(jī)參數(shù)；將圖像數(shù)據(jù)和相 機(jī)參數(shù)插入到數(shù)據(jù)流中。根據(jù)本發(fā)明的另一方面，提供一種立體圖像數(shù)據(jù)流產(chǎn)生設(shè)備，包括圖像數(shù)據(jù)編碼 單元，對立體圖像的圖像數(shù)據(jù)編碼；相機(jī)參數(shù)確定單元，基于捕獲了立體圖像的一個或多個 相機(jī)的每一相機(jī)的各個特性確定相機(jī)參數(shù)；和數(shù)據(jù)流插入單元，將圖像數(shù)據(jù)和相機(jī)參數(shù)插 入到數(shù)據(jù)流中。相機(jī)參數(shù)確定單元可包括確定一個或多個相機(jī)的預(yù)定視點(diǎn)相機(jī)的焦距的焦距參 數(shù)確定單元，并且焦距參數(shù)確定單元可分離地確定主焦距參數(shù)和次焦距參數(shù)，其中，主焦距 參數(shù)表示一個或多個相機(jī)的主視點(diǎn)相機(jī)的焦距，次焦距參數(shù)表示一個或多個相機(jī)的次視點(diǎn) 相機(jī)的焦距。相機(jī)參數(shù)確定單元可還包括確定焦距差別參數(shù)的焦距差別參數(shù)確定單元，其中， 焦距參數(shù)差別指示一個或多個相機(jī)的主視點(diǎn)相機(jī)的焦距是否與表示一個或多個相機(jī)的次 視點(diǎn)相機(jī)的焦距的次焦距參數(shù)不同。如果焦距差別參數(shù)指示主焦距與次焦距一致，則焦距參數(shù)確定單元可確定表示主 焦距的主焦距參數(shù)和表示次焦距的次焦距參數(shù)中的一個。如果焦距差別參數(shù)指示主焦距與次焦距不同，則焦距參數(shù)確定單元可確定表示主 焦距的主焦距參數(shù)和表示次焦距的次焦距參數(shù)。相機(jī)參數(shù)確定單元可包括確定一個或多個相機(jī)的預(yù)定視點(diǎn)相機(jī)的焦距的焦距參 數(shù)確定單元，并且焦距參數(shù)確定單元可確定表示相機(jī)的主焦距的主焦距參數(shù)和表示相機(jī)的 次焦距的次焦距參數(shù)。相機(jī)參數(shù)確定單元可包括焦距參數(shù)確定單元，確定一個或多個相機(jī)的預(yù)定視點(diǎn)相機(jī)的焦距；和焦距寬高比參數(shù)確定單元，確定表示相機(jī)的水平分量和垂直分量之間的寬 高比的焦距寬高比參數(shù)，并且焦距參數(shù)確定單元可確定表示焦距的水平分量的水平焦距參 數(shù)和表示焦距的垂直分量的垂直焦距參數(shù)中的一個。相機(jī)參數(shù)確定單元可還包括焦距寬高比使用參數(shù)確定單元，確定焦距寬高比使 用參數(shù)，其中，焦距寬高比使用參數(shù)指示是否通過使用焦距的水平分量和垂直分量之間的 寬高比來設(shè)置相機(jī)的焦距。如果焦距寬高比使用參數(shù)指示焦距的水平分量和垂直分量之間的寬高比被使用， 則焦距寬高比參數(shù)確定單元可確定表示焦距的水平分量和垂直分量之間的寬高比的焦距 寬高比參數(shù)。如果焦距寬高比使用參數(shù)指示焦距的水平分量和垂直分量之間的寬高比沒有被 使用，則焦距寬高比參數(shù)確定單元可確定焦距的水平分量和垂直分量之間的寬高比具有值 ‘1，。相機(jī)參數(shù)確定單元還可包括主點(diǎn)參數(shù)確定單元，確定關(guān)于立體圖像的預(yù)定視點(diǎn) 圖像的主點(diǎn)的信息，并且主點(diǎn)參數(shù)確定單元可分離地確定基本主點(diǎn)參數(shù)和次主點(diǎn)參數(shù)，其 中，基本主點(diǎn)參數(shù)表示立體圖像的主視點(diǎn)圖像的主點(diǎn)，次主點(diǎn)參數(shù)表示立體圖像的次視點(diǎn) 圖像的主點(diǎn)。主點(diǎn)參數(shù)確定單元可關(guān)于χ分量和y分量確定基本主點(diǎn)參數(shù)和次主點(diǎn)參數(shù)中的每一個。相機(jī)參數(shù)確定單元可包括主點(diǎn)信息設(shè)置參數(shù)確定單元，確定主點(diǎn)信息設(shè)置參數(shù)， 其中，主點(diǎn)信息設(shè)置參數(shù)指示關(guān)于立體圖像的主視點(diǎn)圖像的主點(diǎn)和次視點(diǎn)圖像的主點(diǎn)的每 一個的信息是否被設(shè)置。相機(jī)參數(shù)確定單元可包括主點(diǎn)參數(shù)確定單元，基于主點(diǎn)信息設(shè)置參數(shù)來確定關(guān) 于立體圖像的預(yù)定視點(diǎn)圖像的主點(diǎn)的信息，并且如果主點(diǎn)信息設(shè)置參數(shù)指示關(guān)于主點(diǎn)的信 息被設(shè)置，則主點(diǎn)參數(shù)確定單元可分離地確定表示立體圖像的主視點(diǎn)圖像的主點(diǎn)的基本主 點(diǎn)參數(shù)以及表示立體圖像的次視點(diǎn)圖像的主點(diǎn)的次主點(diǎn)參數(shù)，并且可以關(guān)于χ分量和y分 量確定基本主點(diǎn)參數(shù)和次主點(diǎn)參數(shù)。相機(jī)參數(shù)確定單元可包括主點(diǎn)參數(shù)確定單元，基于主點(diǎn)信息設(shè)置參數(shù)來確定關(guān) 于立體圖像的預(yù)定視點(diǎn)圖像的主點(diǎn)的信息，并且如果主點(diǎn)信息設(shè)置參數(shù)指示關(guān)于主點(diǎn)的信 息沒有被設(shè)置，則主點(diǎn)參數(shù)確定單元可由一個或多個相機(jī)的預(yù)定視點(diǎn)相機(jī)拍攝的區(qū)域的中 心點(diǎn)匹配立體圖像的預(yù)定視點(diǎn)的主點(diǎn)。相機(jī)參數(shù)確定單元可包括旋轉(zhuǎn)角參數(shù)確定單元，確定關(guān)于相機(jī)的旋轉(zhuǎn)角的信息， 并且旋轉(zhuǎn)角參數(shù)確定單元可在相機(jī)的旋轉(zhuǎn)角中確定χ軸旋轉(zhuǎn)角參數(shù)、y軸旋轉(zhuǎn)角參數(shù)和ζ軸 旋轉(zhuǎn)角參數(shù)，其中，χ軸旋轉(zhuǎn)角參數(shù)表示關(guān)于χ軸的旋轉(zhuǎn)角，y軸旋轉(zhuǎn)角參數(shù)表示關(guān)于y軸的 旋轉(zhuǎn)角，ζ軸旋轉(zhuǎn)角參數(shù)表示關(guān)于ζ軸的旋轉(zhuǎn)角。旋轉(zhuǎn)角參數(shù)確定單元可確定旋轉(zhuǎn)角參數(shù)，其中，關(guān)于χ軸的旋轉(zhuǎn)角、關(guān)于y軸的旋 轉(zhuǎn)角和關(guān)于ζ軸的旋轉(zhuǎn)角被表示為3X3矩陣和九位陣列之一。如果數(shù)據(jù)流是基于國際標(biāo)準(zhǔn)化組織(ISO)的媒體文件格式，則基于ISO的媒體文 件格式可包括moov框、mdat框和第一 meta框，并且數(shù)據(jù)流插入單元可將相機(jī)參數(shù)插入下 述框中的至少一個中第一 meta框的子級框、moov框的第一子級框、作為moov框的第二子級框的trak框的第一子級框以及作為trak框的第二子級框的第二 meta框的子級框。根據(jù)本發(fā)明的另一方面，提供一種立體圖像恢復(fù)設(shè)備，包括解析單元，從接收的 圖像流解析立體圖像的圖像數(shù)據(jù)和關(guān)于立體圖像的信息；相機(jī)參數(shù)提取單元，提取表示捕 獲了立體圖像的一個或多個相機(jī)的每一相機(jī)的各個特性的相機(jī)參數(shù)；圖像數(shù)據(jù)解碼單元， 解碼并恢復(fù)立體圖像的圖像數(shù)據(jù)。立體圖像恢復(fù)設(shè)備可還包括再現(xiàn)單元，通過使用相機(jī)參數(shù)來再現(xiàn)立體圖像的圖 像數(shù)據(jù)。立體圖像恢復(fù)設(shè)備可包括焦距參數(shù)提取單元，提取關(guān)于一個或多個相機(jī)的預(yù)定 視點(diǎn)相機(jī)的焦距的信息，并且焦距參數(shù)提取單元可分離地提取主焦距參數(shù)和次焦距參數(shù)， 其中，主焦距參數(shù)表示一個或多個相機(jī)的主視點(diǎn)相機(jī)的焦距，次焦距參數(shù)表示一個或多個 相機(jī)的次視點(diǎn)相機(jī)的焦距。相機(jī)參數(shù)提取單元可還包括焦距差別參數(shù)提取單元，提取焦距差別參數(shù)，其中， 焦距差別參數(shù)指示一個或多個相機(jī)的主視點(diǎn)相機(jī)的主焦距是否與一個或多個相機(jī)的次視 點(diǎn)相機(jī)的次焦距不同。相機(jī)參數(shù)提取單元可包括焦距參數(shù)提取單元，提取關(guān)于一個或多個相機(jī)的預(yù)定 視點(diǎn)相機(jī)的焦距的信息，并且如果焦距差別參數(shù)指示主焦距與次焦距一致，則焦距參數(shù)提 取單元可提取主焦距參數(shù)和次焦距參數(shù)中的一個，其中，主焦距參數(shù)表示主焦距，次焦距參 數(shù)表示次焦距。相機(jī)參數(shù)提取單元可包括焦距參數(shù)提取單元，提取關(guān)于一個或多個相機(jī)的預(yù)定 視點(diǎn)相機(jī)的焦距的信息，并且如果焦距差別參數(shù)指示主焦距與次焦距不同，則焦距參數(shù)提 取單元可提取主焦距參數(shù)和次焦距參數(shù)，其中，主焦距參數(shù)表示主焦距，次焦距參數(shù)表示次 焦距。相機(jī)參數(shù)提取單元可包括焦距參數(shù)提取單元，提取關(guān)于一個或多個相機(jī)的預(yù)定 視點(diǎn)相機(jī)的焦距的信息，焦距參數(shù)提取單元可提取水平焦距參數(shù)和垂直焦距參數(shù)，其中，水 平焦距參數(shù)表示相機(jī)的焦距的水平分量，垂直焦距參數(shù)表示相機(jī)的焦距的垂直分量。相機(jī)參數(shù)提取單元可包括焦距參數(shù)提取單元，提取關(guān)于一個或多個相機(jī)的預(yù)定 視點(diǎn)相機(jī)的焦距的信息；焦距寬高比參數(shù)提取單元，提取焦距寬高比參數(shù)，其中，焦距寬高 比參數(shù)表示相機(jī)的焦距的水平分量和垂直分量之間的寬高比；并且焦距參數(shù)提取單元可提 取水平焦距參數(shù)和垂直焦距參數(shù)中的一個，其中，水平焦距參數(shù)表示焦距的水平分量，垂直 焦距參數(shù)表示焦距的垂直分量。相機(jī)參數(shù)提取單元可還包括焦距寬高比使用參數(shù)提取單元，提取焦距寬高比使 用參數(shù)，其中，焦距寬高比使用參數(shù)指示是否通過使用焦距的水平分量和垂直分量之間的 寬高比來設(shè)置關(guān)于相機(jī)的焦距的信息。如果焦距寬高比使用參數(shù)指示焦距的水平分量和垂直分量之間的寬高比被使用， 則焦距寬高比參數(shù)提取單元可提取焦距寬高比參數(shù)，其中，焦距寬高比參數(shù)表示焦距的水 平分量和處置分量之間的寬高比。如果焦距寬高比使用參數(shù)指示焦距的水平分量和垂直分量之間的寬高比沒有被 使用，則焦距寬高比參數(shù)提取單元可確定焦距的水平分量和垂直分量之間的寬高比具有值 ‘1，。11
相機(jī)參數(shù)提取單元可包括主點(diǎn)參數(shù)提取單元，提取關(guān)于立體圖像的預(yù)定視點(diǎn)圖 像的主點(diǎn)的信息，并且主點(diǎn)參數(shù)提取單元可分離地提取基本主點(diǎn)參數(shù)和次主點(diǎn)參數(shù)，其中， 基本主點(diǎn)參數(shù)表示立體圖像的主視點(diǎn)圖像的主點(diǎn)，次主點(diǎn)參數(shù)表示立體圖像的次視點(diǎn)圖像 的主點(diǎn)。主點(diǎn)參數(shù)提取單元可對于χ分量和y分量提取基本主點(diǎn)參數(shù)和次主點(diǎn)參數(shù)的每一 個。相機(jī)參數(shù)提取單元可包括主點(diǎn)信息設(shè)置參數(shù)提取單元，提取主點(diǎn)信息設(shè)置參數(shù)， 其中，主點(diǎn)信息設(shè)置參數(shù)指示關(guān)于立體圖像的主視點(diǎn)圖像的主點(diǎn)和次視點(diǎn)圖像的主點(diǎn)的每 一個的信息是否被設(shè)置的信息。相機(jī)參數(shù)提取單元可包括主點(diǎn)參數(shù)提取單元，提取關(guān)于立體圖像的預(yù)定視點(diǎn)圖 像的主點(diǎn)的信息，并且如果主點(diǎn)信息設(shè)置參數(shù)指示關(guān)于主點(diǎn)的信息被設(shè)置，則主點(diǎn)參數(shù)提 取單元可分離地提取基本主點(diǎn)參數(shù)和次主點(diǎn)參數(shù)，其中，基本主點(diǎn)參數(shù)表示立體圖像的主 視點(diǎn)圖像的主點(diǎn)，次主點(diǎn)參數(shù)表示立體圖像的次視點(diǎn)圖像的主點(diǎn)，并且對于X分量和y分量 提取基本主點(diǎn)參數(shù)和次主點(diǎn)參數(shù)的每一個。相機(jī)參數(shù)提取單元可包括主點(diǎn)參數(shù)提取單元，提取關(guān)于立體圖像的預(yù)定視點(diǎn)圖 像的主點(diǎn)的信息，并且如果主點(diǎn)信息設(shè)置參數(shù)指示關(guān)于主點(diǎn)的信息沒有被設(shè)置，則主點(diǎn)參 數(shù)提取單元可確定由一個或多個相機(jī)的預(yù)定視點(diǎn)相機(jī)拍攝的區(qū)域的中心點(diǎn)匹配立體圖像 的預(yù)定視點(diǎn)圖像的主點(diǎn)。相機(jī)參數(shù)提取單元可包括旋轉(zhuǎn)角參數(shù)提取單元，提取關(guān)于相機(jī)的旋轉(zhuǎn)角的信息， 旋轉(zhuǎn)角參數(shù)提取單元可在相機(jī)的旋轉(zhuǎn)角中提取X軸旋轉(zhuǎn)角參數(shù)、y軸旋轉(zhuǎn)角參數(shù)和Z軸旋 轉(zhuǎn)角參數(shù)，其中，χ軸旋轉(zhuǎn)角參數(shù)表示關(guān)于χ軸的旋轉(zhuǎn)角，y軸旋轉(zhuǎn)角參數(shù)表示關(guān)于y軸的旋 轉(zhuǎn)角，ζ軸旋轉(zhuǎn)角參數(shù)表示關(guān)于ζ軸的旋轉(zhuǎn)角。旋轉(zhuǎn)角參數(shù)提取單元可提取旋轉(zhuǎn)角參數(shù)，其中，關(guān)于χ軸的旋轉(zhuǎn)角、關(guān)于y軸的旋 轉(zhuǎn)角和關(guān)于ζ軸的旋轉(zhuǎn)角被表示為3X3矩陣和九位陣列之一。如果數(shù)據(jù)流是基于國際標(biāo)準(zhǔn)化組織(ISO)的媒體文件格式，則基于ISO的媒體文 件格式可包括moov框、mdat框和第一 meta框，并且解析單元可從下述框中的至少一個中 提取相機(jī)參數(shù)第一 meta框的子級框、moov框的第一子級框、作為moov框的第二子級框的 trak框的第一子級框以及作為trak框的第二子級框的第二meta框的子級框；可從mdat框 中提取立體圖像的圖像數(shù)據(jù)。
具體實(shí)施例方式下面，將通過參照附圖解釋本發(fā)明的示例性實(shí)施例來描述本發(fā)明。圖1是根據(jù)本發(fā)明實(shí)施例的立體圖像數(shù)據(jù)流產(chǎn)生設(shè)備100的框圖。參照圖1，立體圖像數(shù)據(jù)流產(chǎn)生設(shè)備100包括圖像數(shù)據(jù)編碼單元110、相機(jī)參數(shù)確 定單元120和數(shù)據(jù)流插入單元130。圖像數(shù)據(jù)編碼單元110對立體圖像的圖像數(shù)據(jù)編碼并且將編碼圖像數(shù)據(jù)輸出到 數(shù)據(jù)流插入單元130。當(dāng)立體圖像被編碼時，主視點(diǎn)圖像和次視點(diǎn)圖像可被單獨(dú)編碼，或者 主視點(diǎn)圖像和次視點(diǎn)圖像的合成圖像可被編碼。另外，將被編碼的輸入到圖像數(shù)據(jù)編碼單 元110的立體圖像可以是多視點(diǎn)圖像或單視點(diǎn)圖像。12
相機(jī)參數(shù)確定單元120確定關(guān)于將被編碼的立體圖像的相機(jī)參數(shù)，并且將相機(jī)參 數(shù)輸出到數(shù)據(jù)流插入單元130。多個相機(jī)被需要以獲得立體圖像，并且每個相機(jī)具有不同視 點(diǎn)。由于不同的視點(diǎn)，相機(jī)與相機(jī)之間，相機(jī)信息可以不同，因此，對每一相機(jī)單獨(dú)地設(shè)置相 機(jī)參數(shù)。根據(jù)本發(fā)明的實(shí)施例，相機(jī)參數(shù)確定單元120可將表示每一相機(jī)的焦距、主點(diǎn)和 旋轉(zhuǎn)角/平移的信息確定為相機(jī)參數(shù)。盡管未在圖1中顯示，相機(jī)參數(shù)確定單元120可包 括焦距參數(shù)確定單元、主點(diǎn)參數(shù)確定單元和旋轉(zhuǎn)角參數(shù)確定單元。焦距參數(shù)確定單元確定關(guān)于一個或多個相機(jī)的預(yù)定視角相機(jī)的焦距的信息(以 下，將此信息稱為焦距參數(shù))。相機(jī)參數(shù)確定單元120可包括單獨(dú)的焦距參數(shù)確定單元，以確定主視點(diǎn)相機(jī)的焦 距是否與次視點(diǎn)相機(jī)的焦距不同(以下，將此信息稱為焦距差別參數(shù))。相機(jī)參數(shù)確定單元120可包括焦距寬高比參數(shù)確定單元，以通過使用垂直焦距與 水平焦距之間比例來確定焦距(以下，將該比例稱為焦距寬高比)。此外，相機(jī)參數(shù)確定單元120可包括焦距寬高比使用參數(shù)確定單元，以確定指示 焦距寬高比是否被使用的信息(以下，將此信息稱為焦距寬高比使用參數(shù))。主點(diǎn)參數(shù)確定單元確定關(guān)于立體圖像的預(yù)定視點(diǎn)圖像的主點(diǎn)的信息(以下，將此 信息稱為主點(diǎn)參數(shù))。相機(jī)參數(shù)確定單元120可包括主點(diǎn)信息設(shè)置參數(shù)確定單元，以確定指 示主點(diǎn)信息是否被設(shè)置的信息(以下，將此信息稱為主點(diǎn)信息設(shè)置參數(shù))。旋轉(zhuǎn)角參數(shù)確定單元確定關(guān)于一個或多個相機(jī)的預(yù)定視角相機(jī)的旋轉(zhuǎn)角的信息 (以下，將此信息稱為旋轉(zhuǎn)角參數(shù))。數(shù)據(jù)流插入單元130通過將從圖像數(shù)據(jù)編碼單元110接收的編碼圖像數(shù)據(jù)和從相 機(jī)參數(shù)確定單元120接收的相機(jī)參數(shù)插入數(shù)據(jù)流中來產(chǎn)生立體圖像數(shù)據(jù)流。編碼圖像數(shù)據(jù)和相機(jī)參數(shù)的每一個被插入立體圖像數(shù)據(jù)流中的合適位置。稍后將 參照圖8和圖9來描述插入有圖像數(shù)據(jù)和相機(jī)參數(shù)的立體圖像數(shù)據(jù)流。圖2是根據(jù)本發(fā)明實(shí)施例的立體圖像恢復(fù)設(shè)備的框圖。參照圖2，立體圖像恢復(fù)設(shè)備200包括解析單元210、相機(jī)參數(shù)提取單元220、圖像 數(shù)據(jù)解碼單元230和再現(xiàn)單元M0。解析單元210解析接收的立體圖像數(shù)據(jù)流以將立體圖像的圖像數(shù)據(jù)與關(guān)于該立 體圖像的信息分離。解析單元210將圖像數(shù)據(jù)輸出到圖像數(shù)據(jù)解碼單元230，并且將關(guān)于立 體圖像的信息輸出到相機(jī)參數(shù)提取單元220。相機(jī)參數(shù)提取單元220從解析單元210接收的信息提取相機(jī)參數(shù)。關(guān)于立體圖像 的相機(jī)參數(shù)取決于捕獲了立體圖像的一個或多個相機(jī)的每一相機(jī)的各個特性。提取的相機(jī) 參數(shù)可被輸出到再現(xiàn)單元M0。根據(jù)本發(fā)明實(shí)施例，相機(jī)參數(shù)提取單元220可提取表示每一相機(jī)的焦距、主點(diǎn)和 旋轉(zhuǎn)角/平移的信息，作為相機(jī)參數(shù)。盡管未在圖2中顯示，相機(jī)參數(shù)提取單元220可包括 焦距參數(shù)提取單元、主點(diǎn)參數(shù)提取單元和旋轉(zhuǎn)角參數(shù)提取單元。焦距參數(shù)提取單元提取焦距參數(shù)。相機(jī)參數(shù)提取單元220可包括焦距差別參數(shù)提取單元。相機(jī)參數(shù)提取單元220可 基于由焦距差別參數(shù)提取單元提取的焦距差別參數(shù)，考慮每一視點(diǎn)相機(jī)的焦距是否與另一13視點(diǎn)相機(jī)的焦距相同，來確定是否提取每一視點(diǎn)相機(jī)的焦距。相機(jī)參數(shù)提取單元220可包括焦距寬高比參數(shù)提取單元。相機(jī)參數(shù)提取單元220 可基于由焦距寬高比參數(shù)提取單元提取的焦距寬高比參數(shù)來確定是否提取垂直焦距和水 平焦距的每一個。另外，相機(jī)參數(shù)提取單元220可包括焦距寬高比使用參數(shù)提取單元。相機(jī)參數(shù)提 取單元220可基于由焦距寬高比使用參數(shù)提取單元提取的焦距寬高比使用參數(shù)來確定是 否提取焦距寬高比參數(shù)。主點(diǎn)參數(shù)提取單元提取主點(diǎn)參數(shù)。相機(jī)參數(shù)提取單元220可包括主點(diǎn)信息設(shè)置參 數(shù)提取單元。相機(jī)參數(shù)提取單元220可基于由主點(diǎn)信息設(shè)置提取單元提取的主點(diǎn)信息設(shè)置 參數(shù)來確定是否提取主點(diǎn)參數(shù)。旋轉(zhuǎn)角參數(shù)提取單元提取至少一個視點(diǎn)相機(jī)的旋轉(zhuǎn)角參數(shù)。圖像數(shù)據(jù)解碼單元230對立體圖像的圖像數(shù)據(jù)解碼和恢復(fù)，并將恢復(fù)的立體圖像 輸出到再現(xiàn)單元對0。使用當(dāng)立體圖像被編碼使用使用的壓縮方法來對立體圖像解碼。再現(xiàn)單元240使用圖像參數(shù)來再現(xiàn)恢復(fù)的立體圖像。由于再現(xiàn)單元240使用相 機(jī)參數(shù)并且考慮不同視點(diǎn)相機(jī)之間的相互關(guān)系來再現(xiàn)立體圖像，立體圖像可被更精確地再 現(xiàn)。根據(jù)本發(fā)明實(shí)施例，相機(jī)參數(shù)可以是單個參數(shù)，并且可包括以下參數(shù)中的至少一 個焦距參數(shù)、焦距寬高比參數(shù)、主點(diǎn)參數(shù)、旋轉(zhuǎn)角參數(shù)和平移參數(shù)。焦距參數(shù)、焦距寬高比 參數(shù)和主點(diǎn)參數(shù)是用于單個相機(jī)的參數(shù)，并且被定義為相機(jī)內(nèi)參數(shù)，旋轉(zhuǎn)角參數(shù)和平移參 數(shù)的每一個是關(guān)于多個相機(jī)之間的相互關(guān)系的參數(shù)，并且被定義為相機(jī)外參數(shù)。相機(jī)參數(shù)可被應(yīng)用到各種處理，例如核線約束處理和調(diào)整處理，從而提高3D圖像 的質(zhì)量。稍后將參照圖10至18來描述相機(jī)參數(shù)的使用的特定示例。更詳細(xì)地講，稍后將 參照相應(yīng)附圖來描述下述參數(shù)的使用的示例焦距參數(shù)(圖10至1 、焦距差別參數(shù)(圖 11)、焦距寬高比參數(shù)(圖14和15)、焦距寬高比使用參數(shù)(圖15)、主點(diǎn)參數(shù)(圖16和17)、 主點(diǎn)信息設(shè)置參數(shù)(圖17)和旋轉(zhuǎn)角參數(shù)(圖18)。圖3是顯示世界坐標(biāo)系統(tǒng)300和相機(jī)坐標(biāo)系統(tǒng)350之間的相互關(guān)系的示圖。參照圖3，平移t 305是世界坐標(biāo)系統(tǒng)300和相機(jī)坐標(biāo)系統(tǒng)350之間的距離，并且 世界坐標(biāo)系統(tǒng)300和相機(jī)坐標(biāo)系統(tǒng)350之間旋轉(zhuǎn)角R 355由X、Y和Z軸中的旋轉(zhuǎn)角定義。平移t 305可被認(rèn)為是世界坐標(biāo)系統(tǒng)300的原點(diǎn)和相機(jī)坐標(biāo)系統(tǒng)350的原點(diǎn)之間 的距離。旋轉(zhuǎn)角R 355可通過下述旋轉(zhuǎn)角來確定相機(jī)坐標(biāo)系統(tǒng)350的X軸X。360關(guān)于世 界坐標(biāo)系統(tǒng)300的X軸Xw 310的旋轉(zhuǎn)角；相機(jī)坐標(biāo)系統(tǒng)350的Y軸Y。370關(guān)于世界坐標(biāo)系 統(tǒng)300的Y軸Yw 320的旋轉(zhuǎn)角；相機(jī)坐標(biāo)系統(tǒng)350的Z軸&380關(guān)于世界坐標(biāo)系統(tǒng)300的 Z軸Zw 330的旋轉(zhuǎn)角。旋轉(zhuǎn)角R 350可表示為3X3矩陣。世界坐標(biāo)系統(tǒng)300上的坐標(biāo)MW與相機(jī)坐標(biāo)系統(tǒng)350上的坐標(biāo)Mc之間的對應(yīng)關(guān)系由等式1定義。Mc = IT1 · Mw-IT1 · t ............(1)如果特定點(diǎn)302具有關(guān)于世界坐標(biāo)系統(tǒng)300的坐標(biāo)PW 340，則根據(jù)等式1，坐標(biāo)PW340匹配關(guān)于相機(jī)坐標(biāo)系統(tǒng)350的坐標(biāo)Pc 390。圖4是顯示相機(jī)坐標(biāo)系統(tǒng)400上的特定坐標(biāo)(X，Y，Z)410和圖像420上的坐標(biāo)(X， y, f)430之間的相互關(guān)系的示圖。在圖4中，圖像420與相機(jī)坐標(biāo)系統(tǒng)400的Z軸τ。垂直 排列(與Χ。_Υ。面平行)。相機(jī)坐標(biāo)系統(tǒng)400上的坐標(biāo)(Χ，Υ，Ζ)410對應(yīng)于圖像420上的坐 標(biāo)(χ，y, f)430o參照圖4，坐標(biāo)(X，Y，Z)410與坐標(biāo)(x, y，f)430之間的相互關(guān)系可由比例表達(dá)式 450和從比例表達(dá)式450導(dǎo)出的關(guān)系表達(dá)式460表示。比例表達(dá)式450和關(guān)系表達(dá)式460 可簡化為如下所示的等式2。s · m = A · Mc ............(2)在等式2中，s表示寬高比，m表示圖像420上的坐標(biāo)(x，y，f)430，A表示相機(jī)內(nèi) 參數(shù)，Mc表示相機(jī)坐標(biāo)系統(tǒng)400上的坐標(biāo)(X，Y，Z)410。寬高比s可表示為s = (sx, sy)， 并且相機(jī)內(nèi)參數(shù)A可表示為A = [_f/sx，0，0 ；0，-f/sy,0 ；0，0，1]。s · m = A · (IT1 · Mff-R-1 · t)............(3)世界坐標(biāo)系統(tǒng)上的坐標(biāo)和圖像420上的坐標(biāo)(X，y，f)430之間的相互關(guān)系被顯示 在等式3中。主點(diǎn)是圖像420和光軸的焦點(diǎn)。相機(jī)拍攝的區(qū)域應(yīng)匹配圖像420，因此拍攝的圖像 的中心點(diǎn)應(yīng)匹配圖像420的中心點(diǎn)。然而，可發(fā)生失配。此外，拍攝的區(qū)域的中心點(diǎn)應(yīng)該匹 配圖像420的主點(diǎn)。然而，可再次發(fā)生失配。圖5是顯示拍攝的圖像510上的特定坐標(biāo)(x，y) 540和再現(xiàn)圖像500上的坐標(biāo)(xim， yim)570之間的相互關(guān)系的示圖。參照圖5，如果捕獲的圖像510對應(yīng)于再現(xiàn)的圖像500，則捕獲的圖像510的原點(diǎn) 530對應(yīng)于再現(xiàn)的圖像500的原點(diǎn)(ox，oy) 560，，并且捕獲的圖像510的坐標(biāo)(x，y) 540對 應(yīng)于再現(xiàn)的圖像500的坐標(biāo)(xim，yim)570。如果假設(shè)橫向單元大小是并且縱向單元大小Sy 530，則基于相機(jī)的硬件特 性，坐標(biāo)(X，y)540和坐標(biāo)(xim，yim)570之間的相互關(guān)系可被定義為算術(shù)表達(dá)式505。關(guān)于 y分量，如果關(guān)系表達(dá)式460被代入算術(shù)表達(dá)式505，則關(guān)系表達(dá)式555被導(dǎo)出。關(guān)系表達(dá) 式555表示再現(xiàn)的圖像500和相機(jī)坐標(biāo)系統(tǒng)之間的相互關(guān)系。圖6是顯示立體相機(jī)的平移信息和旋轉(zhuǎn)角信息的表。參照圖6，通過使用兩個坐標(biāo)系統(tǒng)的平移信息和旋轉(zhuǎn)角信息來確定立體相機(jī)的主 視角相機(jī)坐標(biāo)系統(tǒng)和次視角相機(jī)系統(tǒng)之間的相互關(guān)系?，F(xiàn)在將假設(shè)主視角相機(jī)坐標(biāo)系統(tǒng)和 次視角相機(jī)系統(tǒng)具有相同的X軸，并且主視角相機(jī)坐標(biāo)系統(tǒng)與世界坐標(biāo)系統(tǒng)一致來描述主 視角相機(jī)坐標(biāo)系統(tǒng)和次視角相機(jī)系統(tǒng)之間的相互關(guān)系。平移信息表示次視點(diǎn)相機(jī)坐標(biāo)系統(tǒng)與主視點(diǎn)相機(jī)坐標(biāo)系統(tǒng)的距離，因此，主視點(diǎn) 相機(jī)坐標(biāo)系統(tǒng)的平移矩陣是(0，0，0)，次視點(diǎn)相機(jī)坐標(biāo)系統(tǒng)的平移矩陣被表示為t = (tx， ty，tz)。因此，可僅通過使用次視點(diǎn)相機(jī)坐標(biāo)系統(tǒng)的平移矩陣來表示平移信息。假設(shè)主視點(diǎn)相機(jī)系統(tǒng)是世界坐標(biāo)系統(tǒng)來表示次視點(diǎn)相機(jī)坐標(biāo)系統(tǒng)的旋轉(zhuǎn)角。因 此，主視點(diǎn)相機(jī)坐標(biāo)系統(tǒng)的旋轉(zhuǎn)矩陣是I = [1,0,0 ；0,1,0 ；0，0，1]，次視點(diǎn)相機(jī)坐標(biāo)系統(tǒng)的 旋轉(zhuǎn)矩陣被表示為R = f(a, b，c)。因此，可僅使用次視點(diǎn)相機(jī)坐標(biāo)系統(tǒng)來表示旋轉(zhuǎn)信息。通常，旋轉(zhuǎn)信息具有3X3矩陣結(jié)構(gòu)。然而，另一方面，可通過使用關(guān)于x，y和ζ軸的角度來表示旋轉(zhuǎn)信息。也就是，旋轉(zhuǎn)信息可表示為W = R(<p^<py^) = R(<pJ·R(<Py)·R(<pz)”圖7是顯示主視點(diǎn)相機(jī)坐標(biāo)系統(tǒng)700和次視點(diǎn)相機(jī)坐標(biāo)系統(tǒng)750之間的相互關(guān)系 的示圖。參照圖7，通過使用兩個坐標(biāo)系統(tǒng)的平移信息和旋轉(zhuǎn)角信息來表示主視點(diǎn)相機(jī)坐 標(biāo)系統(tǒng)700和次視點(diǎn)相機(jī)坐標(biāo)系統(tǒng)750之間的相互關(guān)系。更詳細(xì)地講，主視點(diǎn)相機(jī)坐標(biāo)系統(tǒng)700的原點(diǎn)通過平移t710被平移到次視點(diǎn)相機(jī) 坐標(biāo)系統(tǒng)750的原點(diǎn)，因此，平移信息被表示為t = (tx，ty，tz)。此外，主視點(diǎn)相機(jī)坐標(biāo)系 統(tǒng)700通過旋轉(zhuǎn)角R 760被旋轉(zhuǎn)到次視點(diǎn)相機(jī)坐標(biāo)系統(tǒng)750，因此旋轉(zhuǎn)角信息被表示為R = f (a，b，c) ο因此，特定坐標(biāo)720被定位在關(guān)于主視點(diǎn)相機(jī)坐標(biāo)系統(tǒng)700的位置P1730，并且被 定位在關(guān)于次視點(diǎn)相機(jī)坐標(biāo)系統(tǒng)750的位置P2740。另外由平移t710和旋轉(zhuǎn)角R760來定 義位置P1730和位置P2740。圖8是示出基于國際標(biāo)準(zhǔn)化組織(ISO)的媒體文件格式800的結(jié)構(gòu)的示圖.參照圖8，基于ISO的媒體文件格式800包括moov框810和mdat框850。關(guān)于音頻和視頻(AV)數(shù)據(jù)的基本頭信息被插入moov框810。moov框810包括各 種框，例如trak框820和825。trak框820和825包括關(guān)于mdat框850中的AV數(shù)據(jù)的存 儲位置的信息。mdat框850包括基本流(ES)的格式的AV數(shù)據(jù)。基于ISO的媒體文件格式 800是根據(jù)運(yùn)動圖像專家組4(MPEG-4)和高級視頻編碼/H. 264(AVC/H. 264)標(biāo)準(zhǔn)廣泛使用 的AV數(shù)據(jù)格式。圖9是示出基于ISO的媒體文件格式的各種框的列表900的示圖。參照圖9，基于ISO的媒體文件格式的框的列表900具有分級結(jié)構(gòu)。ftyp框910、 moov框920、mdat框930、meta框940和其他框950位于上層。ftyp框910包含關(guān)于文件類型和兼容性的信息。為了表示立體圖像數(shù)據(jù)文件格 式，<major_brand,被設(shè)置為'ssav' moov框920是用于定時資源的所有元數(shù)據(jù)的空間。包括在moov框920中的trak 框960是用于各個軌道的信息或者識別主AV數(shù)據(jù)或輔助數(shù)據(jù)的流的空間。包括在trak框 960中的mdia框962是用于軌道中的所有媒體信息的空間。mdat框930是用于媒體數(shù)據(jù)的空間。meta框940是用于元數(shù)據(jù)的空間。根據(jù)本發(fā)明實(shí)施例，scdi框980被插入meta 框940的子層，并且立體相機(jī)信息和立體差異信息被插入scdi框980中。根據(jù)本發(fā)明的另一實(shí)施例，立體相機(jī)信息可被插入下述框中的至少一個中位于 上層的框950、包括在moov框920中的框970、包括在trak框960中的框966、包括在mdia 框962中的框964以及包括在meta框940中的框990。圖10是示出根據(jù)本發(fā)明實(shí)施例的實(shí)現(xiàn)關(guān)于立體圖像的各種參數(shù)的語法1000的示圖。參照圖10，語法1000使用表示立體圖像的視點(diǎn)圖像之間的差異信息的差異信息 參數(shù)、以及表示關(guān)于捕獲了立體圖像的立體相機(jī)的相機(jī)信息的相機(jī)信息參數(shù)1040。為了實(shí) 現(xiàn)根據(jù)本發(fā)明實(shí)施例的相機(jī)參數(shù)，定義在圖9中示出的scdi框980中的語法1000可包括 以下參數(shù)。
‘item_COimt’參數(shù)表示代表立體數(shù)據(jù)的片段的項(xiàng)的數(shù)量。如果多個片段具有相同 的相機(jī)信息和差異信息，則‘item_COimt’參數(shù)可被設(shè)置為具有值‘1’?！甶tem_ID’參數(shù)表示記錄在立體片段的iloc框中的項(xiàng)的標(biāo)識(ID)信息。項(xiàng)的位 置信息被插入iIoc框中?！甶s_item_ID_ref，參數(shù)表示當(dāng)前項(xiàng)是否使用另一項(xiàng)的參數(shù)?！甶s_item_ID_ref， 參數(shù)表示參考項(xiàng)的‘item_ID’參數(shù)。包括在scdi框中的參考項(xiàng)的相機(jī)信息和差異信息必 須可用?！甶s_display_safety_info，參數(shù)表示差異信息是否被插入?！甧xpected_display_ width’參數(shù)和‘expectecLdisplayJieight’參數(shù)分別表示期望的顯示寬度和高度。顯示寬 度/高度或觀看距離可以以毫米定義?！甿in_of_display，參數(shù)和‘max_of_display，參數(shù) 分別表示主視點(diǎn)圖像和次視點(diǎn)圖像的最小差異和最大差異。'is.cam.params'參數(shù)表示相機(jī)信息是否被插入。‘baseline’參數(shù)表示兩個 相機(jī)之間的距離。‘focaljength’參數(shù)表示從光心到圖像平面的距離。‘convergence distance'參數(shù)表示從兩個相機(jī)的中心點(diǎn)到聚焦點(diǎn)的距離。‘is_camera_cr0ss’參數(shù)表示 立體相機(jī)以平行方式排列還是交叉形式排列。立體圖像的數(shù)據(jù)與相機(jī)信息以及關(guān)于立體圖像的差異信息一起被提供，因此，如 果當(dāng)恢復(fù)的立體圖像被再現(xiàn)時相機(jī)信息和差異信息被使用，則立體圖像的3D效果被提高， 并且觀看者可較少地感受到由3D效果引起的疲勞。現(xiàn)在將參照圖11至18來描述圖10中示出的語法1000的相機(jī)信息參數(shù)1040可 被替換的各種類型的語法。圖11是示出根據(jù)本發(fā)明實(shí)施例的實(shí)現(xiàn)關(guān)于立體圖像的相機(jī)焦距參數(shù)的語法1100 的示圖。參照圖11，語法 1100 使用 ‘is_different_focal_length，參數(shù) 1110?！甶s_ different.focal.length'參數(shù)1110是以上參照圖1描述的焦距差別參數(shù)，并且表示主 視點(diǎn)相機(jī)的焦距(以下稱為主焦距)是否與次視點(diǎn)相機(jī)的焦距(以下稱為次焦距)不同。 'primary.focal.length'參數(shù)1120表示主焦距。也就是，主焦距被用作相機(jī)信息。如果if 條件 1130 確定 ‘is_different_focal_length，參數(shù) 1110 具有值 ‘1，，則 ‘SeCOndary_fOCal_length，參數(shù)1140被使用。也就是，如果焦距差別參數(shù)確定主焦距與次 焦距不同，則表示為‘seC0ndary_f0Cal_length，參數(shù)1140的次焦距也被使用。如果if 條件 1130 確定 ‘is_different_focal_length，參數(shù) 1110 具有值 ‘0，，則 ‘SeCOndary_fOCal_length，參數(shù)1140沒有被使用。在這種情況下，焦距差別參數(shù)確定主焦 距與次焦距一致，因此，可僅通過使用主焦距來表示主視點(diǎn)相機(jī)的焦距和次視點(diǎn)相機(jī)的焦 距。盡管未在圖11中顯示，可僅通過使用次焦距來表示主視點(diǎn)相機(jī)的焦距和次視點(diǎn)相機(jī)的 焦距。圖1中示出的立體圖像數(shù)據(jù)流產(chǎn)生設(shè)備100的相機(jī)參數(shù)確定單元120可包括焦距 參數(shù)確定單元，并且焦距參數(shù)確定單元可確定‘primary_f0Cal_length’參數(shù)1120。焦距 參數(shù)確定單元可基于由焦距差別參數(shù)確定單元確定的‘is_different_f0Cal_length，參數(shù) 1110 來確定是否確定 ‘secondary_focal_length，參數(shù) 1140。此外，圖2中示出的立體圖像恢復(fù)設(shè)備200的相機(jī)參數(shù)提取單元220可包括焦距17參數(shù)提取單元，并且焦距參數(shù)提取單元可提取‘primary_f0Cal_length’參數(shù)1120。焦距 參數(shù)提取單元可基于由焦距差別參數(shù)提取單元提取的‘iS_different_f0Cal_length，參數(shù) 1110 來確定是否提取 ‘secondary_focal_length，參數(shù) 1140。圖12是示出根據(jù)本發(fā)明的另一實(shí)施例的實(shí)現(xiàn)關(guān)于立體圖像的相機(jī)焦距參數(shù)的語 法1200的示圖。參照圖12，語法1200不使用在圖11中示出的‘is_different_focal_length，參 數(shù) 1110,而使用 <primary_focal_length'參數(shù) 1220 禾口 <secondary_focal_length,參數(shù) 1240兩者。也就是，主焦距和次焦距被單獨(dú)使用。主視點(diǎn)和次視點(diǎn)可以分別是左視點(diǎn)和右 視點(diǎn)，或者與此相反。如果關(guān)于次焦距的信息沒有被存儲或傳輸，則次焦距被認(rèn)為與主焦距一致。因此，圖1中示出的立體圖像數(shù)據(jù)流產(chǎn)生設(shè)備的相機(jī)參數(shù)確定單元120可包括焦 距參數(shù)確定單元，并且焦距參數(shù)確定單元可確定‘primary_f0Cal_length’參數(shù)1220和 <secondary_focal_length'參數(shù) 1240。此外，圖2中示出的立體圖像恢復(fù)設(shè)備200的相機(jī)參數(shù)提取單元220可包括焦 距參數(shù)提取單元，并且焦距參數(shù)提取單元可提取‘primary_f0Cal_length，參數(shù)1220和 <secondary_focal_length'參數(shù) 1240。圖13是示出根據(jù)本發(fā)明的另一實(shí)施例的實(shí)現(xiàn)關(guān)于立體圖像的相機(jī)焦距參數(shù)的語 法1300的示圖?？赏ㄟ^水平分量和垂直分量來表示焦距。參照圖13，語法 130 使用 ‘hor_focal_length，參數(shù) 1320 和 ‘ver_focal_length， 參數(shù) 1340。‘hor_focal_length，參數(shù) 1320 表示焦距的水平分量，‘ver_focal_length，參 數(shù)1340表示焦距的垂直分量。圖1中示出的立體圖像數(shù)據(jù)流產(chǎn)生設(shè)備100的相機(jī)參數(shù)確定單元120可包括焦 距參數(shù)確定單元，并且焦距參數(shù)確定單元可確定‘h0r_f0Cal_length’參數(shù)1320和‘ver_ focal_length，參數(shù) 1340。此外，圖2中示出的立體圖像恢復(fù)設(shè)備200的相機(jī)參數(shù)提取單元220可包括焦 距參數(shù)提取單元，并且焦距參數(shù)提取單元可提取‘h0r_f0Cal_length’參數(shù)1320和‘ver_ focal_length，參數(shù) 1340。圖14是示出根據(jù)本發(fā)明的另一實(shí)施例的實(shí)現(xiàn)關(guān)于立體圖像的相機(jī)焦距參數(shù)的語 法1400的示圖。如果作為焦距的水平分量和垂直分量之間的寬高比的焦距寬高比被使用，則僅通 過使用水平分量和垂直分量中的一個來表示焦距。參照圖14，語法 1400 使用 ‘hor_focal_length，參數(shù) 1420 和 ‘a(chǎn)spect_ratio，參 數(shù) 1440。‘hor_focal_length，參數(shù) 1420 表示焦距的水平分量，‘a(chǎn)spect_ratio，參數(shù) 1440 表示焦距的寬高比。根據(jù)本發(fā)明的另一實(shí)施例，可使用‘Ver_f0Cal_length’參數(shù)來代替使 用 ‘hor_focal_length，參數(shù) 1420。圖1中示出的立體圖像數(shù)據(jù)流產(chǎn)生設(shè)備100的相機(jī)參數(shù)確定單元120可包括焦距 參數(shù)確定單元和焦距寬高比參數(shù)確定單元。焦距參數(shù)確定單元可確定‘h0r_f0Cal_length’ 參數(shù)1420，并且焦距寬高比參數(shù)確定單元可確定‘a(chǎn)Spect_rati0，參數(shù)1440。
此外，圖2中示出的立體圖像恢復(fù)設(shè)備200的相機(jī)參數(shù)提取單元220可包括焦距 參數(shù)提取單元和焦距寬高比參數(shù)提取單元。焦距參數(shù)提取單元可提取‘h0r_f0Cal_length’ 參數(shù)1420，并且焦距寬高比參數(shù)提取單元可提取‘a(chǎn)Spect_rati0，參數(shù)1440。圖15是示出根據(jù)本發(fā)明的另一實(shí)施例的實(shí)現(xiàn)關(guān)于立體圖像的相機(jī)焦距參數(shù)的語 法1500的示圖。參照圖15，語法 1500 使用 ‘is_aspect_ratio，參數(shù) 1510?！甶s_aspect_ratio，參 數(shù)1510是以上參照圖1描述的焦距寬高比使用參數(shù)，并且表示焦距寬高比是否被使用以表 示焦距。‘h0r_f0Cal_length，參數(shù)1520表示焦距的水平分量。如果if 條件 1530 確定 ‘is_aspect_ratio，參數(shù) 1510 具有值 ‘1，，則 ‘a(chǎn)spect_ ratio’參數(shù)1540被使用。也就是，如果確定焦距寬高比將被使用，則‘a(chǎn)spect^atio’參數(shù) 1540被聲明和使用。如果if 條件 1530 確定 ‘is_aspect_ratio，參數(shù) 1510 具有值 ‘0，，貝丨J ‘a(chǎn)spect_ ratio'參數(shù)1540沒有被單獨(dú)定義。根據(jù)本發(fā)明的實(shí)施例，如果if條件1530確定‘is_ aspect_ratio，參數(shù)1510具有值‘0，，則‘a(chǎn)spect_ratio，參數(shù)1540沒有被單獨(dú)定義并且 被認(rèn)為是具有值‘1’。也就是，如果確定焦距寬高比沒有被使用，則焦距寬高比可被認(rèn)為具 有值‘1’，因此，焦距的水平分量可被確定與焦距的垂直分量一致。圖1中示出的立體圖像數(shù)據(jù)流產(chǎn)生設(shè)備100的相機(jī)參數(shù)確定單元120可包括焦 距參數(shù)確定單元、焦距寬高比參數(shù)確定單元和焦距寬高比使用參數(shù)確定單元。焦距參數(shù)確 定單元可確定‘h0r_f0Cal_length’參數(shù)1520。焦距寬高比參數(shù)確定單元可基于由焦距 寬高比使用參數(shù)確定單元確定的‘is_aspect_rati0’參數(shù)1510來確定是否確定‘a(chǎn)spect_ ratio'參數(shù) 1540。此外，圖2中示出的立體圖像恢復(fù)設(shè)備200的相機(jī)參數(shù)提取單元220可包括焦距 參數(shù)提取單元、焦距寬高比參數(shù)提取單元和焦距寬高比使用參數(shù)提取單元。焦距參數(shù)提取 單元可提取‘h0r_f0Cal_length’參數(shù)1520。焦距寬高比參數(shù)提取單元可基于由焦距寬 高比使用參數(shù)提取單元提取的‘is_aspect_rati0’參數(shù)1510來確定是否提取‘a(chǎn)spect_ ratio'參數(shù) 1540。圖16是示出根據(jù)本發(fā)明的實(shí)施例的實(shí)現(xiàn)關(guān)于立體圖像的相機(jī)主點(diǎn)參數(shù)的語法 1600的示圖。主點(diǎn)是由相機(jī)捕獲的圖像的中心點(diǎn)。主點(diǎn)被單獨(dú)表示在每一視點(diǎn)圖像中，并且可 通過使用X分量和y分量來表示。根據(jù)本發(fā)明實(shí)施例，主視點(diǎn)圖像和次視點(diǎn)圖像可分別是 左視點(diǎn)圖像和右視點(diǎn)圖像。參照圖16，語法 1600 使用 ‘primary_principal_x，參數(shù) 1640、'primary, principal_y'參數(shù) 1650、<secondary_principal_x'參數(shù) 1660 禾口 'secondary—principal— I'參數(shù)1670。‘primary_principal_X，參數(shù)1640表示主視點(diǎn)圖像的主點(diǎn)的χ分量， ‘primary_principal_y，參數(shù)1650表示主視點(diǎn)圖像的主點(diǎn)的y分量，'secondary, principal_x’參數(shù)1660表示次視點(diǎn)圖像的主點(diǎn)的χ分量，‘secondary_principal_y’參數(shù) 1670表示次視點(diǎn)圖像的主點(diǎn)的y分量。圖1中示出的立體圖像數(shù)據(jù)流產(chǎn)生設(shè)備100的相機(jī)參數(shù)確定單元120可包括主點(diǎn) 參數(shù)確定單元。主點(diǎn)參數(shù)確定單元可確定‘primary_principal_x’參數(shù)1640、'primary.19principal_y‘參數(shù) 1650、<secondary_principal_x'參數(shù) 1660 禾口 'secondary—principal— y，參數(shù) 1670。此外，圖2中示出的立體圖像恢復(fù)設(shè)備200的相機(jī)參數(shù)提取單元220可包括主點(diǎn) 參數(shù)提取單元。主點(diǎn)參數(shù)提取單元可提取‘primary_principal_X’參數(shù)1640、'primary, principal_y'參數(shù) 1650、<secondary_principal_x'參數(shù) 1660 禾口 'secondary—principal— y，參數(shù) 1670。圖17是示出根據(jù)本發(fā)明的另一實(shí)施例的實(shí)現(xiàn)關(guān)于立體圖像的相機(jī)主點(diǎn)參數(shù)的語 法1700的示圖。參照圖17，語法 1700 使用 ‘is_principal_point，參數(shù) 1710。‘is_principal_ point'參數(shù)1710是以上參照圖1描述的主點(diǎn)信息設(shè)置參數(shù)，表示主點(diǎn)信息是否被設(shè)置，并 且定義當(dāng)圖像的主點(diǎn)與相機(jī)的中心點(diǎn)不同的情況。如果if 條件 1730 確定 ‘ is_principal_point，參數(shù) 1710 具有值 ‘ 1，，貝丨J 'primary, principal_x'參數(shù) 1740、<primary_principal_y'參數(shù) 1750、<secondary_principal_x'參 數(shù)1760和‘secondary_principal_y’參數(shù)1770被使用。也就是，如果確定主點(diǎn)信息將被使 用，貝1J ‘primary—principal—x’參數(shù) 1740、‘primary—principal—y’ 參數(shù) 1750、‘secondary— principal_x'參數(shù) 1760 禾口 <secondary_principal_y,參數(shù) 1770 被聲明禾口使用。如果if 條件 1730 確定 ‘is_principal_point，參數(shù) 1710 具有值 ‘0，，則 ‘primary_ principal_x'參數(shù) 1740、<primary_principal_y'參數(shù) 1750、<secondary_principal_x' 參數(shù)1760和‘secondary_principal_y，參數(shù)1770不被單獨(dú)聲明和定義。根據(jù)本發(fā)明實(shí) 施例，如果 if 條件 1730 確定 ‘is_principal_point，參數(shù) 1710 具有值 ‘0，，則'primary, principal_x'參數(shù) 1740、<primary_principal_y'參數(shù) 1750、<secondary_principal_x' 參數(shù)1760和‘secondary_principal_y’參數(shù)1770不被單獨(dú)定義，并且沒有視點(diǎn)相機(jī)的中 心點(diǎn)被認(rèn)為匹配每一視點(diǎn)圖像的主點(diǎn)。圖1中示出的立體圖像數(shù)據(jù)流產(chǎn)生設(shè)備100的相機(jī)參數(shù)確定單元120可包括主 點(diǎn)參數(shù)確定單元和主點(diǎn)信息設(shè)置參數(shù)確定單元。主點(diǎn)參數(shù)確定單元可基于由主點(diǎn)信息設(shè) 置參數(shù)確定單元確定的‘is_principal_point’參數(shù)1710來確定‘primary_principal_x’ 參數(shù) 1740、<primary_principal_y'參數(shù) 1750、<secondary_principal_x'參數(shù) 1760 禾口 <secondary_principal_y' 1770。此外，圖2中示出的立體圖像恢復(fù)設(shè)備200的相機(jī)參數(shù)提取單元220可包括主點(diǎn) 參數(shù)提取單元和主點(diǎn)信息設(shè)置參數(shù)提取單元。主點(diǎn)參數(shù)提取單元可基于由主點(diǎn)信息設(shè)置 參數(shù)提取單元提取的 ‘is_principal_point，參數(shù) 1710 來提取 ‘primary_principal_x’ 參數(shù) 1740、<primary_principal_y'參數(shù) 1750、<secondary_principal_x'參數(shù) 1760 禾口 <secondary_principal_y' 1770。圖18是示出根據(jù)本發(fā)明的實(shí)施例的實(shí)現(xiàn)關(guān)于立體圖像的相機(jī)旋轉(zhuǎn)角參數(shù)的語法 1800的示圖。參照圖18，語法1800使用旋轉(zhuǎn)參數(shù)。旋轉(zhuǎn)參數(shù)表示旋轉(zhuǎn)角信息，并且可由x、y和 ζ方向行的三個角度來表示。此外，旋轉(zhuǎn)參數(shù)可被表示為3X3矩陣的‘rotation[3] [3]’， 或者可表示為九比特陣列的‘rotation[9]’。盡管未在圖18中顯示，語法1800還可使用平移參數(shù)。平移參數(shù)可表示‘translation^] ’形式的主視點(diǎn)相機(jī)坐標(biāo)系統(tǒng)和次視點(diǎn)相機(jī)坐標(biāo)系統(tǒng)之間的距離。因此，圖1中示出的立體圖像數(shù)據(jù)流產(chǎn)生設(shè)備100的相機(jī)參數(shù)確定單元120可包 括旋轉(zhuǎn)角參數(shù)確定單元，并且旋轉(zhuǎn)角參數(shù)確定單元可確定‘rotation[9]’ 1820。此外，圖2中示出的立體圖像恢復(fù)設(shè)備200的相機(jī)參數(shù)提取單元220可包括旋轉(zhuǎn) 角參數(shù)提取單元，并且旋轉(zhuǎn)角參數(shù)提取單元可提取‘rotation [9]’參數(shù)1820。圖19是根據(jù)本發(fā)明的實(shí)施例的使用立體圖像數(shù)據(jù)流產(chǎn)生方法的立體圖像文件產(chǎn) 生系統(tǒng)的框圖。參照圖19，立體圖像文件產(chǎn)生系統(tǒng)1900包括主視點(diǎn)相機(jī)1902、次視點(diǎn)相機(jī)1904、 立體/單視點(diǎn)圖像相機(jī)1906、輸入單元1910、圖像信號處理單元1920、存儲單元1930、編碼 單元1940和文件產(chǎn)生單元1960。主視點(diǎn)相機(jī)1902和次視點(diǎn)相機(jī)1904在主視點(diǎn)和次視點(diǎn)拍攝預(yù)定對象，以便輸出 不同的主視點(diǎn)圖像和次視點(diǎn)圖像。如果立體圖像文件產(chǎn)生系統(tǒng)1900還捕獲單視點(diǎn)圖像，則 單視點(diǎn)圖像從立體/單視點(diǎn)圖像相機(jī)1906輸出。從主視點(diǎn)相機(jī)1902和次視點(diǎn)相機(jī)1904 以及立體/單視點(diǎn)圖像相機(jī)1906的每一個輸出的圖像被輸入到輸入單元1910。輸入到輸入單元1910的圖像被圖像信號處理單元1920預(yù)處理。例如，作為模擬 值的外部圖像值被轉(zhuǎn)換為數(shù)字值。這里，術(shù)語“外部圖像值”表示由電荷耦合(CCD)型或互 補(bǔ)金屬氧化物半導(dǎo)體(CM0Q型的傳感器識別的光和色彩的分量。存儲單元1930存儲預(yù)處理圖像的圖像數(shù)據(jù)，并將圖像數(shù)據(jù)提供給編碼單元1940。 盡管存儲單元1930被單獨(dú)示出，則立體圖像文件產(chǎn)生系統(tǒng)1900還可包括用于在立體圖像 文件產(chǎn)生系統(tǒng)1900的其他部件之間進(jìn)行緩沖的其他存儲元件(而不是存儲單元1930)。編碼單元1940對從存儲單元1930接收的圖像數(shù)據(jù)編碼。如果必要，可省略編碼 單元1940對圖像數(shù)據(jù)的編碼。文件產(chǎn)生單元1960將圖像相關(guān)性信息1950和從編碼單元1940接收的(編碼) 圖像數(shù)據(jù)插入預(yù)定文件格式中，以便產(chǎn)生圖像文件1970。圖像相關(guān)性信息1950可包括用于 表示圖像之間的相關(guān)性的軌跡框的參考信息、以及用于表示每一圖像的媒體類型的處理器 fn息ο此外，圖像相關(guān)性信息1950可包括二維QD)圖像相關(guān)信息和3D圖像相關(guān)信息。 3D圖像相關(guān)信息表示主視點(diǎn)圖像和次視點(diǎn)圖像之間的相關(guān)性，并且可包括關(guān)于2D/3D數(shù)據(jù) 部分的信息、關(guān)于主視點(diǎn)圖像和次視點(diǎn)圖像的排列方法的信息、關(guān)于圖像文件類型的信息、 相機(jī)參數(shù)、顯示信息和差異信息。根據(jù)本發(fā)明的實(shí)施例，文件產(chǎn)生單元1960可將圖像數(shù)據(jù)和圖像相關(guān)性信息1950 分別存儲在圖像文件1970的媒體數(shù)據(jù)區(qū)域和頭區(qū)域中。如果圖像文件1970是基于ISO的 媒體文件格式，則圖像數(shù)據(jù)可被存儲在mdat框中的基本流的格式中，并且圖像相關(guān)性信息 1950可被存儲在trak框或trak框的子級框中。圖像文件1970被輸入或發(fā)送到3D圖像文件再現(xiàn)設(shè)備。圖20是示出根據(jù)本發(fā)明的實(shí)施例的使用立體圖像恢復(fù)方法的立體圖像恢復(fù)/再 現(xiàn)系統(tǒng)的框圖。參照圖20，立體圖像恢復(fù)/再現(xiàn)系統(tǒng)2000包括文件解析單元2020、解碼單元 2030、存儲單元2040、再現(xiàn)單元2050和顯示單元2060。
文件解析單元2020解析接收的圖像文件2010。在存儲在ftyp框、moov框、trak 框和meta框的每個中的信息被解析之后，存儲在mdat框中的圖像數(shù)據(jù)可被提取。主視點(diǎn) 圖像數(shù)據(jù)2022、次視點(diǎn)圖像數(shù)據(jù)20M和立體/單視點(diǎn)圖像數(shù)據(jù)20 可被提取作為圖像數(shù) 據(jù)。通過解析圖像文件2010，圖像數(shù)據(jù)相關(guān)信息20 也可被提取。圖像數(shù)據(jù)相關(guān)信息20 可包括圖像之間的相關(guān)性信息，例如關(guān)于相關(guān)軌跡的trak參考信息。解碼單元2030接收包括從圖像文件2010提取的主視點(diǎn)圖像數(shù)據(jù)2022、次視點(diǎn)圖 像數(shù)據(jù)20M和立體/單視點(diǎn)圖像數(shù)據(jù)20 的圖像數(shù)據(jù)，并對該圖像數(shù)據(jù)解碼。只有當(dāng)圖 像文件2010中的圖像數(shù)據(jù)已經(jīng)被編碼時才執(zhí)行解碼。存儲單元2040接收并存儲從解碼單 元2030輸出的(解碼)圖像數(shù)據(jù)2035以及由文件解析單元2020提取的圖像數(shù)據(jù)相關(guān)信 息 2(^8。再現(xiàn)單元2050從存儲單元2040接收圖像再現(xiàn)相關(guān)信息2048以及將被再現(xiàn)的圖 像數(shù)據(jù)，以便再現(xiàn)圖像。需要圖像再現(xiàn)相關(guān)信息2048來從圖像數(shù)據(jù)相關(guān)信息20 中再現(xiàn) 圖像，并且圖像再現(xiàn)相關(guān)信息2048包括圖像相關(guān)性信息。
再現(xiàn)單元2050可通過使用圖像再現(xiàn)相關(guān)信息2048以2D或3D圖像再現(xiàn)方法來再 現(xiàn)圖像數(shù)據(jù)2045。例如，再現(xiàn)單元2050可通過參照圖像數(shù)據(jù)標(biāo)識信息來組合和再現(xiàn)相關(guān)立 體圖像。此外，再現(xiàn)單元2050可通過參照圖像數(shù)據(jù)標(biāo)識信息和2D/3D數(shù)據(jù)部分信息來一起 再現(xiàn)相關(guān)立體圖像和單視點(diǎn)圖像。顯示單元2060可將由再現(xiàn)單元2050再現(xiàn)的圖像顯示在屏幕上。顯示單元2060 可以是柵欄液晶顯示器(IXD)。當(dāng)柵欄IXD被關(guān)閉時單視點(diǎn)圖像可被顯示，并且當(dāng)柵欄IXD 被打開時，立體圖像的視點(diǎn)圖像都可被同時顯示。圖21是示出根據(jù)本發(fā)明的實(shí)施例的立體圖像數(shù)據(jù)流產(chǎn)生方法的流程圖。參照圖21，在操作2110，立體圖像的圖像數(shù)據(jù)被編碼。在操作2120，基于捕獲了立體圖像的一個或多個相機(jī)的每一個的各個特性來確定 相機(jī)參數(shù)。相機(jī)參數(shù)可包括焦距相關(guān)參數(shù)、主點(diǎn)相關(guān)參數(shù)、平移參數(shù)、旋轉(zhuǎn)角參數(shù)和寬高比 參數(shù)。焦距相關(guān)參數(shù)可包括焦距信息、指示視點(diǎn)相機(jī)的焦距彼此不同的信息、以及指示焦距 是否由寬高比表示的信息。除了相機(jī)的主點(diǎn)之外，主點(diǎn)相關(guān)參數(shù)可包括主點(diǎn)信息、以及指示 是否單獨(dú)地設(shè)置圖像的主點(diǎn)的信息。在操作2130，編碼圖像數(shù)據(jù)和相機(jī)參數(shù)被插入數(shù)據(jù)流中。例如，如果數(shù)據(jù)流具有 基于ISO的媒體文件格式，則圖像數(shù)據(jù)可被插入mdat框，相機(jī)參數(shù)可被插入moov框的子級 框，trak框、trak框的子級框、meta框或者meta框的子級框。圖22是示出根據(jù)本發(fā)明的實(shí)施例的立體圖像恢復(fù)方法的流程圖。參照圖22，在操作2210，從接收的數(shù)據(jù)流中解析立體圖像的圖像數(shù)據(jù)和關(guān)于立體 圖像的信息。例如，如果數(shù)據(jù)流具有基于ISO的媒體文件格式，可從mdat框中解析圖像數(shù) 據(jù)，并且可從moov框的子級框，trak框、trak框的子級框、meta框或者meta框的子級框中 解析關(guān)于立體圖像的信息。在操作2220，提取取決于捕獲了立體圖像的一個或多個相機(jī)的每一個的各個特性 的相機(jī)參數(shù)。相機(jī)參數(shù)可包括焦距相關(guān)參數(shù)、主點(diǎn)相關(guān)參數(shù)、平移參數(shù)、旋轉(zhuǎn)角參數(shù)和寬高 比參數(shù)。此外，焦距寬高比使用參數(shù)、焦距差別參數(shù)以及主點(diǎn)信息設(shè)置參數(shù)可被提取。在操作2230，立體圖像的圖像數(shù)據(jù)被解碼和恢復(fù)。
在操作2240，通過使用相機(jī)參數(shù)來再現(xiàn)立體圖像的圖像數(shù)據(jù)。通過使用相機(jī)參數(shù) 來將每一視點(diǎn)圖像在合適的時間和位置再現(xiàn)和顯示，因此可將更精確的2D或3D圖像提供 給用戶。本發(fā)明的實(shí)施例可被編寫為計(jì)算機(jī)程序，并且可以使用計(jì)算機(jī)可讀記錄介質(zhì)在執(zhí) 行程序的通用數(shù)字計(jì)算機(jī)中被執(zhí)行。計(jì)算機(jī)可讀記錄介質(zhì)的示例包括磁存儲介質(zhì)(例如， ROM、軟盤、硬盤等)、光學(xué)記錄介質(zhì)(例如，CD-ROM或DVD)等。盡管已經(jīng)參照其示例性實(shí)施例具體顯示和描述了本發(fā)明，但是本領(lǐng)域的普通技術(shù) 人員應(yīng)該理解，在不脫離由權(quán)利要求限定的本發(fā)明的精神和范圍的情況下，可以對其進(jìn)行 形式和細(xì)節(jié)上的各種改變。
權(quán)利要求
1.一種立體圖像恢復(fù)方法，包括將接收的圖像流解析為立體圖像的圖像數(shù)據(jù)和關(guān)于立體圖像的信息；提取表示捕獲了立體圖像的一個或多個相機(jī)的每一個的各個特性的相機(jī)參數(shù)；解碼并恢復(fù)立體圖像的圖像數(shù)據(jù)。
2.如權(quán)利要求1所述的立體圖像恢復(fù)方法，其中，解碼和恢復(fù)的步驟包括基于相機(jī)參 數(shù)來再現(xiàn)立體圖像的圖像數(shù)據(jù)。
3.如權(quán)利要求1所述的立體圖像恢復(fù)方法，其中，提取相機(jī)參數(shù)的步驟包括提取主焦 距參數(shù)和次焦距參數(shù)，其中，主焦距參數(shù)表示一個或多個相機(jī)的主視點(diǎn)相機(jī)的焦距，次焦距 參數(shù)表示一個或多個相機(jī)的次視點(diǎn)相機(jī)的焦距。
4.如權(quán)利要求1所述的立體圖像恢復(fù)方法，其中，提取相機(jī)參數(shù)的步驟包括提取焦距 差別參數(shù)，其中，焦距差別參數(shù)指示一個或多個相機(jī)的主視點(diǎn)相機(jī)的主焦距是否與一個或 多個相機(jī)的次視點(diǎn)相機(jī)的次焦距不同。
5.如權(quán)利要求4所述的立體圖像恢復(fù)方法，其中，如果焦距差別參數(shù)指示主焦距與次 焦距一致，則提取相機(jī)參數(shù)的步驟還包括提取主焦距參數(shù)和次焦距參數(shù)中的一個，其中， 主焦距參數(shù)表示主焦距，次焦距參數(shù)表示次焦距。
6.如權(quán)利要求4所述的立體圖像恢復(fù)方法，其中，如果焦距差別參數(shù)指示主焦距與次 焦距不同，則提取相機(jī)參數(shù)的步驟還包括提取主焦距參數(shù)和次焦距參數(shù)，其中，主焦距參 數(shù)表示主焦距，次焦距參數(shù)表示次焦距。
7.如權(quán)利要求1所述的立體圖像恢復(fù)方法，其中，提取相機(jī)參數(shù)的步驟包括提取水平 焦距參數(shù)和垂直焦距參數(shù)，其中，水平焦距參數(shù)表示一個或多個相機(jī)的預(yù)定視點(diǎn)相機(jī)的焦 距的水平分量，垂直焦距參數(shù)表示預(yù)定視點(diǎn)相機(jī)的焦距的垂直分量。
8.如權(quán)利要求1所述的立體圖像恢復(fù)方法，其中，提取相機(jī)參數(shù)的步驟包括提取焦距寬高比參數(shù)，其中，焦距寬高比參數(shù)表示一個或多個相機(jī)的預(yù)定視點(diǎn)相機(jī)的 焦距的水平分量和垂直分量之間的寬高比；提取水平焦距參數(shù)和垂直焦距參數(shù)中的一個，其中，水平焦距參數(shù)表示焦距的水平分 量，垂直焦距參數(shù)表示焦距的垂直分量。
9.如權(quán)利要求1所述的立體圖像恢復(fù)方法，其中，提取相機(jī)參數(shù)的步驟包括提取焦距 寬高比使用參數(shù)，其中，焦距寬高比使用參數(shù)指示關(guān)于一個或多個相機(jī)的預(yù)定視點(diǎn)相機(jī)的 焦距的信息是否基于焦距的水平分量和垂直分量之間的寬高比設(shè)置。
10.如權(quán)利要求9所述的立體圖像恢復(fù)方法，其中，如果焦距寬高比使用參數(shù)指示焦距 的水平分量和垂直分量之間的寬高比被使用，則提取相機(jī)參數(shù)的步驟還包括提取焦距寬 高比參數(shù)，其中，焦距寬高比參數(shù)表示焦距的水平分量和垂直分量之間的寬高比。
11.如權(quán)利要求9所述的立體圖像恢復(fù)方法，其中，如果焦距寬高比使用參數(shù)指示焦距 的水平分量和垂直分量之間的寬高比沒有被使用，則提取相機(jī)參數(shù)的步驟還包括確定焦 距的水平分量和垂直分量之間的寬高比具有值‘1’。
12.如權(quán)利要求1所述的立體圖像恢復(fù)方法，其中，提取相機(jī)參數(shù)的步驟包括提取基 本主點(diǎn)參數(shù)和次主點(diǎn)參數(shù)，其中，基本主點(diǎn)參數(shù)表示立體圖像的主視點(diǎn)圖像的主點(diǎn)，次主點(diǎn) 參數(shù)表示立體圖像的次視點(diǎn)圖像的主點(diǎn)。
13.如權(quán)利要求12所述的立體圖像恢復(fù)方法，其中，提取相機(jī)參數(shù)的步驟包括對于χ分量和y分量提取基本主點(diǎn)參數(shù)和次主點(diǎn)參數(shù)的每一個。
14.如權(quán)利要求1所述的立體圖像恢復(fù)方法，其中，提取相機(jī)參數(shù)的步驟包括提取主 點(diǎn)信息設(shè)置參數(shù)，其中，主點(diǎn)信息設(shè)置參數(shù)指示關(guān)于立體圖像的主視點(diǎn)圖像的主點(diǎn)和次視 點(diǎn)圖像的主點(diǎn)的每一個的信息是否被設(shè)置的信息。
15.如權(quán)利要求14所述的立體圖像恢復(fù)方法，其中，如果主點(diǎn)信息設(shè)置參數(shù)指示關(guān)于 主點(diǎn)的信息被設(shè)置，則提取相機(jī)參數(shù)的步驟還包括提取基本主點(diǎn)參數(shù)和次主點(diǎn)參數(shù)，其 中，基本主點(diǎn)參數(shù)表示立體圖像的主視點(diǎn)圖像的主點(diǎn)，次主點(diǎn)參數(shù)表示立體圖像的次視點(diǎn) 圖像的主點(diǎn)，其中，對于χ分量和y分量提取基本主點(diǎn)參數(shù)和次主點(diǎn)參數(shù)的每一個。
16.如權(quán)利要求14所述的立體圖像恢復(fù)方法，其中，如果主點(diǎn)信息設(shè)置參數(shù)指示關(guān)于 主點(diǎn)的信息沒有被設(shè)置，則提取相機(jī)參數(shù)的步驟還包括確定由一個或多個相機(jī)的預(yù)定視 點(diǎn)相機(jī)拍攝的區(qū)域的中心點(diǎn)匹配立體圖像的預(yù)定視點(diǎn)圖像的主點(diǎn)。
17.如權(quán)利要求1所述的立體圖像恢復(fù)方法，其中，提取相機(jī)參數(shù)的步驟包括在一個 或多個相機(jī)的預(yù)定視點(diǎn)相機(jī)的旋轉(zhuǎn)角中，提取χ軸旋轉(zhuǎn)角參數(shù)、y軸旋轉(zhuǎn)角參數(shù)和ζ軸旋轉(zhuǎn) 角參數(shù)，其中，χ軸旋轉(zhuǎn)角參數(shù)表示關(guān)于χ軸的旋轉(zhuǎn)角，y軸旋轉(zhuǎn)角參數(shù)表示關(guān)于y軸的旋轉(zhuǎn) 角，ζ軸旋轉(zhuǎn)角參數(shù)表示關(guān)于ζ軸的旋轉(zhuǎn)角。
18.如權(quán)利要求17所述的立體圖像恢復(fù)方法，其中，提取相機(jī)參數(shù)的步驟包括提取旋 轉(zhuǎn)角參數(shù)，其中，關(guān)于χ軸的旋轉(zhuǎn)角、關(guān)于y軸的旋轉(zhuǎn)角和關(guān)于ζ軸的旋轉(zhuǎn)角被表示為3X3 矩陣和九位陣列之一。
19.如權(quán)利要求1所述的立體圖像恢復(fù)方法，其中，如果數(shù)據(jù)流是基于國際標(biāo)準(zhǔn)化組織 ISO的媒體文件格式，則基于ISO的媒體文件格式包括moov框、mdat框和第一 meta框，其中，解析步驟包括從下述框中的至少一個中提取相機(jī)參數(shù)第一 meta框的子級框、moov框的第一子級 框、作為moov框的第二子級框的trak框的第一子級框以及作為trak框的第二子級框的第 二 meta框的子級框；從mdat框中提取立體圖像的圖像數(shù)據(jù)。
20.—種立體圖像數(shù)據(jù)流產(chǎn)生方法，包括 對立體圖像的圖像數(shù)據(jù)編碼；基于捕獲了立體圖像的一個或多個相機(jī)的每一個的各個特性來確定相機(jī)參數(shù)； 將圖像數(shù)據(jù)和相機(jī)參數(shù)插入到數(shù)據(jù)流中。
21.如權(quán)利要求20所述的立體圖像數(shù)據(jù)流產(chǎn)生方法，其中，確定相機(jī)參數(shù)的步驟包括 確定焦距差別參數(shù)，其中，焦距差別參數(shù)指示一個或多個相機(jī)的主視點(diǎn)相機(jī)的主焦距是否與一個或多個相機(jī)的次視點(diǎn)相機(jī)的次焦距不同；基于焦距差別參數(shù)確定主焦距參數(shù)和次焦距參數(shù)中的至少一個，其中，主焦距參數(shù)表 示主焦距，次焦距參數(shù)表示次焦距。
22.如權(quán)利要求20所述的立體圖像數(shù)據(jù)流產(chǎn)生方法，其中，確定相機(jī)參數(shù)的步驟包括 確定焦距寬高比參數(shù)，其中，焦距寬高比參數(shù)表示一個或多個相機(jī)的預(yù)定視點(diǎn)相機(jī)的焦距的水平分量和垂直分量之間的寬高比；確定水平焦距參數(shù)和垂直焦距參數(shù)中的一個，其中，水平焦距參數(shù)表示焦距的水平分量，垂直焦距參數(shù)表示焦距的垂直分量。
23.如權(quán)利要求22所述的立體圖像數(shù)據(jù)流產(chǎn)生方法，其中，確定相機(jī)參數(shù)的步驟還包 括確定焦距寬高比使用參數(shù)，其中，焦距寬高比使用參數(shù)指示是否基于焦距的水平分量和 垂直分量之間的寬高比設(shè)置關(guān)于焦距的信息，其中，確定焦距寬高比參數(shù)的步驟包括如果焦距寬高比使用參數(shù)指示焦距的水平分 量和垂直分量之間的寬高比被使用，則確定表示焦距的水平分量和垂直分量之間的寬高比 的焦距寬高比參數(shù)。
24.如權(quán)利要求20所述的立體圖像數(shù)據(jù)流產(chǎn)生方法，其中，確定相機(jī)參數(shù)的步驟包括 確定主點(diǎn)信息設(shè)置參數(shù)，其中，主點(diǎn)信息設(shè)置參數(shù)指示關(guān)于立體圖像的主視點(diǎn)圖像的主點(diǎn)和次視點(diǎn)圖像的主點(diǎn)的每一個的信息是否被設(shè)置；確定基本主點(diǎn)參數(shù)和次主點(diǎn)參數(shù)，其中，基本主點(diǎn)參數(shù)表示立體圖像的主視點(diǎn)圖像的 主點(diǎn)，次主點(diǎn)參數(shù)表示立體圖像的次視點(diǎn)圖像的主點(diǎn)。
25.一種其上記載有用于執(zhí)行立體圖像恢復(fù)方法的計(jì)算機(jī)程序的計(jì)算機(jī)可讀記錄介 質(zhì)，該方法包括將接收的圖像流解析為立體圖像的圖像數(shù)據(jù)和關(guān)于立體圖像的信息； 提取表示捕獲了立體圖像的一個或多個相機(jī)的每一個的各個特性的相機(jī)參數(shù)； 解碼并恢復(fù)立體圖像的圖像數(shù)據(jù)。
26.一種在其上記載有用于執(zhí)行立體圖像數(shù)據(jù)流產(chǎn)生方法的計(jì)算機(jī)程序的計(jì)算機(jī)可讀 記錄介質(zhì)，該方法包括對立體圖像的圖像數(shù)據(jù)編碼；基于捕獲了立體圖像的一個或多個相機(jī)的每一個的各個特性來確定相機(jī)參數(shù)； 將圖像數(shù)據(jù)和相機(jī)參數(shù)插入到數(shù)據(jù)流中。
全文摘要
提供了一種對立體圖像和編碼和解碼的方法和設(shè)備。立體圖像恢復(fù)方法包括將接收的圖像流解析為立體圖像的圖像數(shù)據(jù)和關(guān)于立體圖像的信息；提取表示捕獲了立體圖像的一個或多個相機(jī)的每一個的各個特性的相機(jī)參數(shù)；解碼并恢復(fù)立體圖像的圖像數(shù)據(jù)。
文檔編號H04N13/00GK102047668SQ200980119332
公開日2011年5月4日 申請日期2009年3月26日 優(yōu)先權(quán)日2008年5月27日
發(fā)明者李健日, 金大式, 金容臺 申請人:三星電子株式會社