用于多視角視頻編碼的裝置制造方法及圖紙

提供了用于多視角視頻編碼的裝置。一種視頻編碼器包括編碼器（100），該編碼器用于通過(guò)在時(shí)間預(yù)測(cè)和交叉視角預(yù)測(cè)之間進(jìn)行選擇以實(shí)現(xiàn)對(duì)圖片的塊的預(yù)測(cè)來(lái)對(duì)該塊進(jìn)行編碼。該圖片是與多視角視頻內(nèi)容相對(duì)應(yīng)并且具有關(guān)于相同或相似場(chǎng)景的不同視角點(diǎn)的一組圖片之一。該圖片代表不同視角點(diǎn)之一。高級(jí)別語(yǔ)法被用于指示對(duì)該塊使用交叉視角預(yù)測(cè)。

【技術(shù)實(shí)現(xiàn)步驟摘要】

本專利技術(shù)一般地涉及視頻編碼器和解碼器，更具體而言涉及用于多視角視頻編碼的方法和裝置。
技術(shù)介紹
多視角視頻編碼(Mult1-view video coding,MVC)是用于多視角序列的編碼的壓縮框架。多視角視頻編碼(MVC)序列是從不同視角點(diǎn)(viewpoint)捕捉相同場(chǎng)景的兩個(gè)或更多個(gè)視頻序列的集合。已經(jīng)廣泛認(rèn)識(shí)到的是，多視角視頻編碼是為包括自由視角點(diǎn)和3D視頻應(yīng)用、家庭娛樂(lè)和監(jiān)視在內(nèi)的多種應(yīng)用服務(wù)的關(guān)鍵技術(shù)。在這些多視角應(yīng)用中，所涉及的視頻數(shù)據(jù)的量是巨大的。因此，需要高效的壓縮技術(shù)來(lái)提高當(dāng)前的執(zhí)行獨(dú)立視角的同時(shí)聯(lián)播的視頻編碼方案的編碼效率。近年來(lái),在設(shè)計(jì)用于壓縮立體視頻(stereoscopic video)的高效方法方面已經(jīng)投入了許多精力。傳統(tǒng)的平面壓縮(monoscopic compression)方法可以被獨(dú)立地應(yīng)用到立體圖像對(duì)的左視角和右視角。但是，如果利用視角之間的高相關(guān)性，則可以實(shí)現(xiàn)更高的壓縮率。關(guān)于一種對(duì)立體圖像對(duì)的兩個(gè)視角都進(jìn)行編碼的現(xiàn)有技術(shù)方法，在國(guó)際標(biāo)準(zhǔn)化組織/國(guó)際電工委員會(huì)(IS0/IEC)運(yùn)動(dòng)圖片專家組-2 (MPEG-2)標(biāo)準(zhǔn)中定義了多視角規(guī)范(Mult1-View Profile，MVP)來(lái)傳送一對(duì)視頻信號(hào)。MVP依賴于多層信號(hào)表示方法，從而一個(gè)視角(通常是左視角)被分配到基本層，而另一視角被分配到增強(qiáng)層。以相同工具作為主規(guī)范(MP)的平面編碼被應(yīng)用到基本層。增強(qiáng)層是利用時(shí)間可縮放性工具以及運(yùn)動(dòng)(motion)和視差(di sparity )場(chǎng)的混合預(yù)測(cè)來(lái)編碼的。在涉及國(guó)際標(biāo)準(zhǔn)化組織/國(guó)際電工委員會(huì)(IS0/IEC)運(yùn)動(dòng)圖片專家組-4(MPEG_4)第10部分高級(jí)視頻編碼(AVC)標(biāo)準(zhǔn)/國(guó)際電信聯(lián)盟電信部(ITU-T) H.264推薦(以下稱為“MPEG-4AVC標(biāo)準(zhǔn)”)的現(xiàn)有技術(shù)方法中，立體視頻編碼可以以兩種不同的方式來(lái)執(zhí)行:(i)作為交織圖像編碼的特定情況來(lái)執(zhí)行，其中具有特定奇偶性的所有場(chǎng)都被分配給左視角，而具有相反奇偶性的所有場(chǎng)都被認(rèn)為是立體視角內(nèi)容的右視角；或者(ii)通過(guò)交替來(lái)自左視角和右視角的幀來(lái)執(zhí)行，以創(chuàng)建單個(gè)平面視頻序列。立體視覺(jué)補(bǔ)充增強(qiáng)信息(SEI)消息向解碼器提供了關(guān)于被編碼的視頻序列是否表示立體內(nèi)容以及哪種方法被用來(lái)對(duì)相應(yīng)內(nèi)容編碼的指示。這些先前已知的方法要求對(duì)現(xiàn)有的平面編碼技術(shù)進(jìn)行最低限度的修改。但是，在降低存在于立體對(duì)中的兩個(gè)視角之間的冗余性方面，它們表現(xiàn)出的能力有限。結(jié)果，立體視角的編碼與單個(gè)平面視角的編碼相比導(dǎo)致了很大的開(kāi)銷。另外，先前不能支持對(duì)多于兩個(gè)相機(jī)視角的編碼。
技術(shù)實(shí)現(xiàn)思路
本專利技術(shù)解決了現(xiàn)有技術(shù)的這些和其他缺陷和缺點(diǎn)，本專利技術(shù)針對(duì)用于多視角視頻編碼的方法和裝置。根據(jù)本專利技術(shù)的一個(gè)方面，提供了一種視頻編碼器。該視頻編碼器包括編碼器，該編碼器用于通過(guò)在時(shí)間預(yù)測(cè)和交叉視角(CIOSS-View)預(yù)測(cè)之間進(jìn)行選擇以實(shí)現(xiàn)對(duì)圖片的塊的預(yù)測(cè)來(lái)對(duì)該塊進(jìn)行編碼。該圖片是與多視角視頻內(nèi)容相對(duì)應(yīng)并且具有關(guān)于相同或相似場(chǎng)景的不同視角點(diǎn)的一組圖片之一。該圖片代表不同視角點(diǎn)之一。高級(jí)別語(yǔ)法被用于指示對(duì)該塊使用交叉視角預(yù)測(cè)。根據(jù)本專利技術(shù)的另一方面，提供了一種視頻編碼器。該視頻編碼器包括編碼器，該編碼器用于利用視差向量對(duì)圖片中的塊進(jìn)行編碼。該圖片對(duì)應(yīng)于多視角視頻內(nèi)容并且被編碼以提供符合以下之中的至少一種的結(jié)果比特流:國(guó)際標(biāo)準(zhǔn)化組織/國(guó)際電工委員會(huì)運(yùn)動(dòng)圖片專家組-4第10部分高級(jí)視頻編碼標(biāo)準(zhǔn)/國(guó)際電信聯(lián)盟電信部H.264推薦以及其擴(kuò)展。根據(jù)本專利技術(shù)的另一方面，提供了一種視頻編碼器。該視頻編碼器包括編碼器，該編碼器用于基于視差向量預(yù)測(cè)子(predictor)來(lái)對(duì)與多視角視頻內(nèi)容相對(duì)應(yīng)的圖片中的塊進(jìn)行編碼，該視差向量預(yù)測(cè)子使用時(shí)間共位塊的相鄰視差向量和時(shí)間共位視差向量中的至少一個(gè)。根據(jù)本專利技術(shù)的另一方面，提供了一種視頻編碼方法。該方法包括通過(guò)在時(shí)間預(yù)測(cè)和交叉視角預(yù)測(cè)之間進(jìn)行選擇以實(shí)現(xiàn)對(duì)圖片的塊的預(yù)測(cè)來(lái)對(duì)該塊進(jìn)行編碼。該圖片是與多視角視頻內(nèi)容相對(duì)應(yīng)并且具有關(guān)于相同或相似場(chǎng)景的不同視角點(diǎn)的一組圖片之一。該圖片代表不同視角點(diǎn)之一。高級(jí)別語(yǔ)法被用于指示對(duì)該塊使用交叉視角預(yù)測(cè)。根據(jù)本專利技術(shù)的另一方面，提供了一種視頻編碼方法。該方法包括利用視差向量對(duì)圖片中的塊進(jìn)行編碼，其中該圖片對(duì)應(yīng)于多視角視頻內(nèi)容并且被編碼以提供符合以下之中的至少一種的結(jié)果比特流:國(guó)際標(biāo)準(zhǔn)化組織/國(guó)際電工委員會(huì)運(yùn)動(dòng)圖片專家組-4第10部分高級(jí)視頻編碼標(biāo)準(zhǔn)/國(guó)際電信聯(lián)盟電信部H.264推薦以及其擴(kuò)展。根據(jù)本專利技術(shù)的另一方面，提供了一種視頻編碼方法。該方法包括基于視差向量預(yù)測(cè)子來(lái)對(duì)與多視角視頻內(nèi)容相對(duì)應(yīng)的圖片中的塊進(jìn)行編碼，該視差向量預(yù)測(cè)子使用時(shí)間共位塊的相鄰視差向量和時(shí)間共位視差向量中的至少一個(gè)。根據(jù)本專利技術(shù)的另一方面，提供了一種視頻解碼器。該視頻解碼器包括解碼器，該解碼器用于通過(guò)在時(shí)間預(yù)測(cè)和交叉視角預(yù)測(cè)之間進(jìn)行選擇以實(shí)現(xiàn)對(duì)圖片的塊的預(yù)測(cè)來(lái)對(duì)該塊進(jìn)行解碼。該圖片是與多視角視頻內(nèi)容相對(duì)應(yīng)并且具有關(guān)于相同或相似場(chǎng)景的不同視角點(diǎn)的一組圖片之一。該圖片代表不同視角點(diǎn)之一。高級(jí)別語(yǔ)法被讀取以確定對(duì)該塊使用交叉視角預(yù)測(cè)。根據(jù)本專利技術(shù)的另一方面，提供了一種視頻解碼器。該視頻解碼器包括解碼器，該解碼器用于利用視差向量對(duì)圖片中的塊進(jìn)行解碼。該圖片對(duì)應(yīng)于多視角視頻內(nèi)容并且是從符合以下之中的至少一種的比特流解碼出的:國(guó)際標(biāo)準(zhǔn)化組織/國(guó)際電工委員會(huì)運(yùn)動(dòng)圖片專家組-4第10部分高級(jí)視頻解碼標(biāo)準(zhǔn)/國(guó)際電信聯(lián)盟電信部H.264推薦以及其擴(kuò)展。根據(jù)本專利技術(shù)的另一方面，提供了一種視頻解碼器。該視頻解碼器包括解碼器，該解碼器用于基于視差向量預(yù)測(cè)子來(lái)對(duì)與多視角視頻內(nèi)容相對(duì)應(yīng)的圖片中的塊進(jìn)行解碼，該視差向量預(yù)測(cè)子使用時(shí)間共位塊的相鄰視差向量和時(shí)間共位視差向量中的至少一個(gè)。根據(jù)本專利技術(shù)的另一方面，提供了一種視頻解碼方法。該方法包括通過(guò)在時(shí)間預(yù)測(cè)和交叉視角預(yù)測(cè)之間進(jìn)行選擇以實(shí)現(xiàn)對(duì)圖片的塊的預(yù)測(cè)來(lái)對(duì)該塊進(jìn)行解碼。該圖片是與多視角視頻內(nèi)容相對(duì)應(yīng)并且具有關(guān)于相同或相似場(chǎng)景的不同視角點(diǎn)的一組圖片之一。該圖片代表不同視角點(diǎn)之一。高級(jí)別語(yǔ)法被讀取以確定對(duì)該塊使用交叉視角預(yù)測(cè)。根據(jù)本專利技術(shù)的另一方面，提供了一種視頻解碼方法。該方法包括利用視差向量對(duì)圖片中的塊進(jìn)行解碼。該圖片對(duì)應(yīng)于多視角視頻內(nèi)容并且是從符合以下之中的至少一種的比特流解碼出的:國(guó)際標(biāo)準(zhǔn)化組織/國(guó)際電工委員會(huì)運(yùn)動(dòng)圖片專家組-4第10部分高級(jí)視頻解碼標(biāo)準(zhǔn)/國(guó)際電信聯(lián)盟電信部H.264推薦以及其擴(kuò)展(400)。根據(jù)本專利技術(shù)的另一方面，提供了一種視頻解碼方法。該方法包括基于視差向量預(yù)測(cè)子來(lái)對(duì)與多視角視頻內(nèi)容相對(duì)應(yīng)的圖片中的塊進(jìn)行解碼，該視差向量預(yù)測(cè)子使用時(shí)間共位塊的相鄰視差向量和時(shí)間共位視差向量中的至少一個(gè)。本專利技術(shù)的這些和其他方面、特征和優(yōu)點(diǎn)將從以下的要結(jié)合附圖理解的對(duì)示例性實(shí)施例的詳細(xì)描述中清楚顯現(xiàn)出來(lái)。附圖說(shuō)明根據(jù)以下示例性附圖可以更好地理解本專利技術(shù)，附圖中:圖1是根據(jù)本原理的實(shí)施例、本原理可應(yīng)用到的示例性多視角視頻編碼(MVC)編碼器的框圖；圖2是根據(jù)本原理的實(shí)施例、本原理可應(yīng)用到的示例性多視角視頻編碼(MVC)解碼器的框圖；圖3是根據(jù)本原理的實(shí)施例的用于多視角視頻內(nèi)容的參考列表構(gòu)造的示例性方法的流程圖；圖4是根據(jù)本原理的本文檔來(lái)自技高網(wǎng)...

【技術(shù)保護(hù)點(diǎn)】
一種視頻編碼器，包括：編碼器（100），用于通過(guò)在時(shí)間預(yù)測(cè)和交叉視角預(yù)測(cè)之間進(jìn)行選擇以實(shí)現(xiàn)對(duì)圖片的塊的預(yù)測(cè)來(lái)對(duì)該塊進(jìn)行編碼，所述圖片是與多視角視頻內(nèi)容相對(duì)應(yīng)并且具有關(guān)于相同或相似場(chǎng)景的不同視角點(diǎn)的一組圖片之一，所述圖片代表所述不同視角點(diǎn)之一，其中高級(jí)別語(yǔ)法被用于指示對(duì)所述塊使用交叉視角預(yù)測(cè)。

【技術(shù)特征摘要】
2006.01.09 US 60/757,2891.種視頻編碼器，包括: 編碼器(100)，用于通過(guò)在時(shí)間預(yù)測(cè)和交叉視角預(yù)測(cè)之間進(jìn)行選擇以實(shí)現(xiàn)對(duì)圖片的塊的預(yù)測(cè)來(lái)對(duì)該塊進(jìn)行編碼，所述圖片是與多視角視頻內(nèi)容相對(duì)應(yīng)并且具有關(guān)于相同或相似場(chǎng)景的不同視角點(diǎn)的一組圖片之一，所述圖片代表所述不同視角點(diǎn)之一， 其中高級(jí)別語(yǔ)法被用于指示對(duì)所述塊使用交叉視角預(yù)測(cè)。...

【專利技術(shù)屬性】
技術(shù)研發(fā)人員：蘇曄平，尹鵬，克里斯蒂娜古米拉，
申請(qǐng)(專利權(quán))人：湯姆遜許可證公司，
類型：發(fā)明
國(guó)別省市：