三維(3D)呈現中的字幕制造技術

描述了一種準備用于立體呈現的字幕的方法和系統。該方法允許通過將字幕的初始覆蓋區與圖像顯示區相比較來顯示字幕，而不會被刪節或遮蓋。如果初始覆蓋區的任何部分位于圖像顯示區之外，則根據調整信息調整字幕，使得經調整的字幕完全位于圖像顯示區內，調整信息包括以下中的至少一個：縮放因子、平移量以及視差變化。此外，可以通過考慮要與字幕一起顯示的下層圖像中的一個或多個對象的視差來調整字幕的視差。

【技術實現步驟摘要】
【國外來華專利技術】
本專利技術涉及準備供立體呈現使用的字幕。
技術介紹
在三維(3D)數字電影劇場呈現中，屏幕上的遮擋(masking)可能模糊或侵占在已經顯示了字幕或解說詞，因此必然要對字幕進行修改，例如字幕在屏幕上的位置和/或尺寸。同樣的情形會出現在3D視頻顯示中，如果內容或原始字幕的全光柵占用比監視器的顯示區域大的區域。在這種情形下，在3D中，不僅必須調整字幕或解說詞的大小或尺寸和/或針對每只眼睛的圖像以協同的方式重新放置字幕或解說詞，而且必須存在針對解說詞所覆蓋的3D內容的處所，使得解說詞不會干擾內容中元素的視深度，也不會不適合地一直顯示到相對于下層內容的前景中。術語“視深度(apparent d印th) ”是觀看者相對于屏幕的感知，這由左眼與右眼圖像之間的視差引起。3D呈現通常受限于提供視深度，這是因為對于圖像中的相同元素不同位置處的觀看者會感知到不同的視深度。在3D呈現中，解說詞的“覆蓋”或“合成”提供了解說詞與關聯的圖像或內容的組合，以在圖像空間內可讀地向觀看者呈現。這必然模糊一部分圖像，其中手動地選擇(例如，通過美工或字幕技師)或者在一些情況下自動選擇被模糊的圖像部分。解說詞整體上或部分可以是半透明的。在3D的情況下，字幕通常具有通常以像素度量的指定視差(即，右眼字幕與左眼字幕之間的偏移)，使得負責呈現文本的系統可以與3D圖像內容一起呈現文本，并且具有在右眼字幕與左眼字幕之間應用的適當偏移，使得正確放置文本和3D圖像內容。當右眼和左眼之間的位置偏移為零時，字幕看起來在屏幕的表面。當位置偏移將針對右眼的字幕置于針對左眼的字幕的右側時，字幕看起來在屏幕的后面。如果針對右眼的字幕在針對左眼的字幕的左側，則字幕看起來在屏幕的前面。其他人在共同轉讓的專利申請(例如，Redmann在題為“Method and Apparatusfor Preparing Subtitles for Display” 的公開 PCT 專利申請 W02010/096030 中，以及Izzat 等人在題為 “System and Method for Combining Text with Three-DimensionalContent”的PCT公開專利申請W02008/115222中)中已經描述了用于字幕顯示的各種方法和系統。兩個PCT申請中的教導的全部內容通過引用合并于此。通常，劇場呈現中的解說詞和字幕具有不同意義。例如，解說詞是指主音頻語言的注釋，而字幕通常是除主音頻以外的語言。然而，這二者是在主圖像上應用文本的實例。由于本專利技術實施例等同地應用于解說詞和字幕，因此這些術語在本討論中是可互換使用的。解說詞和字幕也經常會面對被‘開啟’或‘關閉’。開啟的解說詞或字幕對于所有觀看者可見，并且被‘疊印(burned)’，即成為主圖像(例如，用于呈現或顯示的圖像或內容)的不可分元素。然而，關閉的解說詞或字幕不作為主圖像的一部分提供。取而代之，結合主圖像或內容的顯示，通過監視器或投影儀或驅動監視器的機頂盒或服務器的動作來顯示關閉的解說詞或字幕。在一些情況下，例如，在數字電影呈現中，向字幕或解說詞提供針對它們在主圖像中的布置的元數據。在其他情況(例如，電視)下，提供不具有布置信息的關閉的解說詞，并且布置留給呈現系統負責。大多數電視系統提供關閉的解說詞作為由顯示設備呈現的文本流。在數字電影系統中，可以提供解說詞或字幕作為定時文本，其中可以缺省或明確知道和提供的字體來呈現文本串，或者解說詞或字幕可以作為文本的靜止幀圖像提供。
技術實現思路
本專利技術原理的實施例提供一種準備用于立體呈現的字幕或解說詞的方法和系統。可以按照不同方式調整字幕，使得字幕可以在給定圖像顯示區域內顯示，而不會被刪節或模糊。這樣的調整包括通過應用縮放因子來改變字幕的尺寸、在圖像空間中平移字幕，改變字幕的視差或視深度或其組合。由于可以通過考慮下層圖中圖其他對象或元素的視差來進行對字幕的視差調整，因此可以使深度提示沖突(depth cur conflict)最小化，獲得改善的立體觀看體驗。一個實施例提供了一種準備用于立體呈現的字幕的方法，包括根據調整信息來處理字幕，并且將處理后的字幕合成到至少一個立體圖像中，以產生用于立體呈現的至少一個變換的立體圖像。另一實施例提供了一種準備用于立體呈現的字幕的系統，包括第一處理器，被配置用于根據以下至少一個的調整信息來自動處理字幕縮放因子、平移量和視差變化，并且將處理后的字幕合成到立體圖像中，以產生用于立體呈現的變換的立體圖像。附圖說明通過考慮結合附圖的以下詳細描述，可以更加易于理解本專利技術的教導，在附圖中圖I示出了呈現中屏幕的示例；圖2示出了圖I場景中3D鏡頭或合成的左眼視圖；圖3示出了圖I場景中3D鏡頭或合成的右眼視圖；圖4示出了通過重疊圖2-3的左眼圖像和右眼圖像而形成的立體視圖；圖5示出了具有解說詞的立體圖像，示出了解說詞和各種對象的視差；圖6示出了從立體圖像感知到的3D虛擬視圖；圖7A示出了解說詞被裁剪的立體視圖；圖7B示出了具有縮小的解說詞的圖7A立體視圖；圖8示出了被調整以免裁剪的解說詞；圖9示出了立體圖像，其中解說詞位置相對于3D圖像中的對象被調整以免裁剪和與深度提示沖突；圖IOA示出了圖7B的圖像的虛擬視圖；圖IOB是示出了圖8和9中兩個顯示的虛擬視圖；圖11示出了場景中另一解說詞布置；圖12示出了解說詞被裁剪的圖11中的顯示；圖13示出了被向上平移以免裁剪的圖11中的解說詞；圖14示出了具有調整視差以提供相對于3D圖像或內容中對象的視差的特定關系的解說詞；圖15是示出了圖13和14的兩個顯示的虛擬視圖； 圖16示出了調整用于具有3D內容呈現的顯示的字幕的方法；圖17A示出了字幕調整過程的第一實施例；圖17B示出了字幕調整過程的第二實施例；圖17C示出了字幕調整過程的第三實施例；圖17D示出了字幕調整過程的第四實施例；圖18示出了兩個覆蓋區的空白區和參數；圖19示出了用于實現本專利技術原理的實施例的系統。為了便于理解，在可能的情況下將相同的參考數字用于指示附圖中公共的相同元件。具體實施例方式本專利技術的實施例提供了一種準備用于在立體呈現中顯示的字幕或解說詞的方法和系統，包括調整與字幕相關聯至少一個參數，使得可以通過顯示系統的部件或配置來在給定顯示區域中呈現調整的字幕，而不會被模糊或刪節。可調整參數可以包括字幕在顯示平面中的位置、尺寸或大小，以及相對于顯示平面的水平視差或視深度。通過基于字幕下層內容(即，占用相同顯示圖像區域)中其他對象的視差來調整字幕的水平視差，可以向觀看者顯示字幕和對象，而不會與深度提示沖突。本專利技術原理可以使用在數字電影影院設備和視頻設備中，例如前端廣播或流傳輸系統以及消費者側設備，包括電視監視器、機頂盒、DVD播放器、視頻錄像機、個人計算機、手持顯示器(例如視頻播放器或智能電話上的手持顯示器)、以及其他移動或便攜式設備。本專利技術原理適用于還沒有被疊印到主畫面或圖像內容中的關閉的解說詞或字幕(不管是否提供布置信息作為元數據)，并且用于連同形成呈現一部分的圖像或內容一起顯示這些字幕或解說詞。在以下討論中，術語‘字幕’和‘解說詞’互換使用，以指代沒有按照分布疊印到主圖像中的文本或圖形。此外，字幕和解說詞可以包括無論由終端設本文檔來自技高網...

【技術保護點】

【技術特征摘要】
【國外來華專利技術】2010.04.01 US 61/319,9481.一種準備用于立體呈現的字幕的方法，包括 根據調整信息來處理字幕；并且 將處理后的字幕合成到至少一個立體圖像中，以產生用于立體呈現的至少一個變換的立體圖像。2.根據權利要求I所述的方法，其中，調整信息包括以下中的至少一個縮放因子、平移量以及視差變化。3.根據權利要求I所述的方法，其中，由以下步驟來確定調整信息 將字幕的覆蓋區與所述至少一個立體圖像的預定區相比較； 如果覆蓋區的任何部分在預定區之外，則確定所述調整信息，以應用于字幕來產生經調整字幕，經調整字幕具有完全位于預定區內的經調整覆蓋區。4.根據權利要求3所述的方法，其中，在校準過程中建立預定區以識別與關聯于字幕的位置和尺寸之一有關的至少一個參數。5.根據權利要求3所述的方法，還包括 基于調整信息來導出質量參數；并且 如果質量參數超過預定值，則產生經調整的字幕。6.根據權利要求3所述的方法，還包括 將經調整覆蓋區限定為覆蓋區與預定區之間的交叉區；并且 確定所述縮放因子，以應用于覆蓋區來產生經調整覆蓋區。7.根據權利要求3所述的方法，還包括 平移字幕，以減小位于預定區之外的字幕部分； 如果經平移的字幕的覆蓋區的任何部分位于預定區之外，則對經平移的字幕應用縮放因子，使得縮小的平移字幕完全在預定區內；并且 將經平移且可選地縮小的字幕的視差調整為不大于在調整了視差的字幕的經調整覆蓋區內出現的對象的最小視差。8.根據權利要求7所述的方法，還包括 如果經調整覆蓋區具有在預定區之外的任何部分，則進一步縮小調整了視差的字幕，并且將進一步縮小的字幕的視差調整為不大于在進一步調整的字幕的覆蓋區內的任何對象的最小視差。9.根據權利要求3所述的方法，還包括 限定預定區域和至少一個立體圖像的區域之間的交叉區；其中所述至少一個立體圖像的區域中對象的視差至少等于字幕的視差；并且 對字幕應用縮放因子和平移量，以在交叉區內產生縮小且平移的字幕；...

【專利技術屬性】
技術研發人員：威廉·吉本斯·雷德曼，
申請(專利權)人：湯姆森許可貿易公司，
類型：
國別省市：