圖像處理裝置和圖像處理方法制造方法及圖紙

圖像處理裝置和圖像處理方法。該裝置具有：設置信息取得部，其按每個攝像元件取得表示攝像元件相對于攝像部的設置狀態的設置信息；運動信息取得部，其取得第1幀圖像和第2幀圖像間的攝像裝置的運動信息；輸出區域取得部，其按每個攝像元件取得第2輸出區域的位置信息，第2輸出區域是第2幀圖像內的區域，與第1幀圖像內的第1輸出區域對應，輸出區域取得部根據由設置信息決定的第1輸出區域(A11)的位置信息和運動信息取得多個攝像元件中作為基準的基準攝像元件的第2輸出區域(A12)，根據基準攝像元件的設置信息、其它攝像元件的設置信息和運動信息取得多個攝像元件中不同于基準攝像元件的其它攝像元件的第2輸出區域(A22)。

【技術實現步驟摘要】

本專利技術涉及。
技術介紹
以往，公知有根據拍攝的動態圖像幀間的運動數據進行動態圖像的校正處理的裝置。例如，在下面的專利文獻I中公開了以下裝置計算基準圖像與比較圖像間的運動數據，利用運動數據，按每個對應的塊計算圖像間的像素值的差分，根據該像素值的差分，按每個塊決定基準圖像與比較圖像的重疊比率，進行重疊處理，得到合成圖像，由此得到更鮮明的手抖校正圖像。專利文獻專利文獻1:日本特開2009-164857號公報此外，公知有通過合成由多個照相機拍攝的圖像而取得具有立體感的立體圖像的技木。此外，還公知有連續地拍攝、顯示這種立體圖像來取得立體動態圖像的技木。在這種立體動態圖像中，與普通的動態圖像同樣，需要進行手抖校正、失真校正等校正處理。在分別對從多個攝像元件取得的圖像獨立地進行專利文獻I中記載的手抖校正的情況下，無法得到從各攝像元件取得的圖像間的手抖校正的匹配性，可能無法進行適當的校正處理。
技術實現思路
因此，本專利技術的目的在于提供能夠進行在從多個攝像元件得到的圖像之間具有匹配性的校正處理的。本專利技術的圖像處理裝置對由攝像裝置拍攝的多個幀圖像進行圖像處理，其中，所述攝像裝置具有多個依次連續地拍攝第I幀圖像和第2幀圖像的攝像元件，所述圖像處理裝置的特征在于，該圖像處理裝置具有設置信息取得部，其按每個攝像元件，取得表示攝像元件相對于攝像裝置的設置狀態的設置信息；運動信息取得部，其取得第I幀圖像和第2幀圖像間的攝像裝置的運動信息；以及輸出區域取得部，其按每個攝像元件，取得第2輸出區域的位置信息，該第2輸出區域是第2幀圖像內的區域，與第I幀圖像內的第I輸出區域對應，輸出區域取得部根據由設置信息決定的第I輸出區域的位置信息和運動信息，取得多個攝像元件中的作為基準的基準攝像元件的第2輸出區域，輸出區域取得部根據基準攝像元件的設置信息、多個攝像元件中的不同于基準攝像元件的其它攝像元件的設置信息以及運動信息，取得其它攝像元件的第2輸出區域。本專利技術的圖像處理方法用于對由攝像裝置拍攝的多個幀圖像進行圖像處理，其中，攝像裝置具有多個依次連續地拍攝第I幀圖像和第2幀圖像的攝像元件，圖像處理方法的特征在于，該圖像處理方法包括以下步驟設置信息取得步驟，按每個攝像元件，取得表示攝像元件相對于攝像裝置的設置狀態的設置信息；運動信息取得步驟，取得第I幀圖像和第2幀圖像間的攝像裝置的運動信息；以及輸出區域取得步驟，按每個攝像元件，取得第2輸出區域的位置信息，該第2輸出區域是第2幀圖像內的區域，與第I幀圖像內的第I輸出區域對應，在輸出區域取得步驟中，根據由設置信息決定的第I輸出區域的位置信息和運動信息，取得多個攝像元件中的作為基準的基準攝像元件的第2輸出區域，在輸出區域取得步驟中，根據基準攝像元件的設置信息、多個攝像元件中的不同于基準攝像元件的其它攝像元件的設置信息以及運動信息，取得其它攝像元件的第2輸出區域。根據這種專利技術，根據由設置信息決定的第I輸出區域的位置信息和運動信息，取得基準攝像元件的第2輸出區域，根據基準攝像元件的設置信息、其它攝像元件的設置信息以及運動信息，取得多個攝像元件中的不同于基準攝像元件的其它攝像元件的第2輸出區域。此處，基準攝像元件的第2輸出區域和其它攝像元件的第2輸出區域是根據在這些攝像元件之間通用的運動信息而取得的，因此，能夠進行在從多個攝像元件得到的圖像之間具有匹配性的校正處理。此處，還可以具有判定部，該判定部針對所有攝像元件，判定第2輸出區域的位置信息是否位于第2幀圖像內，在第2輸出區域的位置信息不位于第2幀圖像內的情況下，輸出區域取得部對根據第I輸出區域的·位置信息與第2輸出區域的位置信息之間的差分求出的移動量進行縮小調整，直到在所有攝像元件中，第2輸出區域的位置信息位于第2幀圖像內為止。該情況下，可以防止由于第2輸出區域不位于第2幀圖像內而導致無法進行圖像處理。運動信息取得部可以從基準攝像元件拍攝的第I幀圖像和第2幀圖像中取得運動信息。該情況下，能夠從圖像取得運動信息，因此不需要新的硬件的結構，就能夠取得多個攝像元件中通用的運動信息。運動信息取得部可以通過陀螺儀傳感器取得運動信息。該情況下，能夠從陀螺儀傳感器取得多個攝像元件中通用的運動信息，因此能夠降低運算負荷。運動信息取得部取得從多個攝像元件拍攝的第I幀圖像和第2幀圖像中得到的運動信息的加權平均，作為運動信息。該情況下，根據多個攝像元件取得運動信息，因此，能夠高精度地取得運動信息。此外，可以根據攝像條件從多個攝像元件的中選擇基準攝像元件。該情況下，例如選擇性能優越的攝像元件作為基準攝像元件，由此能夠高精度地取得運動信息。輸出區域取得部可以將由于具有多個攝像元件而所需的輸出區域以外的區域用作為由于運動而進行校正時使用的區域。此時，在將用于得到立體圖像的邊緣和由于運動而進行校正時的邊緣共用的情況下，能夠利用ー個邊緣進行多個校正處理。因此，能夠減少因確保邊緣而導致的校正處理后的有效像素數下降。根據本專利技術，能夠進行在從多個攝像元件得到的圖像間具有匹配性的校正處理。附圖說明圖1是說明多個攝像元件的手抖校正的概要的圖。圖2是示出第I實施方式的圖像處理裝置的功能結構的框圖。圖3是說明第I攝像元件和第2攝像元件的設置信息的圖。圖4是示出圖像處理裝置的硬件結構的圖。圖5是說明運動イ目息的圖。圖6是示出輸出區域取得部中的運算處理的步驟的圖。圖7是示出第I實施方式的第2輸出區域的取得處理的流程圖。圖8是示出第2實施方式的圖像處理裝置的功能結構的框圖。圖9是說明運動校正矩陣的再計算方法的圖。圖10是示出第2實施方式的第2輸出區域的取得處理的流程圖。圖11是示出第3實施方式的圖像處理裝置的功能結構的框圖。圖12是示出平均運動校正矩陣的取得處理的步驟的圖。圖13是示出第3實施方式的第2輸出區域的取得處理的流程圖。圖14是示出平均運動校正矩陣的取得處理的流程圖。 標號說明1、1A、1B圖像處理裝置；10攝像部；11第I攝像元件；12第2攝像元件；21第I輸入部；22第2輸入部；30信息取得部；40設置信息取得部；41設置信息存儲部；50、50A、50B輸出區域取得部；60判定部。具體實施例方式以下，參照附圖對本專利技術的實施方式進行說明。在附圖的說明中，對相同的要素標注相同的標號，省略重復的說明。(第I實施方式)第I實施方式的圖像處理裝置進行在從多個攝像元件輸入的圖像之間具有匹配性的手抖校正處理，并安裝在便攜電話、數碼照相機、攝像機或者普通的計算機系統中。例如，用于多鏡頭照相機。在本實施方式中，作為多個攝像元件的例子，對具有兩個攝像元件的結構進行說明。首先，為了便于理解專利技術，對從兩個攝像元件取得立體圖像的方法進行說明。圖1示出兩個攝像元件即第I攝像元件和第2攝像元件拍攝的輸入幀和對該輸入幀的一部分的像素區域進行剪切而得到的輸出幀。以下，將從第I攝像元件拍攝的第I幀、第2幀中剪切的區域(第I輸出區域)分別稱為第I輸出區域AU、第2輸出區域A12。此外，將從第2攝像元件拍攝的第I幀、第2幀中剪切的區域(第2輸出區域)分別稱為第I輸出區域A21、第2輸出區域A22。為了使用第I攝像元件和第2攝像元件得到立體圖像，剪切第I攝像元件拍攝的第I幀圖像中的包含對象物T的規定的圖像區域作為第I輸出區域A本文檔來自技高網...

【技術保護點】
一種圖像處理裝置，其對由攝像裝置拍攝的多個幀圖像進行圖像處理，其中，所述攝像裝置具有多個依次連續地拍攝第1幀圖像和第2幀圖像的攝像元件，所述圖像處理裝置的特征在于，該圖像處理裝置具有：設置信息取得部，其按每個所述攝像元件，取得表示所述攝像元件相對于所述攝像裝置的設置狀態的設置信息；運動信息取得部，其取得所述第1幀圖像和所述第2幀圖像間的所述攝像裝置的運動信息；以及輸出區域取得部，其按每個所述攝像元件，取得第2輸出區域的位置信息，該第2輸出區域是所述第2幀圖像內的區域，與所述第1幀圖像內的第1輸出區域對應，所述輸出區域取得部根據由所述設置信息決定的所述第1輸出區域的位置信息和所述運動信息，取得多個所述攝像元件中的作為基準的基準攝像元件的所述第2輸出區域，所述輸出區域取得部根據所述基準攝像元件的設置信息、多個所述攝像元件中的不同于所述基準攝像元件的其它所述攝像元件的設置信息以及所述運動信息，取得其它所述攝像元件的所述第2輸出區域。

【技術特征摘要】
2011.10.04 JP 2011-2202691.一種圖像處理裝置，其對由攝像裝置拍攝的多個幀圖像進行圖像處理，其中，所述攝像裝置具有多個依次連續地拍攝第I幀圖像和第2幀圖像的攝像元件，所述圖像處理裝置的特征在于，該圖像處理裝置具有 設置信息取得部，其按每個所述攝像元件，取得表示所述攝像元件相對于所述攝像裝置的設置狀態的設置信息； 運動信息取得部，其取得所述第I幀圖像和所述第2幀圖像間的所述攝像裝置的運動/[目息;以及 輸出區域取得部，其按每個所述攝像元件，取得第2輸出區域的位置信息，該第2輸出區域是所述第2幀圖像內的區域，與所述第I幀圖像內的第I輸出區域對應， 所述輸出區域取得部根據由所述設置信息決定的所述第I輸出區域的位置信息和所述運動信息，取得多個所述攝像元件中的作為基準的基準攝像元件的所述第2輸出區域， 所述輸出區域取得部根據所述基準攝像元件的設置信息、多個所述攝像元件中的不同于所述基準攝像元件的其它所述攝像元件的設置信息以及所述運動信息，取得其它所述攝像元件的所述第2輸出區域。2.根據權利要求1所述的圖像處理裝置，其中， 所述圖像處理裝置具有判定部，該判定部針對所有攝像元件，判定所述第2輸出區域的位置信息是否位于所述第2幀圖像內， 在所述第2輸出區域的位置信息不位于所述第2幀圖像內的情況下，所述輸出區域取得部對根據所述第I輸出區域的位置信息與所述第2輸出區域的位置信息之間的差分求出的移動量進行縮小調整，直到在所有攝像元件中，所述第2輸出區域的位置信息位于所述第2幀圖像內為止。3.根據權利要求1或2所述的圖像處理裝置，其中， 所述運動信息取得部從所述基準攝像元件拍攝的所述第I...

【專利技術屬性】
技術研發人員：羽深兼介，阿部剛，
申請(專利權)人：株式會社摩如富，
類型：發明
國別省市：