信息處理裝置、信息處理方法和程序制造方法及圖紙

本技術涉及可以更準確地指示在顯示區域外的位置的一種信息處理裝置、信息處理方法和程序。顯示區域外位置指定單元指定在圖像顯示單元的顯示區域外的位置，并且繪圖/聲音控制單元在AR對象朝指定位置移動時控制所述AR對象的聲音從聲音輸出單元的輸出。可以將本技術應用于可穿戴式計算機，例如具有用于左眼和右眼的一對圖像顯示單元的眼鏡型裝置。

【技術實現步驟摘要】
【國外來華專利技術】
本技術涉及一種信息處理裝置、信息處理方法和程序，并且特定而言涉及可以更準確地指示在顯示區域外的位置的一種信息處理裝置、信息處理方法和程序。
技術介紹
近年來，已開展對使用者可以在行走時攜帶的可穿戴式計算機的研究(例如，專利文獻1)。作為此種可穿戴式計算機，可以安裝在頭部的如頭戴式顯示器(其將稱為HMD)等的顯示裝置是已知的。另外，一種向使用者呈現覆蓋在實空間的對象上的虛擬內容的被稱為增強現實(AR)的技術已獲得關注(例如，例如，參考專利文獻2)。通過使用這種AR技術，例如，使用者透過透射型顯示器所看到的場景的信息(AR對象)可以根據使用者的當前位置顯示為覆蓋在某個地方上。此外，專利文獻3公開了一種基于使用者的當前位置和根據到目的地的路徑所指定的方向來控制音源的再現的技術。引用列表專利文獻專利文獻1：JP2011-28763A專利文獻2：JP2013-92964A專利文獻3：JP2003-028663A
技術實現思路
技術問題由于在顯示器(例如，如上文所描述的HMD)中僅可以顯示有限的區域，所以存在其中難以在所述窄顯示區域中既顯示在使用者視野內的信息又顯示在使用者視野外的信息的情況。因此，盡管存在使用圖像來顯示信息是直觀的和明確的事實，但在顯示器上還是會顯示有限的區域且因此對顯示所有信息存在限制。另外，在上文所描述的專利文獻3中，因為耳機使用兩個通道進行再現，所以使用r>者可以辨識直線的左右區域；但是，當使用頭相關查函數(HRTF)來表達立體聲音時，存在在使用聲音進行位置顯示的情況下錯誤地辨識前后側的可能性。其中一個原因是，當HRTF不屬于使用者時，聽到聲音的方式不同于使用者用他或她的耳朵正常地聽到自然世界的聲音的方式，并且因此使用者可能不能夠捕捉到聲音的位置。另外，即使HRTF屬于使用者，聽到的方式由于耳機或執行再現的再現裝置的性質而仍可不同。如上文所描述，需要指示在具有有限顯示區域的顯示裝置的顯示區域外的信息，但即使使用專利文獻3中所公開的聲音再現方法，仍不可能準確地指示在顯示區域外的信息。本技術考慮到以上情況，并且旨在更準確地指示在顯示區域外的位置。問題的解決方案根據本技術的方面，一種信息處理裝置包含：圖像顯示單元，其被配置成顯示圖像；聲音輸出單元，其被配置成輸出聲音；位置指定單元，其被配置成指定在圖像顯示單元的顯示區域外的位置；以及控制單元，其被配置成在將增強現實(AR)對象朝指定位置移動時控制所述AR對象的聲音的輸出。控制單元可在AR對象穿過圖像顯示單元的顯示區域時使顯示AR對象的圖像。可存在多個AR對象。控制單元在AR對象朝指定位置移動時致使AR對象在使用者的兩邊移動。控制單元可致使多個AR對象的聲音以不同的定時進行輸出。信息處理裝置可進一步包含檢測單元，所述檢測單元被配置成檢測圖像顯示單元的方向。控制單元可致使AR對象根據圖像顯示單元的方向來移動。控制單元可致使AR對象以在顯示區域中顯示AR對象的圖像的方式來移動。控制單元可致使AR對象的聲音的輸出位置與在顯示區域內的AR對象的圖像的顯示位置相同。控制單元可致使AR對象的聲音的輸出位置與在顯示區域內的AR對象的圖像的顯示位置不同。信息處理裝置可為具有用于左眼和右眼的一對圖像顯示單元的眼鏡型裝置。信息處理裝置可為獨立裝置或構成一個裝置的內部塊。根據本技術的方面的信息處理方法和程序是與根據本技術的方面的信息處理裝置相容的信息處理方法和程序。在根據本技術的方面的信息處理裝置、信息處理方法和程序中，指定在圖像顯示單元的顯示區域外的位置，并且在AR對象朝指定位置移動時控制AR對象的聲音從聲音輸出單元的輸出。本專利技術的有利效應根據本技術的方面，有可能更準確地指示在顯示區域外的位置。應注意，本文中所公開的效應未必為限制性的，并且可展現本公開中所公開的任何效應。附圖說明[圖1]圖1是示出AR系統的實施例的配置的框圖，本技術被應用于所述AR系統。[圖2]圖2是示出控制箱和HMD的詳細配置的框圖。[圖3]圖3是示出智能手機的詳細配置的框圖。[圖4]圖4是示出AR服務器的詳細配置的框圖。[圖5]圖5是示出AR處理單元的詳細配置的框圖。[圖6]圖6是描述由構成AR系統的每個裝置執行的處理的流程圖。[圖7]圖7是描述AR對象通信處理1的流程圖。[圖8]圖8是示出AR系統的圓柱坐標系的圖式。[圖9]圖9是示出在圓柱坐標系中顯示區域和AR對象之間的關系的圖式。[圖10]圖10是示出在圓柱坐標系中顯示區域和加入聲音的AR對象之間的關系的圖式。[圖11]圖11是描述加入聲音的AR對象通信處理1的流程圖。[圖12]圖12是示出對目標的位置的指定的示例的圖式。[圖13]圖13是示出設定加入聲音的AR對象的軌跡的示例的圖式。[圖14]圖14是示出聲音對象圖像的顯示示例的圖式。[圖15]圖15是描述加入聲音的AR對象通信處理2的流程圖。[圖16]圖16是示出對目標的位置的指定的示例的圖式。[圖17]圖17是示出設定加入聲音的AR對象的軌跡的示例的圖式。[圖18]圖18是示出聲音對象圖像的顯示示例的圖式。[圖19]圖19是描述AR對象通信處理2的流程圖。[圖20]圖20是示出聲音對象圖像的顯示示例的圖式。[圖21]圖21是示出聲音對象的雙向移動的示例的圖式。[圖22]圖22是示出AR對象的圖像繪圖路徑的示例的圖式。[圖23]圖23是示出VPT的概念的圖式。[圖24]圖24是示出VPT的信號處理的示例的圖式。[圖25]圖25是用于描述AR對象的第一聲路的圖式。[圖26]圖26是用于描述基本聲音處理的圖式。[圖27]圖27是用于描述對雙向移動的聲音處理的圖式。[圖28]圖28是用于描述在中間位置處的聲音處理的圖式。[圖29]圖29是用于描述對連續聲音的聲音處理的圖式。[圖30]圖30是用于描述AR對象的第二聲路的圖式。[圖31]圖31是用于描述基本聲音處理的圖式。[圖32]圖32是示出AR系統的特定操作示例1的圖式。[圖33]圖33是示出AR系統的特定操作示例2的圖式。具體實施方式下文將參考圖式來描述本技術的實施例。<AR系統的配置>圖1是示出AR系統的實施例的配置的框圖，本技術被應用于所述AR系統。AR系統1使用增強現實(AR)技術向穿戴有頭戴式顯示器(HMD)20的使用者呈現關...

【技術保護點】
一種信息處理裝置，其包括：圖像顯示單元，其被配置成顯示圖像；聲音輸出單元，其被配置成輸出聲音；位置指定單元，其被配置成指定在所述圖像顯示單元的顯示區域外的位置；以及控制單元，其被配置成在將增強現實(AR)對象朝指定的所述位置移動時控制所述AR對象的聲音的輸出。

【技術特征摘要】
【國外來華專利技術】2013.11.05 JP 2013-2291211.一種信息處理裝置，其包括：
圖像顯示單元，其被配置成顯示圖像；
聲音輸出單元，其被配置成輸出聲音；
位置指定單元，其被配置成指定在所述圖像顯示單元的顯示區域外的位置；以及
控制單元，其被配置成在將增強現實(AR)對象朝指定的所述位置移動時控制所述AR對
象的聲音的輸出。
2.根據權利要求1所述的信息處理裝置，其中所述控制單元在所述AR對象穿過所述圖
像顯示單元的所述顯示區域時使所述AR對象的圖像進行顯示。
3.根據權利要求2所述的信息處理裝置，其中存在多個AR對象。
4.根據權利要求3所述的信息處理裝置，其中所述控制單元在所述AR對象朝指定的所
述位置移動時使所述AR對象在使用者的兩邊移動。
5.根據權利要求4所述的信息處理裝置，其中所述控制單元使所述多個AR對象的聲音
以不同的定時進行輸出。
6.根據權利要求2所述的信息處理裝置，其進一步包括：
檢測單元，其被配置成檢測所述圖像顯示單元的方向，
其中所述控制單元使所述AR對象根據所...

【專利技術屬性】
技術研發人員：中川俊之，石川博隆，金間泰樹，
申請(專利權)人：索尼公司，
類型：發明
國別省市：日本;JP