目標(biāo)的追蹤方法、裝置、設(shè)備及存儲介質(zhì)制造方法及圖紙

本公開提出了一種目標(biāo)的追蹤方法、裝置、設(shè)備及存儲介質(zhì)，涉及計算機(jī)技術(shù)領(lǐng)域，方案為：確定待追蹤目標(biāo)在第i幀畫面中檢測框的尺寸、參考中心點(diǎn)坐標(biāo)及第一畫面；根據(jù)參考中心點(diǎn)坐標(biāo)、第一參考步長及參考范圍，確定第i+1幀畫面中候選框?qū)?yīng)的候選中心點(diǎn)坐標(biāo)；根據(jù)每個候選中心點(diǎn)坐標(biāo)及檢測框尺寸，確定各個第二畫面；根據(jù)每個第二、第一畫面間的相似度，確定目標(biāo)候選框；基于候選中心點(diǎn)坐標(biāo)及第二參考步長，返回執(zhí)行確定候選中心點(diǎn)坐標(biāo)的操作，直至滿足條件，根據(jù)新候選框中對應(yīng)的第二、第一畫面間的相似度，確定待追蹤目標(biāo)的位置。由此，不僅可以對動態(tài)的目標(biāo)進(jìn)行實時跟蹤，且在保證了跟蹤精度的情況下，避免了窮舉式檢索，大大降低了計算量。計算量。計算量。

【技術(shù)實現(xiàn)步驟摘要】
目標(biāo)的追蹤方法、裝置、設(shè)備及存儲介質(zhì)


[0001]本公開涉及計算機(jī)
，尤其涉及計算機(jī)視覺、深度學(xué)習(xí)等人工智能
，具體涉及一種目標(biāo)的追蹤方法、裝置、設(shè)備及存儲介質(zhì)。

技術(shù)介紹

[0002]虛擬現(xiàn)實(virtual reality，VR)技術(shù)作為當(dāng)前備受關(guān)注的多媒體技術(shù)，能夠?qū)⑹鼙娨氲揭粋€完全隔離于真實環(huán)境的虛擬空間，從而拓展了受眾獲取信息的維度。
[0003]目前流行的VR視頻表現(xiàn)形式為360全景VR，即通過全景相機(jī)拍攝得到的全景環(huán)視視頻。然而如果我們在VR視頻中想要聚焦一個目標(biāo)，例如一個頻繁運(yùn)動中的球員，那么我們必須時時刻刻的調(diào)整我們的頭所朝向的位置比如佩戴頭顯時，或者頻繁滑動屏幕，時間長了之后將產(chǎn)生較大的交互疲勞。因而如何對全景圖像中中特定目標(biāo)進(jìn)行精準(zhǔn)、持續(xù)的跟蹤是當(dāng)前亟需解決的問題。

技術(shù)實現(xiàn)思路

[0004]本公開提供了一種用于目標(biāo)的追蹤方法、裝置、設(shè)備以及存儲介質(zhì)。
[0005]根據(jù)本公開的第一方面，提供了一種目標(biāo)的追蹤方法，包括：
[0006]確定待追蹤目標(biāo)在第i幀畫面中所在的檢測框的尺寸、參考中心點(diǎn)坐標(biāo)及所述檢測框中的第一畫面內(nèi)容；
[0007]根據(jù)所述參考中心點(diǎn)坐標(biāo)、第一參考步長及參考范圍，確定第i+1幀畫面中每個候選框?qū)?yīng)的候選中心點(diǎn)坐標(biāo)；
[0008]根據(jù)每個所述候選中心點(diǎn)坐標(biāo)及所述檢測框的尺寸，確定每個所述候選框在所述第i+1幀畫面中對應(yīng)的第二畫面內(nèi)容；
[0009]根據(jù)每個所述第二畫面內(nèi)容與所述第一畫面內(nèi)容間的相似度，確定目標(biāo)候選框；
[0010]基于所述目標(biāo)候選框?qū)?yīng)的候選中心點(diǎn)坐標(biāo)及第二參考步長，返回執(zhí)行所述確定每個候選框?qū)?yīng)的候選中心點(diǎn)坐標(biāo)的操作，直至滿足預(yù)設(shè)的條件，根據(jù)新確定的候選框中對應(yīng)的第二畫面內(nèi)容與第一畫面內(nèi)容間的相似度，確定所述待追蹤目標(biāo)在所述第i+1幀畫面中的位置，其中，i為自然數(shù)，所述第二參考步長小于所述第一參考步長。
[0011]根據(jù)本公開的第二方面，提供了一種目標(biāo)的追蹤裝置，包括：
[0012]第一確定模塊，用于確定待追蹤目標(biāo)在第i幀畫面中所在的檢測框的尺寸、參考中心點(diǎn)坐標(biāo)及所述檢測框中的第一畫面內(nèi)容；
[0013]第二確定模塊，用于根據(jù)所述參考中心點(diǎn)坐標(biāo)、第一參考步長及參考范圍，確定第i+1幀畫面中每個候選框?qū)?yīng)的候選中心點(diǎn)坐標(biāo)；
[0014]第三確定模塊，用于根據(jù)每個所述候選中心點(diǎn)坐標(biāo)及所述檢測框的尺寸，確定每個所述候選框在所述第i+1幀畫面中對應(yīng)的第二畫面內(nèi)容；
[0015]第四確定模塊，用于根據(jù)每個所述第二畫面內(nèi)容與所述第一畫面內(nèi)容間的相似度，確定目標(biāo)候選框；
[0016]第五確定模塊，用于基于所述目標(biāo)候選框?qū)?yīng)的候選中心點(diǎn)坐標(biāo)及第二參考步長，返回執(zhí)行所述確定每個候選框?qū)?yīng)的候選中心點(diǎn)坐標(biāo)的操作，直至滿足預(yù)設(shè)的條件，根據(jù)新確定的候選框中對應(yīng)的第二畫面內(nèi)容與第一畫面內(nèi)容間的相似度，確定所述待追蹤目標(biāo)在所述第i+1幀畫面中的位置，其中，i為自然數(shù)，所述第二參考步長小于所述第一參考步長。
[0017]本公開第三方面實施例提出了一種計算機(jī)設(shè)備，包括：存儲器、處理器及存儲在存儲器上并可在處理器上運(yùn)行的計算機(jī)程序，所述處理器執(zhí)行所述程序時，實現(xiàn)如本公開第一方面實施例提出的方法。
[0018]本公開第四方面實施例提出了一種非臨時性計算機(jī)可讀存儲介質(zhì)，存儲有計算機(jī)程序，所述計算機(jī)程序被處理器執(zhí)行時實現(xiàn)如本公開第一方面實施例提出的方法。
[0019]本公開第五方面實施例提出了一種計算機(jī)程序產(chǎn)品，當(dāng)所述計算機(jī)程序產(chǎn)品中的指令處理器執(zhí)行時，執(zhí)行本公開第一方面實施例提出的方法。
[0020]本公開提供的目標(biāo)的追蹤方法、裝置、設(shè)備以及存儲介質(zhì)至少存在以下有益效果：
[0021]本公開實施例中，首先確定待追蹤目標(biāo)在第i幀畫面中所在的檢測框的尺寸、參考中心點(diǎn)坐標(biāo)及檢測框中的第一畫面內(nèi)容，然后根據(jù)參考中心點(diǎn)坐標(biāo)、第一參考步長及參考范圍，確定第i+1幀畫面中每個候選框?qū)?yīng)的候選中心點(diǎn)坐標(biāo)，之后根據(jù)每個候選中心點(diǎn)坐標(biāo)及檢測框的尺寸，確定每個候選框在第i+1幀畫面中對應(yīng)的第二畫面內(nèi)容，再根據(jù)每個第二畫面內(nèi)容與第一畫面內(nèi)容間的相似度，確定目標(biāo)候選框，最后基于目標(biāo)候選框?qū)?yīng)的候選中心點(diǎn)坐標(biāo)及第二參考步長，返回執(zhí)行確定每個候選框?qū)?yīng)的候選中心點(diǎn)坐標(biāo)的操作，直至滿足預(yù)設(shè)的條件，根據(jù)新確定的候選框中對應(yīng)的第二畫面內(nèi)容與第一畫面內(nèi)容間的相似度，確定待追蹤目標(biāo)在第i+1幀畫面中的位置。由此，在對目標(biāo)進(jìn)行追蹤時，通過更新參考步長的方式，不斷的更新待檢測的候選框，以確定最終的目標(biāo)候選框，從而不僅可以對動態(tài)的目標(biāo)進(jìn)行實時跟蹤，且在保證了跟蹤精度的情況下，避免了窮舉式檢索，大大降低了計算量。
[0022]應(yīng)當(dāng)理解，本部分所描述的內(nèi)容并非旨在標(biāo)識本公開的實施例的關(guān)鍵或重要特征，也不用于限制本公開的范圍。本公開的其它特征將通過以下的說明書而變得容易理解。
附圖說明
[0023]附圖用于更好地理解本方案，不構(gòu)成對本公開的限定。其中：
[0024]圖1為本公開一實施例所提供的目標(biāo)的追蹤方法的流程示意圖；
[0025]圖2為本公開一實施例所提供的候選中心點(diǎn)的示意圖；
[0026]圖3為本公開又一實施例所提供的目標(biāo)的追蹤方法的流程示意圖；
[0027]圖4為本公開一實施例所提供的候選框的伸縮示意圖；
[0028]圖5為本公開另一實施例所提供的目標(biāo)的追蹤方法的流程示意圖；
[0029]圖6為本公開一實施例所提供的目標(biāo)的追蹤裝置的結(jié)構(gòu)框圖；
[0030]圖7是用來實現(xiàn)本公開實施例的目標(biāo)的追蹤方法的電子設(shè)備的框圖。
具體實施方式
[0031]以下結(jié)合附圖對本公開的示范性實施例做出說明，其中包括本公開實施例的各種
細(xì)節(jié)以助于理解，應(yīng)當(dāng)將它們認(rèn)為僅僅是示范性的。因此，本領(lǐng)域普通技術(shù)人員應(yīng)當(dāng)認(rèn)識到，可以對這里描述的實施例做出各種改變和修改，而不會背離本公開的范圍和精神。同樣，為了清楚和簡明，以下的描述中省略了對公知功能和結(jié)構(gòu)的描述。
[0032]本公開提出的目標(biāo)的追蹤方法可由本公開提供的目標(biāo)的追蹤裝置執(zhí)行，也可以由本公開提供的電子設(shè)備執(zhí)行，其中，電子設(shè)備可以包括但不限于VR設(shè)備、電腦、智能相機(jī)等終端設(shè)備，下面以由本公開提供的目標(biāo)的追蹤裝置來執(zhí)行本公開提供的一種目標(biāo)的追蹤方法，而不作為對本公開的限定，以下簡稱為“裝置”。
[0033]下面參考附圖對本公開提供的目標(biāo)的追蹤方法、裝置、計算機(jī)設(shè)備及存儲介質(zhì)進(jìn)行詳細(xì)描述。
[0034]需要說明的是，本公開實施例中，全景VR視頻中的圖像可能為拉伸的圖像，也即等距柱狀投影(Equi
?
Rectangular Projection，ERP)圖像。需要說明的是，ERP圖像在形成時通常會發(fā)生一定程度的畸變。
[0035]視場角(Field of view，F(xiàn)OV)為人眼視覺所覆蓋到的視場，視場角圖像也即通常人眼關(guān)注部分的圖像本文檔來自技高網(wǎng)...

【技術(shù)保護(hù)點(diǎn)】

【技術(shù)特征摘要】
1.一種目標(biāo)的追蹤方法，其特征在于，包括：確定待追蹤目標(biāo)在第i幀畫面中所在的檢測框的尺寸、參考中心點(diǎn)坐標(biāo)及所述檢測框中的第一畫面內(nèi)容；根據(jù)所述參考中心點(diǎn)坐標(biāo)、第一參考步長及參考范圍，確定第i+1幀畫面中每個候選框?qū)?yīng)的候選中心點(diǎn)坐標(biāo)；根據(jù)每個所述候選中心點(diǎn)坐標(biāo)及所述檢測框的尺寸，確定每個所述候選框在所述第i+1幀畫面中對應(yīng)的第二畫面內(nèi)容；根據(jù)每個所述第二畫面內(nèi)容與所述第一畫面內(nèi)容間的相似度，確定目標(biāo)候選框；基于所述目標(biāo)候選框?qū)?yīng)的候選中心點(diǎn)坐標(biāo)及第二參考步長，返回執(zhí)行所述確定每個候選框?qū)?yīng)的候選中心點(diǎn)坐標(biāo)的操作，直至滿足預(yù)設(shè)的條件，根據(jù)新確定的候選框中對應(yīng)的第二畫面內(nèi)容與第一畫面內(nèi)容間的相似度，確定所述待追蹤目標(biāo)在所述第i+1幀畫面中的位置，其中，i為自然數(shù)，所述第二參考步長小于所述第一參考步長。2.如權(quán)利要求1所述的方法，其特征在于，所述根據(jù)每個所述候選中心點(diǎn)坐標(biāo)及所述檢測框的尺寸，確定每個所述候選框在所述第i+1幀畫面中對應(yīng)的第二畫面內(nèi)容，包括：根據(jù)每個所述候選中心點(diǎn)坐標(biāo)與所述參考中心點(diǎn)坐標(biāo)，確定每個所述候選框?qū)?yīng)的伸縮系數(shù)；根據(jù)每個所述候選框?qū)?yīng)的伸縮系數(shù)及所述檢測框的尺寸，確定每個所述候選框的尺寸；根據(jù)每個所述候選框?qū)?yīng)的候選中心點(diǎn)及尺寸，確定每個所述候選框在所述i+1幀畫面中對應(yīng)的第二畫面內(nèi)容。3.如權(quán)利要求2所述的方法，其特征在于，所述根據(jù)每個所述候選框?qū)?yīng)的伸縮系數(shù)及所述檢測框的尺寸，確定每個所述候選框的尺寸，包括：根據(jù)每個所述候選中心點(diǎn)坐標(biāo)與所述參考中心點(diǎn)坐標(biāo)間的位置關(guān)系，確定每個所述候選框?qū)?yīng)的變換模式；基于所述變換模式及所述伸縮系數(shù)，將所述檢測框的尺寸進(jìn)行變換，以獲取每個所述候選框的尺寸。4.如權(quán)利要求1所述的方法，其特征在于，在所述基于所述目標(biāo)候選框?qū)?yīng)的候選中心點(diǎn)坐標(biāo)及第二參考步長之前，還包括：根據(jù)所述目標(biāo)候選框?qū)?yīng)的第一相似度，確定所述第二參考步長。5.如權(quán)利要求1所述的方法，其特征在于，所述預(yù)設(shè)的條件包括：執(zhí)行所述確定每個候選框?qū)?yīng)的候選中心點(diǎn)坐標(biāo)的操作的次數(shù)大于或等于第一閾值；和/或，新確定的目標(biāo)候選框?qū)?yīng)的候選中心點(diǎn)坐標(biāo)，與相鄰的前一次目標(biāo)候選框?qū)?yīng)的候選中心點(diǎn)坐標(biāo)間的差值小于第二閾值。6.如權(quán)利要求1
?
5任一所述的方法，其特征在于，所述根據(jù)每個所述候選中心點(diǎn)坐標(biāo)及所述檢測框的尺寸，確定每個所述候選框在所述第i+1幀畫面中對應(yīng)的第二畫面內(nèi)容，包括：確定所述待追蹤的目標(biāo)當(dāng)前對應(yīng)的伸縮系數(shù)；根據(jù)所述伸縮系數(shù)及所述檢測框的尺寸，確定每個所述候選框的尺寸；
根據(jù)每個所述候選框?qū)?yīng)的候選中心點(diǎn)及尺寸，確定每個所述候選框在所述i+1幀畫面中對應(yīng)的第二畫面內(nèi)容。7.如權(quán)利要求6所述的方法，其特征在于，在所述確定所述待追蹤目標(biāo)在所述第i+1幀畫面中的位置之后，還包括：根據(jù)所述待追蹤目標(biāo)在所述第第i+1幀畫面中的位置及所述參考中心點(diǎn)坐標(biāo)，對所述待追蹤目標(biāo)對應(yīng)的伸縮系數(shù)進(jìn)行更新。8.一種目標(biāo)的追蹤裝置，其特征在于，包括：第一確定模塊，用于確定待追蹤目標(biāo)在第i幀畫面中所在的檢測框的尺寸、參考中心點(diǎn)坐標(biāo)及所述檢測框中的第一畫面內(nèi)容；第二確定模塊，用于根...

【專利技術(shù)屬性】
技術(shù)研發(fā)人員：成超，汪賢，魯方波，
申請(專利權(quán))人：北京金山云網(wǎng)絡(luò)技術(shù)有限公司，
類型：發(fā)明
國別省市：