通過(guò)有選擇地僅對(duì)幀的部分進(jìn)行編碼并且改為使用先前編碼的部分，視頻分析可用來(lái)幫助視頻編碼。當(dāng)后續(xù)幀具有小于閾值的運(yùn)動(dòng)等級(jí)時(shí)，可使用先前編碼的部分。在這種情況下，在一些實(shí)施例中，后續(xù)幀的全部或部分可以不被編碼，從而增加帶寬和速度。
【技術(shù)實(shí)現(xiàn)步驟摘要】
【國(guó)外來(lái)華專利技術(shù)】用于視頻分析的存儲(chǔ)器前瞻引擎
技術(shù)介紹
這一般涉及計(jì)算機(jī)，以及具體涉及視頻處理。存在必須處理和/或存儲(chǔ)視頻的多種應(yīng)用。一個(gè)示例是視頻監(jiān)控，其中為了安全性或其它目的，可接收、分析和處理一個(gè)或多個(gè)視頻饋送。另一種常規(guī)應(yīng)用是用于電視會(huì)議。通常，通用處理器、例如中央處理器用于視頻處理。在一些情況下，稱作圖形處理器的專用處理器可輔助中央處理器。視頻分析涉及得到與視頻信息的內(nèi)容有關(guān)的信息。例如，視頻處理可包括內(nèi)容分析，其中分析內(nèi)容視頻，以便檢測(cè)某些事件或事故，或者查找感興趣信息。【附圖說(shuō)明】針對(duì)下列附圖來(lái)描述一些實(shí)施例: 圖1是按照本專利技術(shù)的一個(gè)實(shí)施例的系統(tǒng)架構(gòu)； 圖2是按照一個(gè)實(shí)施例、圖1所示的視頻分析引擎的電路圖示； 圖3是按照本專利技術(shù)的一個(gè)實(shí)施例的視頻捕獲的流程圖； 圖4是按照一個(gè)實(shí)施例的二維矩陣存儲(chǔ)器的流程圖； 圖5是按照一個(gè)實(shí)施例的分析輔助編碼的流程圖； 圖6是另一個(gè)實(shí)施例的流程圖； 圖7是按照一個(gè)實(shí)施例、圖2所示存儲(chǔ)控制器的圖示； 圖8是按照一個(gè)實(shí)施例的存儲(chǔ)控制器的流程圖； 圖9是示出編碼器暫存器(scratchpad)的一個(gè)實(shí)施例的示意圖； 圖10是一個(gè)實(shí)施例的視頻捕獲接口的不意圖；以及 圖11是一個(gè)實(shí)施例的流程圖。【具體實(shí)施方式】按照一些實(shí)施例，視頻分析引擎的存儲(chǔ)控制器可通過(guò)自動(dòng)訪問(wèn)主存儲(chǔ)器中的整個(gè)矩陣或者主存儲(chǔ)器中的任何存儲(chǔ)位置，來(lái)促進(jìn)存儲(chǔ)器操作。在一些實(shí)施例中，主存儲(chǔ)器可存儲(chǔ)二維(2D)表示，其使存儲(chǔ)控制器隨機(jī)訪問(wèn)存儲(chǔ)器矩陣中的任何位置(包括一個(gè)像素)。在一些實(shí)施例中，內(nèi)部存儲(chǔ)器可表示為2D存儲(chǔ)器矩陣，以及外部存儲(chǔ)器可以是常規(guī)線性存儲(chǔ)器。線性存儲(chǔ)器中存儲(chǔ)的數(shù)據(jù)則可轉(zhuǎn)換成二維格式，以供視頻分析引擎中使用。參照?qǐng)D1，計(jì)算機(jī)系統(tǒng)10可以是多種計(jì)算機(jī)系統(tǒng)的任一種，包括使用視頻分析(例如視頻監(jiān)控和電視會(huì)議應(yīng)用)的那些計(jì)算機(jī)系統(tǒng)以及不使用視頻分析的實(shí)施例。系統(tǒng)10可以是臺(tái)式計(jì)算機(jī)、服務(wù)器、膝上型計(jì)算機(jī)、移動(dòng)因特網(wǎng)裝置或蜂窩電話，這里只舉幾個(gè)例子。系統(tǒng)10可具有耦合到系統(tǒng)總線14的一個(gè)或多個(gè)主中央處理器12。系統(tǒng)存儲(chǔ)器22可耦合到系統(tǒng)總線14。雖然提供主機(jī)系統(tǒng)架構(gòu)的示例，但是本專利技術(shù)決不局限于任何特定系統(tǒng)架構(gòu)。系統(tǒng)總線14可耦合到總線接口 16，其又耦合到常規(guī)總線18。在一個(gè)實(shí)施例中，可使用外設(shè)部件互連高速(Perihperal Component Interconnect Express, PCIe)總線，但是本專利技術(shù)決不局限于任何特定總線。視頻分析引擎20可經(jīng)由總線18耦合到主機(jī)。在一個(gè)實(shí)施例中，視頻分析引擎可以是單個(gè)集成電路，其提供編碼和視頻分析。在一個(gè)實(shí)施例中，集成電路可使用嵌入式動(dòng)態(tài)隨機(jī)訪問(wèn)存儲(chǔ)器(EDRAM)技術(shù)。但是，在一些實(shí)施例中，可免除編碼或視頻分析。另外，在一些實(shí)施例中，引擎20可包括存儲(chǔ)控制器，其控制板載集成二維矩陣存儲(chǔ)器以及提供與外部存儲(chǔ)器的通信。因此，在圖1所示的實(shí)施例中，視頻分析引擎20與本地動(dòng)態(tài)隨機(jī)訪問(wèn)存儲(chǔ)器(DRAM) 19進(jìn)行通信。具體來(lái)說(shuō)，視頻分析引擎20可包括用于訪問(wèn)存儲(chǔ)器19的存儲(chǔ)控制器。備選的是，引擎20可使用系統(tǒng)存儲(chǔ)器22，并且可包括到系統(tǒng)存儲(chǔ)器的直接連接。也耦合到視頻分析引擎20的可以是一個(gè)或多個(gè)攝像機(jī)24。在一些實(shí)施例中，可接收按照標(biāo)準(zhǔn)清晰度格式的總共四個(gè)同時(shí)視頻輸入。在一些實(shí)施例中，可對(duì)三個(gè)輸入提供一個(gè)高清晰度輸入，以及可對(duì)第四輸入提供一個(gè)標(biāo)準(zhǔn)清晰度。在其它實(shí)施例中，可提供更多或更少的高清晰度輸入，以及可提供更多或更少的標(biāo)準(zhǔn)清晰度輸入。作為一個(gè)示例，三個(gè)輸入的每個(gè)可接收高清晰度輸入數(shù)據(jù)的10位，例如R、G和B輸入或者Y、U和V輸入，各在分離的10位輸入線上。在頁(yè)面頂部具有四個(gè)攝像機(jī)通道輸入的一實(shí)施例中示出圖2所示的視頻分析引擎20的一個(gè)實(shí)施例。四個(gè)輸入可由視頻捕獲接口 26來(lái)接收。視頻捕獲接口 26可接收采取攝像機(jī)輸入或其它視頻信息的形式的多個(gè)同時(shí)視頻輸入，包括電視機(jī)、數(shù)字錄像機(jī)或媒體播放器輸入、這里只舉幾個(gè)例子。視頻捕獲接口自動(dòng)捕獲和復(fù)制各輸入幀。將輸入幀的一個(gè)副本提供給VAFF單元66，以及另一副本可提供給VEFF單元68。VEFF單元68負(fù)責(zé)將視頻存儲(chǔ)在外部存儲(chǔ)器、例如圖1所示的存儲(chǔ)器22上。在一個(gè)實(shí)施例中，外部存儲(chǔ)器可耦合到芯片上系統(tǒng)存儲(chǔ)控制器/仲裁器50。在一些實(shí)施例中，外部存儲(chǔ)器上的存儲(chǔ)可用于視頻編碼目的。具體來(lái)說(shuō)，如果一個(gè)副本存儲(chǔ)在外部存儲(chǔ)器上，則它能夠由視頻編碼器32來(lái)訪問(wèn)，以用于按照預(yù)期格式對(duì)信息進(jìn)行編碼。在一些實(shí)施例中，多種格式是可用的，以及系統(tǒng)可選擇最合乎需要的特定編碼格式。如上所述，在一些情況下，視頻分析可用來(lái)改進(jìn)視頻編碼器32所實(shí)現(xiàn)的編碼過(guò)程的效率。一旦幀被編碼，它們可經(jīng)由PCI高速總線36提供給主機(jī)系統(tǒng)。同時(shí)，輸入視頻幀的其它副本存儲(chǔ)在二維矩陣或主存儲(chǔ)器28上。VAFF可同時(shí)處理和傳送全部四個(gè)輸入視頻通道。VAFF可包括四個(gè)復(fù)制的單元，以處理和傳送視頻。存儲(chǔ)器28的視頻的傳送可使用復(fù)用。由于視頻回掃時(shí)間中固有的延遲，在一些實(shí)施例中，多個(gè)通道的傳遞能夠?qū)崟r(shí)進(jìn)行。主存儲(chǔ)器上的存儲(chǔ)可有選擇地非線性或線性地被實(shí)現(xiàn)。在常規(guī)線性尋址中，指定相交尋址線上的一個(gè)或多個(gè)位置，以訪問(wèn)存儲(chǔ)器位置。在一些情況下，可指定尋址線、例如字或位線，以及可指示沿那個(gè)字或位線的延展度(extent)，使得尋址存儲(chǔ)器線的一部分可按照自動(dòng)方式被接連存儲(chǔ)。相比之下，在二維或非線性尋址中，可在一個(gè)操作訪問(wèn)行和列線。操作可指定存儲(chǔ)器矩陣中的初始點(diǎn)，例如，在兩個(gè)尋址線、例如行或列線的相交處。然后，提供存儲(chǔ)器大小或另一定界符，以指示兩個(gè)維度中的矩陣的延展度(例如沿行和列線)。一旦指定初始點(diǎn)，整個(gè)矩陣可通過(guò)可尋址位置的自動(dòng)化遞增來(lái)自動(dòng)存儲(chǔ)。換言之，不需要回到主機(jī)或其它裝置以確定初始點(diǎn)之后、用于存儲(chǔ)存儲(chǔ)器矩陣的后續(xù)部分的地址。二維存儲(chǔ)器卸載生成地址的任務(wù)或者將其基本上完全消除。因此，在一些實(shí)施例中，所需帶寬和訪問(wèn)時(shí)間均可減少。基本上，相同操作可反向進(jìn)行，以讀二維存儲(chǔ)器矩陣。備選的是，二維存儲(chǔ)器矩陣也可使用常規(guī)線性尋址來(lái)訪問(wèn)。雖然給出其中指定存儲(chǔ)器矩陣的大小的示例，但是也可提供其它定界符，包括兩個(gè)維度的每個(gè)的延展度(即，沿字和位線)。二維存儲(chǔ)器對(duì)靜止和運(yùn)動(dòng)圖像、圖表以及具有兩個(gè)維度的數(shù)據(jù)的其它應(yīng)用是有利的。信息能夠按照兩個(gè)維度或者按照一個(gè)維度來(lái)存儲(chǔ)在存儲(chǔ)器28中。在一個(gè)實(shí)施例中，一個(gè)與兩個(gè)維度之間的轉(zhuǎn)換能夠通過(guò)硬件自動(dòng)地即時(shí)進(jìn)行。在一些實(shí)施例中，多個(gè)流的視頻編碼可在視頻編碼器中進(jìn)行，同時(shí)多個(gè)流也在視頻分析功能單元42中經(jīng)過(guò)分析。這可通過(guò)下列步驟來(lái)實(shí)現(xiàn):在視頻捕獲接口 26制作每個(gè)流的副本，并且向視頻編碼器32發(fā)送每個(gè)流的一組副本，而另一個(gè)副本轉(zhuǎn)到視頻分析功能單元42。在一個(gè)實(shí)施例中，多個(gè)流的每個(gè)的時(shí)間復(fù)用可在視頻編碼器32的每個(gè)和視頻分析功能單元42中進(jìn)行。例如，基于用戶輸入，來(lái)自第一流的一個(gè)或多個(gè)幀可被編碼，之后接著來(lái)自第二流的一個(gè)或多個(gè)幀，之后接著來(lái)自下一個(gè)流的一個(gè)或多個(gè)流，依此類推。類似地，時(shí)間復(fù)用可按照相同方式用于視頻分析功能單元42中，其中基于用戶輸入，來(lái)自一個(gè)流的一個(gè)或多個(gè)幀經(jīng)過(guò)視頻分析，然后是來(lái)自下一個(gè)流的一個(gè)或多個(gè)幀，依此類推。因此，一系列本文檔來(lái)自技高網(wǎng)...
【技術(shù)保護(hù)點(diǎn)】
一種方法，包括：從外部存儲(chǔ)器將數(shù)據(jù)預(yù)取到緩沖器；從所述緩沖器非間斷地讀數(shù)據(jù)；以及在連續(xù)傳遞中將所述數(shù)據(jù)傳遞給視頻編碼器。
【技術(shù)特征摘要】
【國(guó)外來(lái)華專利技術(shù)】1.一種方法，包括: 從外部存儲(chǔ)器將數(shù)據(jù)預(yù)取到緩沖器； 從所述緩沖器非間斷地讀數(shù)據(jù)；以及 在連續(xù)傳遞中將所述數(shù)據(jù)傳遞給視頻編碼器。2.如權(quán)利要求1所述的方法，其中，讀包括使用直接存儲(chǔ)器訪問(wèn)。3.如權(quán)利要求1所述的方法，包括提供兩個(gè)芯片上編碼器。4.如權(quán)利要求3所述的方法，包括提供各編碼器的先進(jìn)先出緩沖器。5.如權(quán)利要求4所述的方法，包括將數(shù)據(jù)從所述外部存儲(chǔ)器傳遞給所述緩沖器之一。6.如權(quán)利要求1所述的方法，包括通過(guò)生成分離的Y、U和V地址來(lái)進(jìn)行讀。7.如權(quán)利要求6所述的方法，包括使用配置和狀態(tài)寄存器表來(lái)生成所述地址。8.一種存儲(chǔ)指令的非暫態(tài)計(jì)算機(jī)可讀媒體，所述指令使處理器能夠執(zhí)行包括下列步驟的方法: 從外部存儲(chǔ)器將數(shù)據(jù)預(yù)取到緩沖器； 從所述緩沖器非間斷地讀數(shù)據(jù)；以及 在連續(xù)傳遞中將所述 數(shù)據(jù)傳遞給視頻編碼器。9.如權(quán)利要求8所述的媒體，其中，讀包括使用直接存儲(chǔ)器訪問(wèn)。10.如權(quán)利要求8所述的媒體，包括提供兩個(gè)芯片上編碼器。11...
【專利技術(shù)屬性】
技術(shù)研發(fā)人員：JM羅德里格斯，N多達(dá)普內(nèi)尼，A米什拉，
申請(qǐng)(專利權(quán))人：英特爾公司，
類型：發(fā)明
國(guó)別省市：美國(guó);US
還沒(méi)有人留言評(píng)論。發(fā)表了對(duì)其他瀏覽者有用的留言會(huì)獲得科技券。