【技術(shù)實(shí)現(xiàn)步驟摘要】
本專利技術(shù)涉及人工智能、數(shù)據(jù)挖掘
知識(shí),具體涉及。適用于我國各城市對(duì)該城市海量公共數(shù)據(jù)流有效快速壓縮處理。。
技術(shù)介紹
城市公共安全狀況,是一個(gè)國家競爭力和國家形象的重要標(biāo)志。隨著城市聚集人口和積累財(cái)富的不斷增長,城市的重要性日趨明顯,然而也使其面臨越來越多的安全挑戰(zhàn)。自然災(zāi)害頻度和強(qiáng)度的增大、各類社會(huì)事故的增長以及恐怖主義的威脅,對(duì)城市預(yù)防災(zāi)害及應(yīng)付突發(fā)事件的能力提出了更為嚴(yán)峻的要求。近年來,針對(duì)城市空間數(shù)據(jù)集成與共享,我國先后投入大量資金,設(shè)立專項(xiàng)進(jìn)行應(yīng)用研究。其中代表性的有國家科技攻關(guān)計(jì)劃“中國可持續(xù)發(fā)展信息共享系統(tǒng)的開發(fā)研究”、國家科技發(fā)展專項(xiàng)“國家基礎(chǔ)地質(zhì)數(shù)據(jù)庫整合與集成”等等。這些項(xiàng)目的實(shí)施,大大促進(jìn)了我國科學(xué)數(shù)據(jù)共享和數(shù)據(jù)社會(huì)化服務(wù)程度的提高。尤其是“科學(xué)數(shù)據(jù)共享工程”的實(shí)施,從理論基礎(chǔ)、法律法規(guī)體系建設(shè)、科學(xué)數(shù)據(jù)共享機(jī)制、標(biāo)準(zhǔn)體系建設(shè)、科學(xué)數(shù)據(jù)共享工程的總體框架、技術(shù)平臺(tái)框架等方面進(jìn)行了卓有成效的研究。例如科學(xué)數(shù)據(jù)共享工程科學(xué)數(shù)據(jù)共享工程是在國家科技基礎(chǔ)條件平臺(tái)統(tǒng)一規(guī)劃、政策調(diào)控和相應(yīng)法規(guī)的保障下,應(yīng)用現(xiàn)代信息技術(shù),整合離散的科學(xué)數(shù)據(jù)資源,構(gòu)建面向全社會(huì)的網(wǎng)絡(luò)化、智能化的管理與共享服務(wù)體系,實(shí)現(xiàn)對(duì)科學(xué)數(shù)據(jù)資源的規(guī)范化管理及其高效利用。數(shù)據(jù)融合技術(shù)作為信息處理關(guān)鍵技術(shù)之一,是指利用計(jì)算機(jī)對(duì)按時(shí)序獲得的若干觀測信息,在一定準(zhǔn)則下加以自動(dòng)分析、綜合,以完成所需的決策和評(píng)估任務(wù),包括對(duì)各種信息源給出的有用信息的采集、傳輸、綜合、過濾、相關(guān)及合成,以便輔助人們進(jìn)行態(tài)勢(shì)/環(huán)境判定、規(guī)劃、探測、驗(yàn)證、診斷。根據(jù)融合前后數(shù)據(jù)信息含量差別,數(shù)據(jù)融合可 ...
【技術(shù)保護(hù)點(diǎn)】
一種基于小波時(shí)序樹狀概要的城市公共數(shù)據(jù)流融合方法,其特征在于:所述融合方法包括以下步驟:1)數(shù)據(jù)預(yù)處理:開始到達(dá)的數(shù)據(jù)作為第0層,每一時(shí)間段到達(dá)的數(shù)據(jù)流片段平均包含m個(gè)數(shù)據(jù),假設(shè)每m個(gè)數(shù)據(jù)組成一個(gè)子序列,記為di,對(duì)di進(jìn)行預(yù)處理,包括對(duì)數(shù)據(jù)進(jìn)行空缺值處理,去離群點(diǎn);2)壓縮處理:對(duì)每m個(gè)數(shù)據(jù)di進(jìn)行壓縮操作,生成第1層的壓縮數(shù)據(jù)節(jié)點(diǎn)Pi,i=(1,2,3…),構(gòu)造一個(gè)非線性衰減函數(shù):fi=-αe-(ti-t0)+β---(1)其中:α,β為衰減速度因子,α+β=1,α>β,α,β∈[0,1],用于對(duì)衰減函數(shù)進(jìn)行調(diào)整以提高精確度,t0表示初始時(shí)刻,則在時(shí)刻ti,數(shù)據(jù)節(jié)點(diǎn)Pi的加權(quán)值為Pifi,數(shù)據(jù)節(jié)點(diǎn)的壓縮采用離散小波變換變換,Φ分量中保存變換得到的r個(gè)最重要的小波系數(shù);隨著新數(shù)據(jù)的不斷到來,第1層上的壓縮數(shù)據(jù)節(jié)點(diǎn)不斷增加,達(dá)到設(shè)定數(shù)量時(shí),將最老的m個(gè)數(shù)據(jù)節(jié)點(diǎn){P1’,P2’,...,Pm’}進(jìn)行歸并,合并成第2層上的一個(gè)數(shù)據(jù)節(jié)點(diǎn),并計(jì)算數(shù)據(jù)節(jié)點(diǎn)的概要信息,以此逐層向上,從而使得該數(shù)據(jù)流總是被壓縮成一組分層次的數(shù)據(jù)節(jié)點(diǎn);在整個(gè)計(jì)算過程中,內(nèi)存中始終只存儲(chǔ)n個(gè)數(shù)據(jù)節(jié) ...
【技術(shù)特征摘要】
1.一種基于小波時(shí)序樹狀概要的城市公共數(shù)據(jù)流融合方法,其特征在于所述融合方法包括以下步驟 1)數(shù)據(jù)預(yù)處理開始到達(dá)的數(shù)據(jù)作為第O層,每ー時(shí)間段到達(dá)的數(shù)據(jù)流片段平均包含m個(gè)數(shù)據(jù),假設(shè)每m個(gè)數(shù)據(jù)組成ー個(gè)子序列,記為Cli,對(duì)Cli進(jìn)行預(yù)處理,包括對(duì)數(shù)據(jù)進(jìn)行空缺值處理,去離群點(diǎn); 2)壓縮處理對(duì)每m個(gè)數(shù)據(jù)も進(jìn)行壓縮操作,生成第I層的壓縮數(shù)據(jù)節(jié)點(diǎn)Pi...
【專利技術(shù)屬性】
技術(shù)研發(fā)人員:陳庭貴,許翀寰,
申請(qǐng)(專利權(quán))人:浙江工商大學(xué),
類型:發(fā)明
國別省市:
還沒有人留言評(píng)論。發(fā)表了對(duì)其他瀏覽者有用的留言會(huì)獲得科技券。