一種在集群中快速遷移海量空間數據的方法技術

本發明專利技術公開了一種在集群中快速遷移海量異構空間數據的方法，屬于數據遷移技術領域。該方法步驟如下：一、建立存儲影像數據的集群；二、集群中的每臺主機建立剖分索引gsot文件；三、管理節點實時讀取每臺主機中的剖分索引gsot文件，建立索引總表；四、接收主機發送設定的遷移編碼至管理節點；五、管理節點提取與遷移編碼匹配的索引碼及其對應的索引項目或嵌套索引碼及其對應的索引項目；六、管理節點將提取的索引碼及其索引項目和嵌套索引碼及其索引項目建立索引子表，并按照索引子表的索引項目，獲取影像或者影像面片；七、管理節點將獲得的影像或者影像面片傳輸至接收主機。本方法適用于對集群中的海量多源異構數據進行快速遷移。

【技術實現步驟摘要】

【技術保護點】
一種在集群中快速遷移海量空間數據的方法，其特征在于，包括如下步驟：步驟一、建立影像數據的集群存儲系統；集群存儲系統中每臺主機均存儲具有地理范圍的影像；步驟二、每臺主機對于所述影像，建立剖分索引gsot文件：所述的剖分索引gsot文件包括影像號和面片號，所述影像號為：在采用GeoSOT剖分體系對全球地理進行剖分所獲得的各層級GeoSOT面片中，找到一個包含單幅影像的地理范圍的最小GeoSOT面片，對所述面片使用GeoSOT編碼方案進行編碼，獲得的編碼即為影像號；所述面片號為：使用設定層級的GeoSOT面片對影像進行剖分，得到覆蓋影像的剖分面片集合；使用GeoSOT編碼方案對得到的剖分面片集合中各剖分面片進行編碼，記為面片號；步驟三、選取集群存儲系統中一臺主機作為管理節點，管理節點實時讀取每臺主機中所存儲的剖分索引gsot文件，存入事先建立的索引總表中；索引總表包括影像號及其對應影像索引信息、面片號及其對應剖分面片索引信息，所述影像索引信息為包含影像存儲位置在內的信息，所述剖分面片索引信息為包含剖分面片在所屬影像中的位置以及剖分面片所屬影像的存儲位置在內的信息；步驟四、接收主機發送設定的遷移編碼至管理節點；所述遷移編碼的設定方法如下：接收主機根據待遷移數據所對應的地理范圍，在采用GeoSOT剖分體系對全球地理進行剖分所獲得的各層級GeoSOT面片中，找到一個包含待遷移數據所對應的地理范圍的最小GeoSOT面片，記為遷移面片，對該遷移面片使用GeoSOT編碼方案進行編碼，則獲得遷移編碼；步驟五、管理節點將遷移編碼分別與索引總表中的影像號和面片號由左至右進行匹配，獲取與遷移編碼匹配一致且長度等于或者長于遷移編碼長度的影 像號或者面片號，對所述獲取到的影像號提取其對應影像索引信息，對所述獲取到的面片號提取其對應剖分面片索引信息；步驟六、管理節點將所述步驟五提取的影像號及其對應影像索引信息或者面片號及其對應剖分面片索引信息存入事先建立的索引子表，管理節點按照索引子表的影像索引信息或剖分面片索引信息獲取影像或者剖分面片；步驟七、管理節點將上述步驟六中獲得的影像或者剖分面片傳輸至接收主機。...

【技術特征摘要】

【專利技術屬性】
技術研發人員：程承旗，濮國梁，席福彪，
申請(專利權)人：北京大學，
類型：發明
國別省市：