【技術實現步驟摘要】
本專利技術涉及數據同步處理，特別是一種移動端離線雙向數據同步的方法及系統。
技術介紹
1、電力企業移動信息化已經進入了全面應用階段，在生產、管理、服務等各個環節發揮著重要作用。但由于電力設施分布廣泛，部分地區網絡覆蓋不佳；電力系統的核心設施、重要生產場所存在禁止布設互聯網的要求，移動終端常常得面對無網狀態下執行業務的場景，離線數據同步也變成了一個需要解決的難題。
2、現有的離線數據同步方法主要依賴于簡單的時間戳比較或基于服務器的沖突解決機制，常規方法無法高效處理大規模數據和頻繁的沖突情況，尤其在移動端設備資源受限的情況下。
技術實現思路
1、鑒于現有的移動離線數據同步存在的問題，提出了本專利技術。
2、因此，本專利技術所要解決的問題在于如何解決電力企業移動終端在無網絡狀態下的數據同步難題，確保數據的完整性和正確性。
3、為解決上述技術問題，本專利技術提供如下技術方案：
4、第一方面，本專利技術實施例提供了一種移動端離線雙向數據同步的方法，其包括，初始化整表同步機制，建立業務表-數據主鍵-子表主鍵-類型分層的文件映射結構；用戶在離線狀態下進行數據操作，記錄所述數據操作詳情，并將所述數據操作存儲在本地緩存中；當網絡連接恢復時，啟動整表同步機制，進行數據壓縮與分塊，向服務器發送同步請求，并進行分段數據傳輸；服務器接收數據后，利用文件映射機制進行數據存儲和管理；利用多版本并行管理機制檢測潛在沖突，并進行沖突解決，解決沖突后，將數據與本地數據合
5、作為本專利技術所述移動端離線雙向數據同步的方法的一種優選方案，其中：所述進行數據壓縮與分塊包括以下內容：定義數據壓縮與分塊參數集合cdp＝{cm,bs,ct}，其中，cm表示壓縮方法，bs表示塊大小，ct表示壓縮閾值；cm＝{lz,gzip,deflate}，表示可選的壓縮算法，包括lz77、gzip和deflate；bs表示每個數據塊的最大字節數；ct表示觸發壓縮的數據大小閾值，單位為字節；遍歷本地緩存集合lc中的每個緩存數據項cdi：計算cdi的數據大小size(cdi)，如果size(cdi)>ct，則進行壓縮：選擇cm中的一種壓縮方法，壓縮該緩存數據項的內容部分，得到壓縮后的數據comcontent；否則，保持該緩存數據項的內容不變；對壓縮后的數據進行分塊：如果size(comcontent)>bs：則將comcontent分割成大小為bs的塊，生成塊索引bi＝{b1,b2,...bi,...,bk}，其中，bi＝[bid,offset,length]，bid表示塊id，offset表示在壓縮數據中的偏移量，length表示塊長度；否則，則將整個comcontent作為一個塊，并更新緩存數據項。
6、作為本專利技術所述移動端離線雙向數據同步的方法的一種優選方案，其中：所述進行數據壓縮與分塊還包括：壓縮率計算函數如下：
7、
8、其中，為原始數據內容，未經過壓縮的數據項內容；為壓縮后的數據內容，經過壓縮算法處理的數據項內容；設置壓縮效果評估閾值cet，如果com(cdn)<cet，則改變壓縮方法或調整參數。
9、作為本專利技術所述移動端離線雙向數據同步的方法的一種優選方案，其中：所述服務器接收數據后，利用文件映射機制進行數據存儲和管理包括以下步驟：移動端發送同步下載請求至服務器端，服務器端根據請求組織數據和文件，并將其打包data.zip文件發送至移動端；移動端接收到data.zip文件后進行解壓和解析，更新本地數據庫和本地存儲；移動端在離線狀態下，新增或修改的數據標記為離線數據，設定統一的文件標識符；當移動端處于在線狀態時，根據解析接收到的json格式數據，提取業務表數據、文件信息和元數據，根據建立的業務表-數據主鍵-子表主鍵-類型分層的文件映射結構，將數據映射到相應的數據庫表和文件存儲位置。
10、作為本專利技術所述移動端離線雙向數據同步的方法的一種優選方案，其中：移動端處于在線狀態時，將本地數據庫中新增或修改的數據和文件以相同格式回傳至服務器端，更新中央數據庫和文件服務器；服務器端對導入的數據和文件進行校驗，確保數據完整性和一致性包括：使用非對稱加密算法對整個數據包進行簽名，在接收端使用公鑰驗證簽名；對每個文件計算sha-256和md5的聯合校驗和，公式如下：
11、hsha256＝sha-256(f)
12、hmd5＝md5(f)
13、生成聯合校驗和hcom如下：
14、hcom＝hsha256‖hmd5
15、其中，f為文件，hsha256為sha-256哈希值，hmd5為md5哈希值。
16、作為本專利技術所述移動端離線雙向數據同步的方法的一種優選方案，其中：所述利用多版本并行管理機制檢測潛在沖突包括：設本地數據版本為dlocal，服務器數據版本為dserver，數據項di；本地數據版本集合為：
17、vlocal＝{v1,local,v2,local,...,vn,local}；服務器數據版本集合：vserver＝
18、{v1,server,v2,server,...,vn,server}；對于每個數據項di如果在本地數據版本和服務器數據版本之間存在不同的修改，即：且則認為存在潛在沖突；所述進行沖突解決包括：設回溯操作序列集合為olocal和oserver，通過回溯操作序列，確定每個數據項的修改歷史；每個操作的優先級pi由對應權重ωi和時間戳ti決定，計算公式為：
19、pi＝ωi+f(ti)
20、
21、其中，σ是衰減常數；根據優先級自動選擇高優先級操作進行應用，如果優先級相同或難以自動解決，提示用戶手動解決。
22、作為本專利技術所述移動端離線雙向數據同步的方法的一種優選方案，其中：所述采用多線程技術包括：測量網絡參數，包括帶寬b、延遲l和丟包率p，計算網絡質量評分：
23、nq＝w1×(b/bmax)+w2×(1-l/lmax)+w3×(1-p)
24、其中，w1～w3分別是權重因子，bmax和lmax是預設的最大帶寬和延遲閾值；測量設備參數，包括cpu使用率c，可用內存m和電池電量e，設備性能評分dp為：
25、dp＝v1×(1-c/cmax)+v2×(m/mmax)+v3×(e/100)
26、其中，v1～v3分別是權重因子，cmax和mmax是cpu和內存的最大值；動態確定最優線程數包括以下步驟：
27、tbase＝ceil(nq×dp×tmax)
28、tadj＝tbase×(1+log(s/s0))
29、tz＝min(max(tadj,1),tmax)
30、其中，tbase為基礎線程數，本文檔來自技高網...
【技術保護點】
1.一種移動端離線雙向數據同步的方法，其特征在于：包括，
2.如權利要求1所述的移動端離線雙向數據同步的方法，其特征在于：所述進行數據壓縮與分塊包括以下內容：
3.如權利要求2所述的移動端離線雙向數據同步的方法，其特征在于：所述進行數據壓縮與分塊還包括：
4.如權利要求3所述的移動端離線雙向數據同步的方法，其特征在于：所述服務器接收數據后，利用文件映射機制進行數據存儲和管理包括以下步驟：
5.如權利要求4所述的移動端離線雙向數據同步的方法，其特征在于：移動端處于在線狀態時，將本地數據庫中新增或修改的數據和文件以相同格式回傳至服務器端，更新中央數據庫和文件服務器；
6.如權利要求5所述的移動端離線雙向數據同步的方法，其特征在于：所述利用多版本并行管理機制檢測潛在沖突包括：
7.如權利要求6所述的移動端離線雙向數據同步的方法，其特征在于：所述采用多線程技術包括：
8.一種移動端離線雙向數據同步的系統，基于權利要求1～7任一所述的移動端離線雙向數據同步的方法，其特征在于：還包括，
9.一種計
10.一種計算機可讀存儲介質，其上存儲有計算機程序，其特征在于：所述計算機程序被處理器執行時實現權利要求1～7任一所述的移動端離線雙向數據同步的方法的步驟。
...【技術特征摘要】
1.一種移動端離線雙向數據同步的方法，其特征在于：包括，
2.如權利要求1所述的移動端離線雙向數據同步的方法，其特征在于：所述進行數據壓縮與分塊包括以下內容：
3.如權利要求2所述的移動端離線雙向數據同步的方法，其特征在于：所述進行數據壓縮與分塊還包括：
4.如權利要求3所述的移動端離線雙向數據同步的方法，其特征在于：所述服務器接收數據后，利用文件映射機制進行數據存儲和管理包括以下步驟：
5.如權利要求4所述的移動端離線雙向數據同步的方法，其特征在于：移動端處于在線狀態時，將本地數據庫中新增或修改的數據和文件以相同格式回傳至服務器端，更新中央數據庫和文件服務器；
6.如權利要求5所述的移動端離線雙...
【專利技術屬性】
技術研發人員：袁存發，李明羽，李輝，徐斌宇，耿天濤，徐興云，丁夢杰，
申請(專利權)人：朗坤智慧科技股份有限公司，
類型：發明
國別省市：
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。