數(shù)據(jù)編碼規(guī)則

來源: 發(fā)布時間:2025-06-28

上訊敏捷數(shù)據(jù)管理平臺ADM采用數(shù)據(jù)庫虛擬化技術(shù)解決了交付業(yè)務數(shù)據(jù)的速度和頻率問題,數(shù)據(jù)的快速和多次提供必然導致數(shù)據(jù)存儲資源的大量占用,因此數(shù)據(jù)庫虛擬化底層必須采用一種節(jié)約存儲的方式來緩解存儲容量的壓力。存儲虛擬化技術(shù)能夠完全滿足這一需求,創(chuàng)建的虛擬數(shù)據(jù)庫實例與原始數(shù)據(jù)庫保持數(shù)據(jù)的一致性和完整性,不占用存儲空間,在初始的虛擬數(shù)據(jù)庫實例中進行增刪改查的操作后,才會產(chǎn)生極少的存儲空間占用,這部分空間相比于原始數(shù)據(jù)庫總?cè)萘?,幾乎接近?。上訊敏捷數(shù)據(jù)管理平臺的合規(guī)性體現(xiàn)在數(shù)據(jù)申請審批流程控制數(shù)據(jù)外流,每一次數(shù)據(jù)申請有跡可循。數(shù)據(jù)編碼規(guī)則

數(shù)據(jù)編碼規(guī)則,上訊敏捷數(shù)據(jù)管理平臺ADM

數(shù)據(jù)隱私安全處理的關(guān)鍵點是:

數(shù)據(jù)源:數(shù)據(jù)庫、文件、大數(shù)據(jù)平臺、消息隊列

敏感信息識別:內(nèi)置敏感信息規(guī)則、自定義敏感信息規(guī)則、敏感信息自動識別、敏感信息增量識別

仿真數(shù)據(jù):豐富的處理算法、保持數(shù)據(jù)業(yè)務屬性、保持數(shù)據(jù)關(guān)聯(lián)性、保持數(shù)據(jù)的一致

效率:操作便捷易用、支持多節(jié)點負載均衡、支持大表拆分處理、支持節(jié)點橫向擴展

通過對隱私數(shù)據(jù)的安全處理,滿足對敏感隱私數(shù)據(jù)的漂白處理,保證充分發(fā)揮數(shù)據(jù)使用價值過程中對數(shù)據(jù)安全的保護要求,將安全和發(fā)展放在數(shù)據(jù)價值挖掘的同等地位,發(fā)揮數(shù)據(jù)要素潛能。 父快照名稱副本數(shù)據(jù)管理技術(shù)可延伸應用到文件、虛擬機的副本創(chuàng)建,其優(yōu)勢在于多份虛擬數(shù)據(jù)副本之間的讀寫操作分離。

數(shù)據(jù)編碼規(guī)則,上訊敏捷數(shù)據(jù)管理平臺ADM

上訊敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品解決方案優(yōu)勢四針對開發(fā)測試環(huán)境測試數(shù)據(jù)的提供提出了解決方案,主要包括三個方面:

100倍數(shù)據(jù)交付效率提升

10TB的數(shù)據(jù)恢復時間由原來的小時級縮短至分鐘級。

10倍工作效率提升

在開發(fā)、測試環(huán)境中,使用者可隨時對虛擬庫做快照標記,快照對應著不同時間的數(shù)據(jù)版本。數(shù)據(jù)版本管理可進行任意標記的快照切換,降低數(shù)據(jù)導入或恢復產(chǎn)生的時間成本,大幅提升工作效率。

10倍存儲空間節(jié)省

首先內(nèi)置存儲池存儲即壓縮的機制可實現(xiàn)約3:1的數(shù)據(jù)存儲壓縮,同時交付的多個虛擬數(shù)據(jù)庫由于共享于一份原始數(shù)據(jù),因此基本不占用額外的存儲空間,隨著交付虛擬數(shù)據(jù)庫的數(shù)量增加,節(jié)約的存儲空間會成倍增加,實際應用場景中至少為用戶節(jié)約10倍的存儲空間。


上訊敏捷數(shù)據(jù)隱私安全處理系統(tǒng)SDM是一款集敏感數(shù)據(jù)的定義識別、敏感數(shù)據(jù)的仿真替換與替換數(shù)據(jù)分發(fā)為一體的靜態(tài)數(shù)據(jù)隱私安全處理系統(tǒng)。針對敏感數(shù)據(jù)識別提供通用數(shù)據(jù)特征庫,敏感數(shù)據(jù)類型包括但不限于個人身份信息、組織機構(gòu)信息、資質(zhì)資格證信息、金融數(shù)據(jù)信息、醫(yī)療數(shù)據(jù)信息、車輛數(shù)據(jù)信息等眾多類別,支持全庫與子集自動掃描識別,包括數(shù)據(jù)內(nèi)容、字段類型、約束關(guān)系均可以實現(xiàn)自動識別,并依據(jù)類型特征加以分類;針對敏感數(shù)據(jù)的仿真替換,內(nèi)置大量數(shù)據(jù)處理算法對敏感數(shù)據(jù)進行隨機化、模糊化、仿真度替換,保證變形后數(shù)據(jù)的完整性、仿真性以及數(shù)據(jù)間的關(guān)聯(lián)關(guān)系保持不變,具備靈活的數(shù)據(jù)抽取組合方式與自助式向?qū)Я鞒蹋行Ы档?span>數(shù)據(jù)隱私安全處理工作的復雜度。敏捷數(shù)據(jù)管理平臺可管理性體現(xiàn)在對交付數(shù)據(jù)使用方的數(shù)據(jù)可以進行集中式管理,可控制版本,可控制使用周期。

數(shù)據(jù)編碼規(guī)則,上訊敏捷數(shù)據(jù)管理平臺ADM

ADM數(shù)據(jù)副本管理功能的價值優(yōu)勢有哪些?可實現(xiàn)測試數(shù)據(jù)多副本快速交付、測試數(shù)據(jù)存儲壓縮節(jié)約成本、測試數(shù)據(jù)版本管理靈活、滿足回歸測試場景、數(shù)據(jù)管理流程集中統(tǒng)一、數(shù)據(jù)拓撲結(jié)構(gòu)可視化、采用高可用部署架構(gòu)保證副本數(shù)據(jù)的高可用性。通過數(shù)據(jù)庫虛擬化技術(shù)的應用,直接利用網(wǎng)絡遠程映射技術(shù)將所需數(shù)據(jù)庫對外進行一對一、一對多的映射,映射的方式避免了數(shù)據(jù)庫文件的物理拷貝,具有點對點連接、速度快的特點,通常幾分鐘內(nèi)可完成一對一的映射。上訊敏捷數(shù)據(jù)管理平臺包括生產(chǎn)數(shù)據(jù)備份、備份恢復校驗、敏感數(shù)據(jù)處理、數(shù)據(jù)副本管理四大功能模塊。國產(chǎn)化備份恢復

敏捷數(shù)據(jù)管理平臺對數(shù)據(jù)版本進行靈活管理,滿足回歸測試等業(yè)務場景。數(shù)據(jù)編碼規(guī)則

敏感數(shù)據(jù)的仿真替換在保障數(shù)據(jù)安全的同時,也滿足了企業(yè)在數(shù)據(jù)分析、測試和開發(fā)等場景中對數(shù)據(jù)的需求。此外,上訊敏捷數(shù)據(jù)管理平臺敏感數(shù)據(jù)處理功能還提供了豐富的角色權(quán)限配置管理選項,確保不同用戶只能訪問其權(quán)限范圍內(nèi)的敏感數(shù)據(jù),進一步增強了數(shù)據(jù)的安全性。同時,系統(tǒng)支持自定義敏感數(shù)據(jù)處理規(guī)則,企業(yè)可以根據(jù)自身業(yè)務需求靈活調(diào)整敏感數(shù)據(jù)處理策略,滿足多樣化的數(shù)據(jù)處理需求。尤其針對金融、醫(yī)療行業(yè)對個人隱私數(shù)據(jù)的保護不僅要求變形替換,也要求變形后仍舊符合數(shù)據(jù)屬性要求,以便于能夠滿足數(shù)據(jù)校驗條件,滿足特定數(shù)據(jù)驗證條件符合性的使用場景。數(shù)據(jù)編碼規(guī)則