數(shù)據(jù)中臺(tái)被譽(yù)為大數(shù)據(jù)的下一站,核心思想是數(shù)據(jù)共享。數(shù)據(jù)中臺(tái)距離業(yè)務(wù)更近,可以為業(yè)務(wù)提供速度更快的服務(wù)。數(shù)據(jù)中臺(tái)將數(shù)據(jù)生產(chǎn)為數(shù)據(jù)API 服務(wù),以更高效的方式提供給業(yè)務(wù),是加速企業(yè)從數(shù)據(jù)到業(yè)務(wù)價(jià)值過程的中間層。
數(shù)據(jù)中臺(tái)存在哪些數(shù)據(jù)安全隱患?
數(shù)據(jù)中臺(tái)天然具有開放性和高效性的特點(diǎn),強(qiáng)調(diào)效率的同時(shí)帶來了不容忽視的數(shù)據(jù)安全隱患。在數(shù)據(jù)中臺(tái)中,數(shù)據(jù)全生命周期涉及到的安全風(fēng)險(xiǎn)涵蓋了數(shù)據(jù)采集、數(shù)據(jù)傳輸、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)處理、交換共享使用五個(gè)環(huán)節(jié)。


昂楷新技術(shù)攻克數(shù)據(jù)中臺(tái)安全問題
昂楷科技磐石研究院針對(duì)國內(nèi)主要的阿里云、華為云數(shù)據(jù)中臺(tái)的數(shù)據(jù)特性和業(yè)務(wù)支撐要求:
API類型多,需要兼顧各種場(chǎng)景的數(shù)據(jù)共享;
數(shù)據(jù)量大,每日增量數(shù)據(jù)量大;
業(yè)務(wù)快速響應(yīng),脫敏實(shí)時(shí)性高;
脫敏工作量巨大,系統(tǒng)承載高等。
集中精力攻克難關(guān),聚焦于這兩類數(shù)據(jù)中臺(tái)打造數(shù)據(jù)中臺(tái)安全脫敏系統(tǒng),成功實(shí)現(xiàn)了阿里云RDS、阿里云Maxcompute、華為云 FusionInsight、華為云GaussDB(DWS)數(shù)據(jù)中臺(tái)的數(shù)據(jù)脫敏。云數(shù)據(jù)中臺(tái)和數(shù)據(jù)脫敏的架構(gòu)關(guān)系如下圖所示:
云數(shù)據(jù)中臺(tái)作為后臺(tái)的數(shù)據(jù)資源重組機(jī)構(gòu),承擔(dān)著業(yè)務(wù)數(shù)據(jù)向數(shù)據(jù)資產(chǎn)的轉(zhuǎn)化。重整后數(shù)據(jù)價(jià)值進(jìn)一步提高,并且可以直接由數(shù)據(jù)資產(chǎn)轉(zhuǎn)化價(jià)值資源。所以在中臺(tái)部分必須重構(gòu)數(shù)據(jù)安全方案,同時(shí)按照數(shù)據(jù)使用的業(yè)務(wù)環(huán)境進(jìn)行目標(biāo)牽引。數(shù)據(jù)脫敏整體方案示意圖如下:
數(shù)據(jù)脫敏支持容器云場(chǎng)景下,通過集群部署架構(gòu),管理多臺(tái)脫敏系統(tǒng)實(shí)現(xiàn)并行計(jì)算、負(fù)載均衡、任務(wù)單元智能分配,以及故障節(jié)點(diǎn)自動(dòng)接管。針對(duì)數(shù)據(jù)中臺(tái)業(yè)務(wù)量大的特征,采用多線程技術(shù)優(yōu)化中間過程。
集群部署模式價(jià)值點(diǎn)
第一,性能大幅度提升。通過集群部署,增加了脫敏處理的吞吐量,滿足了客戶在有限時(shí)間周期內(nèi)大數(shù)據(jù)量脫敏處理的應(yīng)用場(chǎng)景。
第二,系統(tǒng)高可用。彌補(bǔ)了單一脫敏設(shè)備在數(shù)據(jù)處理過程中遇到網(wǎng)絡(luò)環(huán)境異常、設(shè)備異常等突發(fā)事件帶來的任務(wù)中斷,保證系統(tǒng)的高可用性。
脫敏針對(duì)云數(shù)據(jù)中臺(tái)生命周期過程中的數(shù)據(jù)安全風(fēng)險(xiǎn),主要實(shí)現(xiàn)了以下困難問題的解決。
通過多個(gè)項(xiàng)目驗(yàn)證,數(shù)據(jù)脫敏的價(jià)值體現(xiàn)如下,最大限度的實(shí)現(xiàn)了脫敏工作自動(dòng)化;多種脫敏算法保留了不同業(yè)務(wù)的數(shù)據(jù)價(jià)值;多節(jié)點(diǎn)多線程處理任務(wù), 實(shí)現(xiàn)主流數(shù)據(jù)庫脫敏性能提升1倍以上和大數(shù)據(jù)庫組件脫敏性能提升12倍以上,增量數(shù)據(jù)脫敏分鐘級(jí)“準(zhǔn)”實(shí)時(shí)同步,無丟包無失效。




















