中文字幕无码日韩视频无码三区

構建聯邦數據湖倉的方法、系統及存儲介質與流程

文(wen)檔序號:39426949發布日期:2024-09-20 22:24閱讀:來源:國知(zhi)局

技術特征:

1.一種構建聯邦數據(ju)湖倉(cang)的方法,其特征在(zai)于(yu),包括(kuo):

2.根據(ju)(ju)權利要求1所述的(de)方法,其特(te)征在于,在構建數(shu)字對象架構步驟中(zhong),數(shu)字對象模(mo)型用于將互聯(lian)網中(zhong)的(de)數(shu)據(ju)(ju)資源通過統一的(de)形式(shi)進(jin)行(xing)建模(mo)和(he)描(miao)述,數(shu)字對象模(mo)型由標識、元數(shu)據(ju)(ju)、數(shu)據(ju)(ju)源三個子模(mo)型組成;

3.根據(ju)權利要(yao)求1所(suo)述的方法,其(qi)特征(zheng)在于,在數聯(lian)網中,自(zi)治域內通過數字(zi)對象(xiang)架(jia)構(gou)(gou)管理,自(zi)治域間通過數字(zi)對象(xiang)架(jia)構(gou)(gou)互通,實(shi)現全(quan)網聯(lian)合全(quan)網互通。

4.根據(ju)權利要求(qiu)3所述的方法,其特征在(zai)于,該方法還包括數據(ju)入湖步驟(zou)和(he)數據(ju)查詢步驟(zou),

5.根據(ju)(ju)權利(li)要求(qiu)4所(suo)述的(de)(de)方法,其特征在于,在數據(ju)(ju)入湖(hu)步(bu)驟中,從數據(ju)(ju)源獲取后,進行數字(zi)對(dui)(dui)象(xiang)的(de)(de)構建,首先使用數字(zi)對(dui)(dui)象(xiang)標(biao)識解析(xi)協議訪問數字(zi)對(dui)(dui)象(xiang)標(biao)識解析(xi)系統,獲取一個全局唯(wei)一且持(chi)久的(de)(de)標(biao)識,隨后,計算(suan)引(yin)擎(qing)執行數據(ju)(ju)攝取任務,將數據(ju)(ju)的(de)(de)元(yuan)數據(ju)(ju)通(tong)過數字(zi)對(dui)(dui)象(xiang)接口協議寫入數字(zi)對(dui)(dui)象(xiang)注(zhu)冊系統,最后,將未處理和處理過的(de)(de)數據(ju)(ju)寫入到存(cun)儲系統完(wan)成數據(ju)(ju)的(de)(de)持(chi)久化,將數據(ju)(ju)的(de)(de)存(cun)儲位置記(ji)錄到數字(zi)對(dui)(dui)象(xiang)標(biao)識解析(xi)系統。

6.根據權利要求5所(suo)述的方法,其特征在(zai)于,在(zai)數(shu)(shu)據入湖步(bu)驟中,數(shu)(shu)據攝取(qu)任務包括(kuo)數(shu)(shu)據清洗和元(yuan)數(shu)(shu)據計算。

7.根據(ju)(ju)(ju)(ju)權利要求4所述(shu)的方法,其特(te)征在(zai)(zai)于(yu),在(zai)(zai)數(shu)(shu)(shu)(shu)據(ju)(ju)(ju)(ju)查詢步驟中(zhong),首先(xian)使用(yong)數(shu)(shu)(shu)(shu)字(zi)對(dui)象(xiang)(xiang)接口協(xie)議訪問(wen)數(shu)(shu)(shu)(shu)字(zi)對(dui)象(xiang)(xiang)注(zhu)冊系(xi)統(tong),確認(ren)數(shu)(shu)(shu)(shu)據(ju)(ju)(ju)(ju)是否存(cun)在(zai)(zai)于(yu)數(shu)(shu)(shu)(shu)據(ju)(ju)(ju)(ju)湖中(zhong),若數(shu)(shu)(shu)(shu)字(zi)對(dui)象(xiang)(xiang)注(zhu)冊系(xi)統(tong)中(zhong)不(bu)存(cun)在(zai)(zai)關于(yu)數(shu)(shu)(shu)(shu)據(ju)(ju)(ju)(ju)的元(yuan)數(shu)(shu)(shu)(shu)據(ju)(ju)(ju)(ju)信息(xi),返回不(bu)存(cun)在(zai)(zai)的信息(xi)給訪問(wen)用(yong)戶;若數(shu)(shu)(shu)(shu)據(ju)(ju)(ju)(ju)存(cun)在(zai)(zai),獲取(qu)數(shu)(shu)(shu)(shu)據(ju)(ju)(ju)(ju)的元(yuan)數(shu)(shu)(shu)(shu)據(ju)(ju)(ju)(ju)后使用(yong)數(shu)(shu)(shu)(shu)字(zi)對(dui)象(xiang)(xiang)標識解析協(xie)議訪問(wen)數(shu)(shu)(shu)(shu)字(zi)對(dui)象(xiang)(xiang)標識解析系(xi)統(tong)獲取(qu)數(shu)(shu)(shu)(shu)據(ju)(ju)(ju)(ju)所在(zai)(zai)地址(zhi),根據(ju)(ju)(ju)(ju)地址(zhi)完(wan)成數(shu)(shu)(shu)(shu)據(ju)(ju)(ju)(ju)讀(du)取(qu)。

8.根(gen)據(ju)權利要求1所述的方法,其特征在于,在聯邦(bang)數(shu)據(ju)湖倉構建(jian)步驟中,聯邦(bang)數(shu)據(ju)湖倉包括(kuo)數(shu)據(ju)共享(xiang)平臺和數(shu)據(ju)訪問和分析服務(wu),數(shu)據(ju)共享(xiang)平臺負(fu)責在不同的數(shu)據(ju)湖倉之間共享(xiang)數(shu)據(ju)。

9.一種構(gou)建聯邦數據湖倉的系統,其特征在(zai)于,包括:存(cun)(cun)儲器、處(chu)理器以及存(cun)(cun)儲在(zai)所(suo)述(shu)存(cun)(cun)儲器上的計算(suan)機程序,所(suo)述(shu)計算(suan)機程序配置為由所(suo)述(shu)處(chu)理器調用時實現(xian)權(quan)利(li)要求1-8中任一項所(suo)述(shu)方法的步(bu)驟。

10.一(yi)種(zhong)計(ji)算(suan)機(ji)可讀存儲介質(zhi),其特征(zheng)在于:所(suo)述(shu)計(ji)算(suan)機(ji)可讀存儲介質(zhi)存儲有(you)計(ji)算(suan)機(ji)程序,所(suo)述(shu)計(ji)算(suan)機(ji)程序配置為(wei)由處理器調用時實現(xian)權利要求1-8中任(ren)一(yi)項所(suo)述(shu)方法(fa)的步驟(zou)。


技術總結
本發明提供了一種構建聯邦數據湖倉的方法、系統及存儲介質,包括構建數字對象架構步驟:數字對象架構包括數字對象模型、數字對象接口協議、數字對象標識解析協議、數字對象倉庫系統、數字對象注冊系統、數字對象標識解析系統;數聯網連接步驟:數聯網使用數字對象接口協議和數字對象標識解析協議將數字對象倉庫系統、數字對象注冊系統、數字對象標識解析系統連接起來;基于數聯網的聯邦數據湖倉構建步驟:將多個數據湖倉連接在一起形成聯邦數據湖倉,形成一個統一的數據訪問和分析平臺。本發明的有益效果是:本發明具有通用性、可擴展性,不僅能有效管理數據,避免數據沼澤的形成,并且讓數據具有流通性。

技術研發人員:王洋,張為康,金文明,鄭富榮
受保護的技術使用者:深圳市廣道數字技術股份有限公司
技術研發日:
技術公布日:2024/9/19
當前第2頁1 2 
網友(you)詢(xun)問(wen)留言(yan) 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點贊!
1