您現(xiàn)在的位置: 首頁(yè) > 標(biāo)簽 > 數(shù)據(jù)處理環(huán)境
數(shù)據(jù)處理環(huán)境
數(shù)據(jù)處理環(huán)境
相關(guān)文章 : 1篇 瀏覽 : 13次

本發(fā)明提供了一種大數(shù)據(jù)環(huán)境下的數(shù)據(jù)處理方法,該方法包括:根據(jù)文件的操作粒度,將文件分為文件塊,物理文件和邏輯文件,并分別定義文件塊元數(shù)據(jù),物理文件元數(shù)據(jù)和邏輯文件元數(shù)據(jù);將新舊兩個(gè)版本的文件元數(shù)據(jù)在服務(wù)器端進(jìn)行比較,通過存儲(chǔ)層中文件塊對(duì)相同數(shù)據(jù)進(jìn)行冗余去重,從而在客戶端與服務(wù)器端執(zhí)行新舊版本數(shù)據(jù)的差異化傳輸.本發(fā)明實(shí)現(xiàn)了大數(shù)據(jù)環(huán)境下的數(shù)據(jù)同步,減輕了服務(wù)器端計(jì)算壓力,提高了傳輸效率和資源利用率.