|
華中科技大學
搜 索
高等教育領域數字化綜合服務平臺
華中科技大學
教育部
- 74 高校采購信息
- 3295 科技成果項目
- 0 創新創業項目
- 0 高校項目需求
一種歷史感知的數據去重碎片消除方法與系統
所屬領域:
項目成果/簡介:
本發明公開了一種應用于數據去重系統中的碎片消除方法，該
方法利用歷史信息準確地識別碎片，系統內存開銷少且恢復吞吐率高。
該方法首先對數據流中的文件進行分塊、求指紋，查詢索引找到重復
數據塊；然后在上次備份記錄的稀疏容器集合中查找重復數據塊的容
器 ID，判斷哪些重復數據塊屬于稀疏容器。對于屬于稀疏容器的重復
數據塊，將其重寫到新的容器中。該方法在備份過程中，只需記錄下
相關容器的利用率，內存開銷極小。本發明還提供了相
項目階段:
掃碼關注，查看更多科技成果
取消
確定