【摘要】: 隨著網絡和信息技術的飛速發展，各種領域的各種Internet應用，電子商務平臺，可穿戴設備乃至科學研究和監控設備都產生了大量的數據信息，我們已經進入大數據時代. 面對海量數據存儲和處理的需求，分布式存儲技術已經被提出并被廣泛使用. 分布式文件系統是分布式存儲系統的重要分支，主要用于處理海量文件的隨機訪問問題. 本文首先研究了分布式存儲系統的研究背景和發展狀況，并回顧了幾種典型的分布式文件系統. 其次，本文分析了具有單節點元數據服務器體系結構的分布式文件系統的特征. 為了解決存儲海量文件的問題，提出了一種基于微子樹的元數據管理方法. 該方法將完整的目錄樹劃分為多個微子樹，并將微子樹分布到元數據服務器集群中，從而實現了元數據管理從元數據服務器到元數據服務器集群的擴展. 另外，添加了子樹管理服務器來管理子樹. 該方法有效地提高了元數據的存儲容量和分布式文件系統的并發訪問性能. 第三，基于微子樹拆分的分布式文件系統具有與基于子樹拆分策略的分布式文件系統相同的缺陷，即需要根據完整路徑逐步查詢文件元數據. 針對這一問題，本文提出了一種微樹元數據分類緩存機制. 實驗結果表明，該元數據緩存機制可以在一定程度上提高元數據的操作速度. 最后，根據鏈式復制同步的特點，詳細分析文件寫入操作的每個步驟分布式文件存儲技術，并充分優化了文件寫入的每個步驟，以加快寫入小文件的響應速度. 實驗證明分布式文件存儲技術，鏈拷貝同步下的小文件寫加速方法可以優化寫操作流程，減少系統響應時間，提高系統吞吐量.

本文來自本站，轉載請注明本文網址：
http://www.pc-fly.com/a/jisuanjixue/article-284003-1.html