

版權說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權,請進行舉報或認領
文檔簡介
1、糾刪碼具有低存儲開銷高容錯特點,可以將(k+r,k)糾刪碼用于歸檔訪問頻率低的數(shù)據(jù)副本,既可以保證數(shù)據(jù)的可用性,又可以提高存儲空間的利用率。根據(jù)待歸檔數(shù)據(jù)塊的存放規(guī)則,數(shù)據(jù)歸檔可分為固定布局數(shù)據(jù)歸檔和隨機布局數(shù)據(jù)歸檔。
在固定布局數(shù)據(jù)歸檔中,傳統(tǒng)的同步編碼方案因為編碼任務集中,存在磁盤讀寫競爭,網(wǎng)絡帶寬限制歸檔性能等問題。為了克服這些缺點,提出流水線的編碼處理方式加速存儲集群的數(shù)據(jù)歸檔性能。首先,在鏡像RAID-5和三副本集群
2、中應用鏈式分散機制提出了兩種新的數(shù)據(jù)布局([D+P]cd和[3X]cd)。其次,基于兩種數(shù)據(jù)布局,設計了兩種歸檔方案(DP和3X),其表現(xiàn)出以下三個顯著特點:(ⅰ)利用數(shù)據(jù)局部性,編碼過程中的相關節(jié)點都讀取兩到三個本地數(shù)據(jù)塊;(ⅱ)分散計算負載,編碼操作被分散到 k個節(jié)點;和(ⅲ)并行歸檔,兩到三條編碼流水線同時部署,產(chǎn)生奇偶校驗塊。在真實的存儲集群中實現(xiàn)兩種歸檔方案(DP和3X),以及三種現(xiàn)有的解決方案(即SynE,DE和RapidR
3、AID)。實驗結果表明,本文的歸檔方案在9節(jié)點存儲集群中的歸檔時間優(yōu)于其它三種歸檔方案至少3.41倍。
在隨機布局歸檔中,傳統(tǒng)的歸檔方案將大數(shù)據(jù)塊劃分為小數(shù)據(jù)分塊進行處理,并沿用分布式集群中的數(shù)據(jù)局部性,存在隨機讀和歸檔任務分配不均等弊端。本文利用預取技術,對原有的隨機布局歸檔方案(CArch、DArch和 BArch)進行改進,提出預取歸檔方案(PCArch、PDArch和PBArch)。在真實的存儲集群中實現(xiàn)以上六種隨機布
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
- 4. 未經(jīng)權益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 眾賞文庫僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責。
- 6. 下載文件中如有侵權或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 面向糾刪碼存儲集群的離線歸檔優(yōu)化研究.pdf
- 糾刪碼存儲集群歸檔、重構、讀取優(yōu)化技術研究.pdf
- 糾刪碼存儲集群的數(shù)據(jù)重構優(yōu)化技術研究.pdf
- 異構糾刪碼存儲集群重構優(yōu)化技術研究.pdf
- 糾刪碼集群存儲的數(shù)據(jù)訪問優(yōu)化技術研究.pdf
- 集群VoD系統(tǒng)中基于糾刪碼的存儲策略研究與實現(xiàn).pdf
- 糾刪碼存儲系統(tǒng)中性能優(yōu)化技術研究.pdf
- 一種異構感知的糾刪碼歸檔方法研究.pdf
- 基于糾刪碼的分布式存儲訪問優(yōu)化技術研究.pdf
- 基于糾刪碼的云存儲容錯技術研究.pdf
- 模式糾刪碼的研究.pdf
- 安全存儲系統(tǒng)中糾刪碼技術研究.pdf
- 基于糾刪碼存儲的數(shù)據(jù)維護關鍵技術研究.pdf
- mba論文模式糾刪碼的研究pdf
- RAID系統(tǒng)中糾刪碼研究.pdf
- 基于糾刪碼的分布式分層存儲系統(tǒng)研究.pdf
- 基于RS糾刪碼的數(shù)據(jù)安全存儲與安全刪除方法研究.pdf
- 云存儲系統(tǒng)中基于糾刪碼的容錯技術研究.pdf
- 面向多節(jié)點失效的糾刪碼及數(shù)據(jù)修復技術研究.pdf
- 基于RS糾刪碼的云存儲容災系統(tǒng)設計與實現(xiàn).pdf
評論
0/150
提交評論