加密貨幣交易所 加密貨幣交易所
Ctrl+D 加密貨幣交易所
ads

冗余策略:雙副本與糾刪碼該如何選擇?_OIN:BelaCoin

Author:

Time:1900/1/1 0:00:00

Filecoin主網的上線后,存儲的數據呈爆炸式增長,如今全網有效算力已經達到了1.40EiB,海量數據的安全存儲給礦工帶來了巨大的挑戰。

關注Filecoin的小伙伴們近兩天可能看到過這兩個賬戶的圖片,這兩個賬戶都是之前排名靠前的節點,可是現在賬戶顯示可用余額為負幾萬FIL-十幾萬FIL,質押幣被罰沒,出塊獎勵被罰沒,損失折合人民幣數千萬元,出現這樣的狀況非常可惜。

扇區生命周期是180-540天,在這期間內我們要不斷地進行時空證明,來驗證數據存儲的安全無誤,如果提交的數據有誤或者沒有在時間內提交就會報錯,如果14天內還沒有提交上來正確的數據,就會觸發非常嚴重的罰沒機制!

CZ:香港地區銀行支持加密貨幣后會吸引更多資金:4月12日消息,CZ 在社交媒體上表示,香港銀行開始支持加密貨幣后,我們將看到更多的資金轉移到那里,僅 USDT 就有 800 億 美元的市值,后續還有更多穩定幣陸續到來。[2023/4/12 13:58:43]

所以存儲方案對于Filecoin挖礦非常重要!

普通的硬盤存儲是很危險的。硬盤在存儲實際使用過程中年故障率一般在2%上下,這意味著100塊硬盤中,平均每年會故障2塊,硬盤故障率是非常高的,我們可以看下圖的浴缸曲線,硬盤在剛上線時故障風險更大,更遠高于平均故障率。

這說明我們存儲打包的數據是很容易因硬盤損壞而丟失,僅僅靠硬盤存儲很難保證可以在扇區生命周期內存儲數據的安全。

DeFi協議Centrifuge完成400萬美元融資:金色財經報道,DeFi協議Centrifuge完成400萬美元融資,Coinbase Ventures 和BlockTower領投。?BlockTower和MakerDAO將在Centrifuge上創建一個價值2.2億美元的資金池。[2022/11/2 12:10:00]

圖:浴缸曲線

所以冗余保護策略就變得非常必要。

多副本和糾刪碼是目前分布式存儲系統中常用的兩種數據冗余保護策略,也就是保護我們數據安全的兩項技術。

注:分布式存儲系統中的CAP原則,Consistency、Availability、PartiTIontolerance,對于可用性來說常見的兩種技術是多副本和糾刪碼。

多副本與糾刪碼分別是什么

多副本就是把數據復制成多份并分別存儲到不同地方以實現冗余備份。以雙副本為例,雙副本顧名思義就是數據存儲為兩個副本,當某個副本丟失時,可以通過另一個副本復制恢復數據。

Artmarket 將以太坊和比特幣添加至多幣種 Artprice 數據庫:9月17日消息,全球藝術市場信息參考機構 Artmarket 將以太坊和比特幣添加到其多幣種 Artprice 數據庫中,以滿足客戶的需求。(prnewswire)[2022/9/17 7:02:41]

糾刪碼主要是通過糾刪碼算法將原始的數據進行編碼得到冗余,它將數據分割成片段,把冗余數據塊擴展、編碼,并將其存儲在不同的位置,并將數據和冗余一并存儲起來,以達到容錯的目的。

糾刪碼最早是在通信行業解決部分數據在傳輸中損耗的問題,它的基本原理是把傳輸的信號分段,加入一定的校驗再讓各段間發生一定的聯系,即使在傳輸過程中丟失掉部分信號,接收端仍然能通過算法把完整的信息計算出來。糾刪碼技術本身更多是用于傳輸,而并不是存儲。

多副本與糾刪碼技術如何選擇

多副本與糾刪碼技術在不同的應用場景下有各自的優勢。

觀點:攻擊者地址12億枚aUSD尚未轉移,Acala或通過公投進行回滾:8月14日消息,Cryptolingo DAO 創始人、推特用戶 @IamJulianaC 在社交媒體上發文表示,Acala 使用 Honzon Fungibility Pallet 使 aUSD 在 Acala 和 Karura 之間進行流通。Honzon 協議的創建是為了讓 aUSD 作為原生 Stablecoin 和流動性來源,跨越 Polkadot 和 Kusama 多鏈生態系統。

由于該協議出現漏洞,攻擊者地址(26JmEcghNmggvT46sojckg34Py9zFRKkCcFy3gr49hrFgT2k)能夠轉移超 10 億枚 aUSD。

據猜測,Acala 已經阻止該錢包轉移資產。攻擊者地址中的 12 億枚 aUSD 尚未離開 Acala 鏈,且 Acala 很有可能通過公投進行回滾。Acala 團隊尚未證實 iBTC/aUSD 池和 Honzon 協議漏洞之間的關系。[2022/8/14 12:24:28]

1.存儲利用率

Nansen以超過1000萬美元的價格收購了Ape Board:金色財經消息,Nansen已經收購了DeFi投資組合儀表板Ape Board,具體的收購價格沒有透露,但據說超過1000萬美元。

兩家公司表示,Ape Board的多鏈覆蓋將為交易者提供市場的整體視圖,而不需要他們使用多個平臺來跟蹤他們的投資和分析市場。Nansen計劃將其分析與Ape Board的投資組合跟蹤相結合,打造一款“一體化的超級應用”。(CoinDesk)[2022/5/18 3:23:48]

多副本是復制多份分別存儲到不同地方以實現冗余備份,比如雙副本磁盤利用率只有50%,冗余度很高,這帶來了巨大的額外存儲空間消耗,無形中提高了很大的成本,但它更安全、讀寫更快。

糾刪碼技術不需要完整寫入真實數據的副本,它主要是通過糾刪碼算法將原始的數據進行編碼得到冗余,并將數據和冗余一并存儲起來,以達到容錯的目的。其基本思想是將n塊原始的數據元素通過一定的計算,得到m塊冗余元素。對于這n+m塊的元素,當其中任意的少于m塊元素出錯時,均可以通過對應的重構算法恢復出原來的n塊數據。生成校驗的過程被稱為編碼,恢復丟失數據塊的過程被稱為解碼。磁盤利用率為n/(n+m)。與雙副本方法相比具有磁盤利用率高等優點。

附:容量空間對比

2.容錯性

雙副本很好理解就是存一份,備份一份,容錯性比較好。雙副本在部分數據丟失后可以從另一個副本復制出來損失的數據,恢復正常使用。

糾刪碼技術本質就是計算,如果出現數據丟失,糾刪碼技術做的是把丟失的數據計算出來,而計算是需要一些已知的量再進行運算的,當數據丟失多的話,是無法計算的。容錯性比起副本有一定差距,

放到實際情況來講,當糾刪碼設置4/1情況下,節點或者數據塊故障,數據恢復需要讀取3個數據塊和1個校驗,也就是說這5項損壞了任意2項的數據塊,數據就無法計算找回,就造成信息丟失、無法找回的嚴重后果。

3.可靠性對比

雙副本有兩份數據,可以允許任意一個數據塊損壞。

糾刪碼配置一個數據塊配備一個校驗位時才能提供和雙副本近似的可靠性。

4.數據恢復對性能影響及恢復效率

雙副本下,一個節點或者數據塊故障,數據恢復直接從另一個副本讀取、寫入,一次進行恢復副本,影響一個節點的讀取性能。恢復效率較高。

糾刪碼設置4/1情況下,一個節點或者數據塊故障,數據恢復需要讀取三個數據塊和一個校驗,通過運算后寫入一次進行數據恢復,影響四個節點的讀取性能。恢復效率較低。

5.寫懲罰

雙副本下,某個節點的一次數據寫入,實際需要兩個節點參與,寫懲罰為2。

糾刪碼設置4/1情況下,一次數據寫入,實際需要至少兩個節點參與,其中讀取兩次,寫入兩次,寫懲罰為4。

6.CPU開銷

雙副本是基于數據完整復制,幾乎沒有計算的開銷,對CPU開銷較低。

糾刪碼由于讀寫都需要計算校驗值,有較高的計算開銷,需要額外的CPU資源開銷。

7.這兩項技術如何選擇

副本技術可以更好的保證數據的安全性,提升讀寫效率。一般適用于關鍵業務,對性能要求比較高,網絡對數據出錯容忍度極低的業務,如數據庫等。

糾刪碼則可以提高存儲系統利用率,降低成本。一般適用于其他非關鍵性業務,如視頻監控等,部分數據塊的損壞不會影響信息的傳遞。

結語

Filecoin挖礦中最為核心的就是存儲,在存儲上省錢,如果有一天出了問題,賠了夫人又折兵。在當前副本策略在安全性上無疑是更優的,盡管成本很高,但對我們挖礦中的數據的安全是一個重要保障,備份冗余并不是浪費,而是非常必要的。

當前Filecoin挖礦熱度依然很高,市場魚龍混雜,充斥著各種各樣的Filecoin挖礦產品。比如市場上相同價格可能有80%利用率的產品,也有雙副本50%利用率的產品,要如何選擇呢?投資Filecoin挖礦產品絕對不能只看售賣價格,作為投資人一定要有一個投資標準,很多技術問題可能很難去理解和分析,但我們可以化繁為簡比較每萬元收益,畢竟拿到手里的收益才是最實在的。

Tags:OINCOINCOIFILBaby Sun CoinCrypticCoinBelaCoinNeverend Ecentralization Filecoin

以太坊交易
專訪山大地緯高級副總裁肖宗水:區塊鏈讓公共數據“還數于民”,讓數據更可信服務更精準,帶動數據服務產業發展_區塊鏈:MaziMatic

12月19-20日,2020CCF區塊鏈技術大會暨首屆中國濟南區塊鏈產業發展高峰論壇在山東濟南舉行。山大地緯高級副總裁肖宗水分享了山大地緯利用區塊鏈在數據共享開放方面的創新模式和具體做法.

1900/1/1 0:00:00
數字人民幣蘇州試點答卷:“綜合科技服務商”價值初顯現_數字人:CBD幣

這個雙十二,數字人民幣再次走進公眾視野,金融與科技又一次碰撞出不一樣的火花。一、數字人民幣試點再突破,線上場景等諸多亮點引關注繼10月深圳羅湖數字人民幣試點之后,蘇州成為了又一個派發數字人民幣紅.

1900/1/1 0:00:00
盤點 | 2020年,DeFi經歷了什么?_EFI:Credefi

不管是對加密和區塊鏈行業,還是對去中心化金融,2020年都是不可思議的一年。經過了2020年的跌宕起伏,DeFi已經發展為區塊鏈行業的推動力量.

1900/1/1 0:00:00
比特幣一舉拿下2萬,主流和Defi板塊紛紛跟漲,過去1小時全網爆倉17.15億人民幣_比特幣:比特幣市場占有率

北京時間12月16日21時42分,比特幣價格突破20000美元。然,他的腳步并沒有停下來。在一舉破掉2萬,達到歷史性新高后,比特幣直接起飛,QKL123數據顯示,盤中比特幣最高達到了20722美.

1900/1/1 0:00:00
Nexus Mutual創始人:37萬NXM代幣是這樣被黑客竊走的_NEX:ETA

撰文:HughKarp,NexusMutual創始人翻譯:盧江飛編者按:如有進一步信息更新,本文內容將會適時進行調整.

1900/1/1 0:00:00
數字人民幣試點提速 產業鏈機會持續顯現_數字人:atm幣行情

來源:經濟參考報,作者:李靜張莫繼深圳市數字人民幣紅包試點之后,蘇州市大規模的數字人民幣紅包試點12月11日正式啟動。在本次試點中,電商線上場景支付、離線錢包支付等“首單”紛紛落地.

1900/1/1 0:00:00
ads