來源|EthereumBlog
作者|?MartinHolstSwende&PeterSzilagyi
MartinHolstSwende及PeterSzilagyi于2021年5月18日發布
原標題:《化險為夷:以太坊的狀態問題》
本篇博文的目的在于正式揭露以太坊平臺在柏林硬分叉之前的一個嚴重且顯而易見的問題。
State狀態
我們先從以太坊和及其“狀態”的背景開始梳理。
以太坊的狀態由patricia-merkletrie組成,一種前綴樹。本文不會深入技術細節,簡單來說隨著狀態增長,樹的分支會越來越密集。每個加入的賬戶都是一片新葉子。在樹根之間和葉子之間,存在大量的“中間”節點。
為了查找某個特定賬戶,或是說這顆巨樹中的一片“葉子”,從樹根再通過中間節點,需要按序解決6-9個哈希才能最終對我們所尋找的數據進行哈希計算。
簡而言之,每執行一次查找賬戶的trie查詢,都要執行8-9個解析操作。每次解析操作都是一次數據庫查詢,而每次數據庫查詢都可能是任意數量的實際磁盤操作。磁盤操作的數量難以預估,但是由于trie密鑰是加密哈希(抗沖突),因此密鑰是“隨機的”,這對任何數據庫來說都是最糟糕的情況。
隨著以太坊的發展,一直以來都有必要提高樹訪問操作的gas費用。2016年10月,在經歷了“上海攻擊”時間之后,以太坊網絡在區塊高度2,463,000?進行了TangerineWhistle?硬分叉,其中包含EIP150,大舉提升了某些操作的gas成本,并引入了大量更改以防御DoS攻擊。
首爾政府正式推出元宇宙平臺Metaverse Seoul:金色財經報道,首爾市政府周一正式開放其公共元宇宙平臺。用戶可以在虛擬世界中玩游戲、聊天、填寫官方表格、獲得稅務幫助和其他城市服務。
韓國首爾是第一個建立公共元宇宙平臺的大城市,并制定一個五年路線圖,將推出政府、商業、旅游和文化產品。
Metaverse Seoul在去年面向部分用戶進行Beta測試,現在已經可以通過Google Play和Apple Store下載使用。
此前報道,韓國首爾市于去年8月31日對“新世界Metaverse首爾”的第一階段部分服務進行非公開測試。在測試期間,用戶可以體驗元宇宙中的首爾市政府和廣場,還有開放式書吧空間,可以閱覽首爾市的E-Book,之后在首爾廣場還可以玩夏季定制的戲水游戲等。[2023/1/17 11:15:08]
另一次對gas費用的提升是在2019年12月的Istanbul升級中,激活了EIP1884。
EIP-1884針對gas費用引入了以下改動:
?SLOAD?從?200?提升至?800?gas
?BALANCE?從?400?提升至?700?gas(并添加了一個更便宜的?SELFBALANCE)
?EXTCODEHASH?從?400?提升至?700?gas
出現的問題
2019年3月,MartinSwende當時在進行一些EVM操作碼性能的測定。之后的EIP-1884就是基于該調查而成的。在EIP-1884被激活的前幾個月,BrokenMetre發布了這篇論文(2019/9)。
Space and Time完成2000萬美元戰略融資,微軟M12基金領投:9月27日消息,Web3原生數據平臺Space and Time宣布完成由微軟M12基金領投的2000萬美元戰略融資,其他投資者包括Framework Ventures、HashKey、Foresight Ventures、SevenX Ventures、Polygon、Blizzard Fund(Avalanche生態基金)、Stratos、Hash Global、CoinDCX以及幾位Web3頭部社區和天使投資人。融資資金將用于構建一個去中心化的數據倉庫,支持將所有中心化服務器中的數據轉化為無需信任的數據源,供智能合約調用。[2022/9/27 5:55:02]
兩位以太坊安全研究員,HubertRitzdorf和MatthiasEgli,與論文的作者之一DanielPerez將一個漏洞“武器化”,提交給了以太坊的漏洞賞金(bugbounty)項目。這是在2019年10月4日。
建議大家閱讀這份他們提交的完整文檔,寫得很詳盡。
同日,在一個專門用于討論跨客戶端安全性的頻道中,來自Geth、Parity和Aleth的開發者都得知了這份文檔。
這個漏洞的本質在于觸發隨機的trie查詢。以下是一個簡單的示例:
Multichain CEO回應質疑:Fantom DAI由以太坊等7個鏈的DAI 1:1支持:9月22日消息,以太坊鏈上研究員bartek.eth發推稱,Multichain使用EOA作為Bridge托管,在Fantom上通過7400萬的DAI進行抵押鑄造超過1億美元的跨鏈DAI。鏈上交易數據顯示,在2021年7月的一系列交易中,驗證者從托管中移除DAI,而沒有進行相應的銷毀,而被挪用的DAI再次被用于“向其他鏈提供流動性”。對此,bartek認為,一旦遺留的增發跨鏈DAI進行有效的贖回,普通用戶的托管資產將受損。
Multichain聯合創始人兼CEO Zhaojun表示,Multichain有兩個路由路徑支持從Fantom跨鏈至超過8條鏈,不是只支持跨鏈至以太坊。Fantom DAI由以太坊和其他6個鏈上的底層DAI 1:1支持。
bartek質疑為何截圖顯示Fantom上3013.8萬DAI由anyDAI合約持有,Zhaojun回復稱,因為用戶通過Router Pool將Fantom DAI橋接到其他鏈。路由器流動性池在不同的鏈上動態變化。[2022/9/22 7:13:35]
在其報告中,研究員們通過eth_call對同步了主網的節點執行了這個payload,以下是他們執行過程中的數據,耗費了一千萬gas:
?消耗一千萬gas的EXTCODEHASH(400gas)
Parity:?~90s
LimeWire將在以太坊上推出原創 NFT 系列:金色財經報道,Limewire 將在以太坊上推出原創 NFT 系列LimeWire Originals,該系列將限制為 10,000 個獨特的頭像,并將授予持有者訪問各種實用程序和特權,包括 LimeWire 上最高級別的會員資格。這 10,000 個 NFT 將為其持有者提供僅限會員的特權,包括在即將到來的 LimeWire NFT 市場上搶先獲得備受矚目的 NFT 投遞、參加現實世界的活動和派對,以及 LMWR 代幣獎勵和獨家商品。
原始持有人也將有資格獲得獨家發售的 LMWR,這是 LimeWire 的 ERC-20 實用代幣,將于今年年底推出。代幣將在所有 10,000 個 Originals 中平均分配,這意味著持有的每一個 NFT 都會增加空投的參與度。(cryptoslate)[2022/6/11 4:18:12]
Geth:?~70s
?消耗一千萬gas的EXTCODEHASH(700gas)
Parity:?~50s
Geth:?~38s
顯而易見,EIP-1884的更改確實在降低該攻擊的影響上起到了幫助,但還遠遠不夠。
當時已經臨近在大阪的開發者大會。在開發者大會上,這個問題的信息分享給了主網的客戶端開發者。我們也和Hubert、Mathias以及GregMarkou(來自Chainsafe,當時也在進行一些ETC的工作)見面了。ETC的開發者也收到了這份報告。
Paypal總裁:加密貨幣是一種不穩定的資產類別:5月23日消息,Paypal(PYPL.O)總裁Schulman表示,加密貨幣是一種不穩定的資產類別。[2022/5/24 3:36:50]
隨著2019年臨近尾聲,我們知道這個問題比之前預期的要嚴重,惡意交易可能將區塊時間提升到分鐘范圍。更糟的是,開發者社區對EIP-1884感到不滿,因為EIP-1884破壞了一些合約流程,而且用戶和礦工都非常希望提高區塊的gaslimit。
此外,僅兩個月后的2019年12月,ParityEthereum宣布停止運維,而OpenEthereum接管了代碼庫的維護工作。
隨后搭建了一個新的客戶端協調頻道,Geth、Nethermind、OpenEthereum和Besu的開發者在此繼續進行協作。
解決方案
我們意識到要解決這個問題,必須要雙管齊下。一種方法是通過以太坊協議以某種方式在協議層解決該問題。最好不要破壞合約,并且避免波及“良好”行為,但仍要設法防止攻擊。
第二種方式是通過軟件工程來解決,修改客戶端中的數據模型和結構。
協議層的工作
關于如何處理這些類型的攻擊的第一個版本在這里。2020年2月,正式發布為EIP2583。其理念是,每當一次Trie查找導致未命中時,施加一次罰款。
但是,Peter找到了應對方法,即“shieldedrelay”攻擊,可以有效地限制這種懲罰的上限(約為800)。
對未命中查詢進行懲罰的問題在于,首先需要進行查找,以確定是否施加懲罰。但是如果剩余的gas不足以支付罰款,已執行了未付費的消耗。即使確實會導致拋出異常,也可以將這些狀態讀取包裝到嵌套調用中,允許外部呼叫者繼續重復攻擊而無需支付(全部)罰款。
因為這個原因,這個EIP被放棄了,我們也在尋找更好的替代方案。
?AlexeyAkhunov提出了?Oil?的概念,gas的第二來源,但和gas在本質上不一樣,因為它對執行層不可見,并可能導致事務全局回滾。
?Martin在2020年5月也撰寫了一個類似的提案(GasAndKarma)
在對這些不同機制進行迭代的同時,VitalikButerin提議直接提高gas成本,并且保留訪問列表。2020年8月,Martin和Vitalik開始完善EIP-2929及配套的EIP-2930。
EIP-2929有效地解決了許多之前的問題。
?與無條件提升gas成本的EIP-1884相比,EIP-2929只提升了未訪問部分的gas成本。這導致凈成本提升了不足一個百分點。
?加上EIP-2930,不會對任何合約流程造成破壞
?并且能夠在不造成破壞的前提下進一步調整gas成本
2021年4月15日,這兩個EIP都在Berlin升級中被激活了。
開發工作
Peter在2019年10月提出的解決方案是“動態狀態快照”(dynamicstatesnapshots)。
快照是用于以平面格式存儲以太坊狀態的輔助數據結構,在Geth節點的實時操作期間,可以完全在線構建。快照的好處在于充當狀態訪問的加速結構:
?無需通過O(logN)次磁盤讀取(x?LevelDB開銷)來訪問一個賬戶或存儲插槽,快照可以提供直接的O(1)訪問時間(x?LevelDB開銷)。
?快照支持每項條目以O(1)復雜度迭代賬戶和存儲,這使遠程節點能夠以比以前便宜得多的方式檢索順序狀態數據。
?快照還啟用了更多奇特的用例,例如離線修剪狀態Trie或遷移到其他數據格式。
快照的缺點在于原始帳戶和存儲數據實際上是重復的。對于主網來說這意味著將占用額外的25GBSSD空間。
動態快照的概念從2019年中就已經發軔,起初的目的主要是推動快照同步的實現。當時Geth團隊在忙于許多“大項目”。
?離線狀態修剪
?動態快照+快照同步
?通過分片化狀態實現LES(LightEthereumSubprotocol)狀態分發
然而,最終決定將快照的優先級排到最前,將其他項目暫時擱置。這為后來的snap/1同步算法奠定了基礎,并于2020年3月合并。
隨著“動態快照”功能的發布,我們有了一些喘息的空間。如果以太坊網絡受到攻擊,那將是痛苦的,是的,但是至少有可能通知用戶啟用快照。完整生成快照將花費大量時間,并且當時尚無法同步快照,但是網絡至少可以繼續運行。
總結
2021年的三月到四月,snap/1協議在geth客戶端中實現了,使得通過新的基于快照的算法進行同步成為可能。雖然仍不是默認的同步模式,但這是很重要的一個步驟,使快照不僅可用作攻擊防護措施,并且對于用戶來說也是一項重要優化。
在協議方面,柏林升級于2021年4月完成。
以下是在我們的AWS監控環境中制定的一些基準:
?柏林升級之前,無快照,25M?gas:?14.3s
?柏林升級之前,有快照,25M?gas:?1.5s
?柏林升級之后,無快照,25M?gas:?~3.1s
?柏林升級之后,有快照,25M?gas:?~0.3s
大致的數據顯示柏林升級能夠將攻擊的效率降低5倍,快照能夠將其降低10倍,總計將影響降低了50倍。
我們估計目前在主網(15Mgas),對于未使用快照的geth節點來說,有可能創建執行時間在2.5-3秒的區塊。對于非快照節點來說,隨著狀態增長這個數字會持續惡化。
如果通過gas退還來增加區塊內的有效gas使用量,則可能會進一步加劇為(最大)2倍。隨著EIP1559的實施,區塊的gaslimit的彈性會更大,并且在臨時爆發中會再增加2倍。
至于實施這種攻擊的可行性,攻擊者購買一整個區塊的成本約為幾個ETH(100Gwei時15Mgas為1.5ETH)。
為什么現在公布?
這個風險其實一直以來都是一個“公開的秘密”,已經不止一次被意外公開披露,并且在核心開發者會議中多次被提及,但并未涉及細節。
現在既然已經實施了柏林升級,geth的節點也在默認情況下使用快照同步,因此我們估計現在的威脅性已經非常低了,現在是時候對幕后工作進行全面公開了。
重要的是,讓社區有機會了解一些變更背后的原因,而這些變更會對用戶體驗造成負面影響,例如gas成本增加和限制gas返還。
本文由MartinHolstSwende和PeterSzilagyi在2021-04-23寫就。并于2021-04-26與基于以太坊的項目進行分享,2021-05-18公開發布。
點擊“閱讀原文”獲取文章內部鏈接!
原文鏈接:https://blog.ethereum.org/2021/05/18/eth_state_problems/
總部位于倫敦的加密貨幣托管商Copper宣布在DawnCapital和TargetGlobal領投的B輪融資中籌集了5000萬美元.
1900/1/1 0:00:00“我人麻了,我比特幣多單爆倉了。”5月19日中午,搞直播的陳經理在電話中告訴深鏈財經,幣圈賺錢太難了,自己原本看到行情好轉,連續開了BTC、ETH、XRP和DOT的多單.
1900/1/1 0:00:00狂人本著負責,專注,誠懇的態度用心寫每一篇分析文章,特點鮮明,不做作,不浮夸!本內容中的信息及數據來源于公開可獲得資料,力求準確可靠,但對信息的準確性及完整性不做任何保證,本內容不構成投資建議.
1900/1/1 0:00:00加密資產市場元氣大傷,7400多個幣種支撐出的2.2萬億美元市值,一周時間蒸發了7700億美元,主支撐比特幣的市值也從8530億美元下降至6784億美元.
1900/1/1 0:00:00摘要:在鏈上,我們可以觀察到一個明顯的分叉反應,新進入市場的人恐慌性地拋售遭受了損失,而長期持有者似乎對這個消息相對不受影響.
1900/1/1 0:00:00文章系金色財經專欄作者牛七的區塊鏈分析記供稿,發表言論僅代表其個人觀點,僅供學習交流!金色盤面不會主動提供任何交易指導,亦不會收取任何費用指導交易,請讀者仔細甄別,謹防上當.
1900/1/1 0:00:00