這3種數據處理范式,未來會大規模改變數據市場。
區塊鏈是一個多方共同完成總帳本記錄過程的技術,參與的多個計算方將設備連接成網,形成了對外開放的區塊鏈網絡,諸如比特幣、以太坊、波卡等等,各個計算參與方共享資源,供開發者和用戶使用。
在這樣的運行規則里,“數據流動”貫穿了每一個運行步驟。
從底層節點的通信到區塊打包、復制、確認,再到應用層的交易轉賬。從網絡中的轉賬交易到每個節點的余額、賬戶數據以及數據上鏈。
正是如此,區塊鏈對數據處理的范式是對比傳統數據庫中數據處理的最大優勢。
這里,不得不說的是,在漫長的互聯網周期里,數據已經被企業確認為其價值核心,而與此同時,大量的數據處理和管理問題亟待解決,可喜的是,諸多區塊鏈項目正在嘗試利用區塊鏈技術以及與其他技術結合,形成基于區塊鏈的數據解決方案。
例如,在區塊鏈的數據結構外增加了多元的結構設計和多樣的計算形式。
本文中,白計劃將把目前區塊鏈項目處理數據的3種范式一一闡述,其中包括:最常見的區塊鏈數據結構范式,闡述案例是預言機網絡Chainlink;基于硬件的數據流動范式,闡述案例是日本物聯網項目Jasmy;以及目前實現最難的基于可信計算的數據流動范式,闡述項目為數據可信計算網絡PlatON。這3種范式,未來一定會大規模改變數據市場。
1.基于區塊鏈數據結構的基礎和進階
區塊鏈網絡的數據流動過程是這樣的,節點發現交易,然后將交易打包后形成區塊,繼而由打包節點開始廣播,參與共識的節點開始復制區塊保存起來。
這樣,區塊鏈上的數據變成了可信的。
Arthur Hayes:AI將通過DAO進行自我組織,其代幣交易或促使DEX形成自然壟斷:7月28日消息,BitMEX創始人Arthur Hayes在其博客中撰文表示,未來的人工智能(AI)將通過去中心化自治組織(DAO)進行自我組織。他認為,AI 將不再依賴傳統的公司結構,而是選擇公共區塊鏈進行部署和運行。他以一個名為「詩人 AI」的假設性 AI 為例,解釋了如何通過智能合約在公共區塊鏈(如以太坊)上部署 DAO 和代幣。
Hayes 還指出,AI DAO 的債務市場的成熟程度將決定其經濟影響力的增長速度。他認為,由于公共區塊鏈可以持續監控 AI DAO 以確保其遵守債務契約,并在未付款的情況下使用智能合約自動轉移數字財產和/或所有權,因此,債權人可以對 AI DAO 的賬目進行持續的、準確的審計,這將使投資者有信心向符合其財務標準的 DAO 投資。
此外,Hayes 還預測,隨著 DAO 的激增,以太坊交易將呈指數級增長,導致 ETH 的價格飆升。同時,去中心化交易平臺(DEX)將成為自然壟斷者,因為它們將成為第一個真正全球的交易場所,任何具有互聯網連接的人或 AI 都可以在其中進行交易。他認為,由于 AI 無法被國家強制控制,因此,交易所有形式的 DAO 代幣的交易平臺可能會成為自然壟斷者。識別這些 DEX 并購買它們的治理代幣將產生巨大的利潤。[2023/7/28 16:04:08]
數據是保存在區塊里,因為區塊大小有限,所以區塊里往往都是小字節大小的信息,例如比特幣轉賬交易,以太坊的轉賬和合約調用消息。
我們可以把這些交易信息等替換成其他信息,例如商品溯源流通信息。還可以替換為任何可以公開的信息,例如廣告點擊、公益捐款使用情況、銀行共管賬戶信息等等。
渣打銀行加密研究主管:在貸款機構倒閉后大型銀行應該填補加密市場的空白:金色財經報道,渣打銀行加密研究主管Geoff Kendrick在系列采訪中表示,我們認識到區塊鏈技術的重要性。就全球金融市場而言,我們認識到這個更廣泛的生態系統對我們許多核心業務的重要性。就區塊鏈的未來而言,有許多潛在的用例。像Silvergate這些銀行是加密貨幣生態系統中非常重要的一部分,我們需要像渣打銀行這樣規模更大、更長期的金融機構進入這個領域。在過去六個月左右的時間里,我們也看到了對中心化交易所的擔憂,這為渣打等銀行提供了提供更廣泛交易和托管服務的機會。[2023/5/9 14:52:45]
但由于其他信息的字節較大,更適合存儲進區塊的就是交易數據一類的小字節信息。經過區塊鏈的多方確認后,這些公開的數據,是可信的,可以讀取使用。
這個模式目前應用最多的示例,是Oracle預言機。例如Chainlink。
2.Chainlink的預言機網絡數據結構
我們都知道Chainlink已經成為很多DeFi應用的價格輸入源,因為其網絡中提供的喂價足夠安全可信,據Chainlink的技術文檔查閱,Chainlink網絡連接了很多的價格輸入點,例如KarkenRates,而輸入的每個價格由接入Chainlink的多個獨立ChainlinkOracle運算符更新,匯總后再進行鏈上處理。
Chainlink的價格處理模型
鏈上處理后會形成可信的價格數據,可以被DeFi應用發現并使用,根據使用數據次數,向網絡支付LINK代幣作為酬勞,提供該喂價的價格提供方最后會收到該價格帶來的獎勵收入。
在這個模型里,Chainlink網絡外部輸入的數據,經由匯總后進行鏈上處理,最終流轉到需求者方實現價值。
PEPE前10大持倉地址中,5個為交易平臺熱錢包地址:5月6日消息,據 Etherscan 數據顯示,Meme 幣 PEPE 前 10 大持倉地址中,有 5 個為交易平臺的熱錢包地址,Binance、OKX、Huobi、KuCoin、Gate 分別位列第 1、3、4、8、9 位,這些地址持有的 PEPE 共占發行總量的約 15.53%。[2023/5/6 14:47:16]
這個過程里,還有很多關鍵部分,例如每個價格喂價要分散的Oracle進行更新。每個價格喂價要獲取分散在很多處的價格,最終匯總處理,并且,每個價格喂價的預言機分散數量數量各不相同。例如,在ETH/USD的價格喂價中,有21個預言機喂價源。
為了隨時更新最準確的數據,處理喂價的智能合約,至少要收到21個預言機中至少14個預言機提供了該價格數據,才會順利更新數據。
以上的操作里數據是否是正確的,可信的,是極為重要的,否則就會出現劫持預言機對DeFi應用進行價格攻擊的事件。
所以要具有一定處理異常的規則,其中包括:對價格進行平均值的取用;價格偏差很大會重新開始價格更新;有指定的價格聚合時間等。
Chainlink塑造了基于區塊鏈共識實現可信數據的最佳示例,而DeFi的崛起,預言機功不可沒,其為DeFi塑造了基礎的安全性,也將區塊鏈數據結構輸出了一個流支付的商業化模式,當然,這還是一個去中心化的商業化模式。
3.基于硬件獲取的數據流動
Chainlink的模式應用非常廣泛,但在上文最基礎的結構里,如果我們謹慎推敲,可以明顯的看到一些不足,例如數據經過鏈處理變成可信的,但“數據上鏈”的過程以及上鏈前并非可控。而更大的問題是,Chainlink處理的都是簡單數據,即字節較小的,公開性較強的數據。
Shibarium測試網Puppynet已處理近20萬個獨立錢包超過100萬筆交易:金色財經報道,據 BlockScout 數據顯示,Shiba Inu 的 Layer2 解決方案 Shibarium 早期測試版 Puppynet 自 3 月 11 日推出以來,已處理近 20 萬個獨立錢包超過 100 萬筆交易。此外,據 CoinDesk 援引 Polygon 生態衍生品協議 SynFutures CEO Rachel Lin 表示,Shibarium 背后的公司 Unification 宣布,正在開發一種一體化錢包解決方案,該解決方案將支持本地雙向資產轉移、質押 / 委托,并包括一個 Shibaswap 集成模塊。[2023/3/31 13:37:40]
所以,這樣的數據模型,可以做出一些流程的改造,最終塑造出一個這樣的數據流程:
終端加密--數據存儲--存儲數據哈希上鏈--鏈上的數據流動
這樣的流程可以描述為基于硬件端、分布式存儲與區塊鏈網絡結合的數據流動,目前以物聯網網絡的融合應用見長,今天我們的闡述舉例是起源于日本的物聯網網絡Jasmy。
該網絡與Toyota豐田汽車、出行服務供應商Witz曾完成一次合作,將智能汽車的終端數據通過平臺的模型完成處理,在規避個人信息合規的基礎上,挖掘數據價值。
我們來解剖一下其數據處理范式。
首先是物聯網終端,物聯網設備終端包含了智能設備、手機、電腦等具備終端計算能力的設備,可以利用邊緣計算的方式管理在終端的數據。包含了加密和一些管理的集成。
Jasmy對于硬件終端的管理舉例
在這個部分因為要管理大量的終端設備,所以需要將物聯網設備連接起來組建一個物聯網平臺,主要負責設備的管理。
Zhu Su發表FTX和Genesis合作的7條證明:1月5日消息,三箭資本創始人Zhu Su在推特上表示:“FTX和Genesis之間的市場合作:
1.FTX和Genesis在去年5月的同一天將steth的抵押率從接近100%降至0%,同時做空steth;
2.FTX和Genesis一起以巨大規模購買了未解鎖的SOL,并且Genesis承諾可用于貸款;
3.FTX賄賂Genesis交易員,向Genesis交易員提供Serum等代幣的種子分配,以換取在Serum抵押品上獲得更好的貸款利率;
4.Genesis交易員經常與FTX交易員互相分享信息,其中許多人(目前)變得富有并試圖創辦基金;
5.Genesis借出數十億美元的客戶存款作為FTT抵押品,同時知道并承認他們在需要時永遠無法退出這種抵押品(首席風險官在職僅3個月后辭職);
6.FTX和Genesis濫用了他們的信托特權,策劃對Luna的多管齊下的協同攻擊;
7.FTX去年8月向Genesis歸還了25億美元的貸款,Genesis可能通過鏈分析和詢問財務信息知道這些來自FTX存款人的資金,因為即使在此之后仍有未償還貸款。”[2023/1/5 10:23:13]
下一步的處理,是因為數據類別是復雜的,并且在設備端已加密,為了實現數據可以調用,便需要將數據上傳到一個開放的網絡環境里,并保證數據的隨時可查,可下載,但其所有權和使用權需要控制。
所以為了處理大量數據,就將運用到分布式存儲,最方便的示例是基于IPFS的數據存儲結構。
在完成數據分布式存儲后,也就滿足了與區塊鏈網絡中的ID、所有權以及激勵的綁定條件,分布式存儲的文件哈希也可以存入區塊鏈,公開透明。
4.物聯網技術融合的數據處理范式
這個過程與Oracle實現的形式,最不同的是使用了物聯網終端完成了邊緣端的加密,基于端的加密,去完成后續的流轉。
Jasmy的流程如下:
1.物聯網平臺負責管理終端物聯網設備,運用Jasmy的SKC服務和SG服務實現終端的數據加密和管理。
2.終端的數據存儲在Jasmy的個人數據柜中進行分布式存儲,SKC和SG技術在這個過程里可以將數據定位給個人ID或設備ID。
3.分布式存儲的文件哈希上鏈,鏈上的ID和文件哈希綁定。
4.基于區塊鏈網絡開發的數據交易應用,可以進行數據價值的流轉,即數據所有權以及數據使用權的交換。
5.數據使用方可調用分布式存儲個人數據柜中的數據。
這樣的流程,得益于Jasmy的幾個特點,Jasmy有日本硬件制造商索尼在硬件領域的加密技術和物聯網領域的供應鏈能力,其他普通區塊鏈創業者無法實現的物聯網優勢上,可以輕松實現。例如SKC的核心技術是在日本應用多年的非接觸式芯片加密技術FeliCa,該技術在為索尼產品提供安全性保證。這恰恰是Jasmy結構里增加的新計算方式。
此外還有Jasmy可以和硬件制造商推出具備終端安全性和計算能力的設備,以參與到網絡中,例如Jasmy推出了JasmySecurePC。
這樣的架構,已經開始為日本的企業服務,包含前文的豐田汽車、Witz、VAIO等。
Jasmy塑造的數據價值實現模式
對比上一種ChainlinkOracle的形式,Jasmy的優勢就在于物聯網終端的加密和分布式存儲個人數據柜的實現,如果不考慮分布式數據存儲,Chainlink也在走向硬件輔助數據源安全的網絡結構,其在嘗試利用具備可執行安全環境的硬件作為Oracle數據源實現數據端的可信。與Jasmy在硬件端的實踐如出一轍。
5.基于數據可信計算的數據流動
從Jasmy的設計模型里看到了,將區塊鏈的簡單模型進行一些技術加持后可以實現很突出的效果,如果再把更多技術進行整合,可是實現什么?
對于數據來說,數據最需要的是所屬權的歸屬,以及基于數據所有權進行的數據可信流動,也就是數據實現可用不可見等等一系列保證數據所有者權益的要求。
這個范式,我們可以定義為基于可信計算模型的數據流動,可以拆分為分布式存儲、數據所有權定義、可信執行。這個部分我們用PlatON來闡述。
在PlatON的網絡結構里,有一層單獨用來實現可信計算的layer2,layer2可以理解為鏈下部分,負責計算和存儲。所以說PlatON的數據可信計算,同樣是在layer1的區塊鏈結構外,實現了對數據的處理,然后利用區塊鏈網絡帶來的權益歸屬、激勵等等。
PlatON的分層邏輯和功能分配
在上圖中,我們可以看到在layer2的計算網絡里,存儲著State,這就是數據存儲的載體節點,而在這個結構里,是賬戶模型和數據存儲一起的融合應用。
據PlatON的技術文檔可知,在狀態取用里,PlatON雖然沿用以太坊的賬戶模型存儲數據,但狀態數據因為數據量較大,選擇不保存在帕特里夏樹里,而是單獨保存在另外一個不存儲歷史狀態的SNAPDB中。
PlatON認為,鏈上存儲需要充分考慮成本,只有有價值的、需要所有賬本做出共識的信息才應該被存儲到公共賬本上,有價值的信息包括:區塊、交易、賬戶數據。
PlatON的數據存儲模型
所以PlatON的存儲分為賬戶數據存儲和快照存儲,很明顯一個位于鏈上layer1,一個位于layer2。
但在layer2里,還對數據進行額外的處理,充分發揮其數據計算特性,處理是由可信計算設備和技術完成的,其中包含可驗證計算算法可實現非交互證明的鏈下計算擴容方案、安全多方計算結合秘密共享和同態加密實現隱私計算協議等。
此外,還存在MPC虛擬機來執行可信的智能合約計算,這是整個網絡里智能合約運行的基礎。
通過這些layer2層的實現,最終實現數據流動以及數據應用的時候,既可以不泄露原始數據且能進行協同計算和結果驗證的計算。
值得非常注重的是,接入layer2的計算設備需要具備專用的計算能力,才可以執行某些應用場景的需求。其要求計算能力超強,并且具備可信能力。因此PlatON會啟用FPGA/ASIC等研發的高性能計算設備接入網絡,滿足這一過程的需求。
對比Chainlink和Jasmy的兩種范式,PlatON的不同點顯而易見,其在技術融合應用上,在layer2付諸了非常大的研發力量,其技術落地難度更具挑戰。
6.三種數據處理范式的應用分析
以上3種范式,是主流的基于區塊鏈的數據處理方式,但這三種范式的應用如何呢?
首先我們來看,不容置喙的是,第一種簡單模式其應用數量最廣泛,因為很針對性的使用到了金融領域,正如在DeFi的發展里,Chainlink發揮了巨大的作用,以此為代表的模式,還有溯源等鏈的應用。
Chainlink的部分節點可提供的喂價展示
不過Oracle是面向簡單高頻數據的范式,這個模式簡單,好應用,但對于互聯網社會的遺留問題,并不善于解決。
例如數據隱私問題,Oracle更多是公開的數據可信,而完全不擅長于特有的數據部分。
基于物聯網的數據流動是明顯面向生活化和商業化數據處理的范式,例如Jasmy的應用,已經針對了互聯網App數據,企業辦公數據,以及某些硬件生態的數據。
這是一個從用戶端到平臺和商業生態流動都有設計的范式。這也是目前來講,應用最多的范式結構。
而最后的可信計算是主要面向數據資產商業化的范式,這個部分最難解決的,是商業化數據的合作場景中數據可用不可見,并且是巨量數據的的可信,不只是要求技術,而是要求可信技術和計算能力、存儲的并重。
所以,這三種范式各有千秋,Oracle的范式最適合加密貨幣領域的DeFi。而以Jasmy舉例的應用邊界最廣泛,可以切入除金融簡單數據之外的應用領域。技術相對完善,不過仍需要進行數據更詳細的定義和規范。可以向第三種范式趨勢性發展。
而第三種數據范式,技術上已經可行,但落地應用還需要過程,其中對于數據權益歸屬更詳細的定義和規范,以及技術上實現高并發和高速計算處理,是應用落地更難的部分。
7.寫在最后
數據問題猛于虎,但解決方案在創新者的實踐里已經準備充足,一旦區塊鏈項目落地進程加速,以上3個范式會創造更多的商業價值。
例如Jasmy將企業數據進行了機密設計和終端端數據管理,可以增加邊緣數據的可利用價值,企業數據利用率也會增加。PlatON實現數據的可用不可見,可以繼而應用在AI隱私計算領域,幫助機器學習過程中的數據應用,這個過程是很多產業的突破口,例如AI醫療、AI出行、AI互聯網應用等。
數年前,我們會在感嘆AI技術出現的時候說一句“未來已來”,而筆者認為,如今,解決完數據問題,我們才確確實實可以放心的說一句“未來已來”,因為這是一個讓數據歸于所有者的新未來,是互聯網的數據混沌時代無法代表的新未來。
撰文:白計劃團隊
2020年度熱詞之一是DeFi,你可能聽過社群中不少人在談論他們通過DeFi獲取的驚人收益,那么DeFi到底是什么呢?DeFi是DecentralizedFinance去中心化金融的簡稱.
1900/1/1 0:00:001、 星球日報訊據官方消息,青年文化媒體公司BIE別的將在OpenSea拍賣一個6秒的視頻NFT,視頻素材來自2015年制作發布的陳冠希紀錄片《觸手可及》.
1900/1/1 0:00:00HashSpace是由HashSpace.N.V庫拉索基金會發起、WilliamHill等數家國際上市公司領投,多家全球數字經濟行業協會共同參與的無國界社交應用生態鏈.
1900/1/1 0:00:00在上線主網一周之后,算法穩定幣協議Fei完成了幾次社區提案投票,但距離Fei何時回到1美元錨定價,依舊是毫無頭緒,而在昨日.
1900/1/1 0:00:00親愛的庫幣用戶, BTMX聯手庫幣交易機器人為各位帶來福利,多項活動總計5,000BTMX獎勵等待你來贏取!活動時間:2020年4月19日18:00(UTC8)-2020年4月25日18:00(.
1900/1/1 0:00:00DeFi收益率市場Pendle宣布完成350萬美元融資,MechanismCapital領投,Crypto.comCapital、HashkeyCapital、SpartanGroup、CMS、.
1900/1/1 0:00:00