去中心化存儲:元宇宙與Web 3.0的交匯之處

撰文:Betty、YY
研究員:James Kuo、Noise Zhou、Lightmanben
均就職於 LD Capital

摘要

  • 線下生活的線上化及如火如荼的所有者經濟催生了巨大的數據存儲需求,具備巨大的商業和應用前景;
  • 中心化存儲由於高昂的成本、預置的存儲格式等因素難以跟上數據指數型增長所帶來的存儲容量、數據讀寫速度、安全性和數據關係的變化,由此去中心化存儲應運而生;
  • 去中心化存儲基於區塊鏈技術,具有可擴展性強、安全、效率高、自動容錯、可靠性高、成本更低的特性;
  • Web 3.0 的世界里,用戶海量的線上足跡和創作的線上作品創造了一個難以置信的巨大的數據王國,而這數據王國的維持依賴一個可靠穩定安全的數據存儲網絡;
  • 元宇宙輝宏的世界里,貨幣化的虛擬物品若失去可信任的區塊鏈鏈上存儲的保護,一旦其對應的元數據和媒體數據失效或被篡改,則將會變成一張沒有承兌方的無價值支票;
  • 現時主要的去中心化存儲方案為 IPFS/Filecoin 和 Arweave 項目,IPFS 開創性地引入了激勵層 Filecoin 以確保數據在約定期限內的可靠存儲,而 Arweave 通過技術創新以期實現數據在鏈上的永久保存。

2021 年的夏天,一組由一萬個不規則像素組成但看起來很奇怪的小人忽然興起,讓人驚訝的是其單個頭像卻能以等價於幾千萬美金的以太坊成交;此後 Bored Ape Yacht Club、Loot 等成為加密市場的新寵。從加密藝術、遊戲到頭像、文字,NFT 的興起引燃了人們對元宇宙、對 Web 3.0 的無盡想象。

然而當我們在談論作為身份象徵的 CryptoPunk、興緻勃勃地邊玩邊賺遊戲 Axie Infinity、酣暢淋漓地構想在元宇宙里星辰大海的征途時,我們是否想過這些數據會被存儲在哪?是否擔心這些數據可能會被篡改?沒有人會希望花了幾千萬美金的頭像因為底層數據的篡改而一文不值,沒有人會希望在元宇宙里與朋友對話的珍貴回憶因為系統宕機而永遠消失。站在元宇宙和 Web 3.0 紀元的起點,在數據爆髮式增長的今天,我們急需一個安全、開放、自由、可靠的存儲網絡。

本文將通過介紹存儲之於 Web 3.0 及元宇宙的深刻意義,嘗試向讀者描繪去中心化存儲在 Web 3.0 及元宇宙中激動人心的應用。同時,本文還將立足於去中心化存儲的發展現狀,對不同的去中心化存儲方案進行研究和比對。

存儲的產業生態

新冠疫情的肆虐加速了真實世界與虛擬世界邊界的模糊,人們在真實世界中的工作、社交、娛樂、餐飲、購物、出行等活動幾乎都可以在互聯網世界中來執行;同時,從 Web 1.0 到 Web 3.0,從被動的數據讀取到熱火朝天的內容創作,數據生產量發生了爆炸式的增長,並且還將以指數形式繼續增長。據 360 研究報告,全球數字內容創作市場預計將在 2025 年達到 169 億美金市值。如火如荼的所有者經濟模式和指數型增長的數據創造了巨大的數據存儲需求,芯片技術、算法、硬件等的發展促進了存儲技術的進步,而數據價值的釋放和數據安全的剛需又倒逼存儲技術的創新和基礎設施建設。在軟件及算法的迭代與融合中,存儲行業從傳統的磁盤存儲突破硬件的物理限制而逐漸演進到雲存儲。作為區塊鏈技術的三大支柱(計算、存儲、網絡)之一,存儲對於 Web 3.0 與元宇宙的發展都具有重大意義——從應用角度來看,數據安全與數據主權的最終歸屬關係著虛擬世界的穩定運行;而從經濟角度來看,元宇宙與 Web 3.0 世界產生的海量數據存儲需求也有着巨大的商業前景

去中心化存儲:元宇宙與Web 3.0的交匯之處

全球數據產生量走勢圖,來源:www.slideshare.net/PerryLea/the-20-rule-how-the-seismic-growth-of-data-has-always-and-will-always-outgrow-telcom

礙於各種因素我們現時無法整體評估存儲市場的規模,但以雲存儲為例,預計到 2027 年,全球雲存儲市場規模將達到 2,222 億美元,在預測期內年複合增長率達 21.9%( Sneha Korad Rachita Rake & Vineet Kumar, 2021 )。

去中心化存儲:元宇宙與Web 3.0的交匯之處

全球雲存儲行業市場規模預測,來源 https://www.alliedmarketresearch.com/cloud-storage-market

存儲的商業模式分為中心化和去中心化存儲,中心化存儲是將數據完整地存儲在中心化的服務器上,去中心化存儲則是採用分佈式存儲技術將數據切片分散存儲在多個獨立的存儲供應商上。中心化存儲方案以高穩定性的性能、低廉的費用,滿足了企業級存儲的需求;去中心化存儲以其定製化存儲方案、經濟激勵模型、隱私性強等特點滿足了長尾企業市場的特殊場景要求。站在 Web 3.0 與元宇宙的交匯處,對數據安全性和用戶數據所有權的重視,去中心化存儲的重要性將愈發凸顯。

中心化存儲

中心化存儲,即將整個存儲集中在一個系統中的多套設備上,是過去大型主機時代的產物,採用有限的固定的節點數,數據訪問僅需經過一個控制器,因而具有低延遲的優點但相對費用較高、數據安全性、服務提供商的運營可擴展性低等問題。

中心化存儲系統順利運行的關鍵之一是存儲服務器穩定運轉,存儲服務器成為系統性能的瓶頸以及可靠性的焦點,對於存儲環境、硬件設備等提出了極高的要求,因而巨大的中心化存儲市場卻是巨人的蛋糕,亞馬遜、微軟、谷歌、阿里雲四大巨頭合計佔據了雲存儲市場份額的 67%。

去中心化存儲:元宇宙與Web 3.0的交匯之處

2021 Q1 全球雲存儲提供商的市場份額(圖片來源:https://www.statista.com/chart/18819/worldwide-market-share-of-leading-cloud-infrastructure-service-providers/)

隨着微博、Facebook 等的傳播以及自我內容創作的流行,我們進入了數據以指數倍增長的時代,爆炸式的數據增長對存儲容量大小、擴充速度和數據備份等方面提出了更高的要求;用戶間實時的信息互動需要更快的數據讀寫速度和更高的安全性;同時,由於用戶自我創作產生的數據種類、數據間的關係變得更加複雜多樣化,存儲系統需要從過去單一的文件類型擴展至各種半結構化、非結構化的數據關係。而中心化存儲由於其高昂的建設成本以及行業進入壁壘,數據存儲容量、數據類型等的擴張都難以跟上數據生產的腳步,去中心化存儲由此應運而生。

去中心化存儲

就如 IPFS (InterPlanetary File System) 早期佈道者胡飛瞳所說:「在中心化數據存儲的世界里,用戶不僅為數據存儲付費,而且還得不到很好的數據保護,這一現象必須改變。通過去中心化,用戶可以自己管理自己的數據、加密存儲、授權訪問、安全備份等等特性的實現將極大地加強用戶的隱私,也能增強數據的長期保存,同時,有望通過共享的模式大大降低費用。這是數據存儲發展的必然方向。」

去中心化存儲基於區塊鏈技術,採用開源的應用程序和算法,把數據切片分散存儲在多個獨立的網絡節點上,主張隱私保護、數據冗餘備份等,並且通過對種子節點或文件上傳方提供經濟激勵使數據價值化。其中,經濟激勵模式使得用戶數據得以安全長久地保存正是去中心化存儲的點睛之筆。

當去中心化存儲遇上區塊鏈技術,便具有了可擴展性強、安全、效率高、自動容錯、可靠性高、成本更低的特性(焦仕可,2020):

  • 可擴展性:存儲節點的數量可無限擴展,每個節點的存儲容量亦可靈活調整;
  • 安全性:無需了解合作對方或尋求第三方的信任,存儲信息拆分成碎片分散存儲在多個節點,存儲數據的加密不僅局限於用戶和軟件終端,而且在存儲網絡的所有環節中、在信息傳輸過程中通過私有網絡訪問密鑰、零知識證明等方法進行加密處理;
  • 高效率:同一網絡上的節點可直接共享文件;
  • 自動容錯:由於存儲內容已分散到網絡中的許多節點上,可在數據傳輸或存儲出錯時存儲額外的副本;
  • 高可靠性:存儲系統內含的驗證機制能確保文件被完整真實地存儲,且能 7*24 小時供用戶隨時取用;
  • 低成本:據悉,存儲一期《中國有嘻哈》視頻文件,按 0.001 美元 /GB 帶寬成本計算,則愛奇藝需支付給傳統存儲商一百萬美元,若採用 IPFS 分佈式傳輸則可節省 60% 的帶寬成本。

去中心化存儲:Web 3.0 與元宇宙的交匯之處

去中心化存儲與 Web 3.0

互聯網的起源可以追溯至 1989 年萬維網的誕生,如果說門戶網站開啟了 Web 1.0 時代,那麼 2003 年博客的興起標誌了 Web 2.0 的開端。從 Web 1.0 到 Web 2.0,從被動的信息接收到自主創造內容與在線交互,互聯網用戶呼喚更注重用戶內容創作、易用性和互操作性的應用體驗,Web 3.0 呼之欲出。正如蒂姆·伯納斯·李所說,「人們一直在問什麼是 Web 3.0。我想也許當你在 Web 2.0 上有一個可擴展的矢量圖形覆蓋層——所有的東西都在蕩漾、摺疊、看起來模糊不清——並且可以訪問一個集成在巨大數據空間中的語義網絡時,你就可以訪問一個難以置信的數據資源」(Victoria Shannon, 2006)。雖然現在我們還未對 Web 3.0 達成一致的定義,但 Web3.0 應該具有以下特徵( Fabric Venture, 2020):

  • 開放性(Open): 由開放和可訪問的開發人員社區構建開源軟件,並且鏈上進行的操作能被所有人查看。
  • 去信任化 (Trustless):網絡本身允許參與者在沒有可信第三方的情況下公開或私下互動。Web 3.0 通過去中心化的激勵機制保證參與者遵守規則,在交易中利用區塊鏈協議的共識機制驗證賬戶的真實性和轉賬的有效性,達成去中介化的價值轉移。
  • 去許可化(Permissionless):任何人,包括用戶和供應商,都可以在沒有管理機構授權的情況下參與。
去中心化存儲:元宇宙與Web 3.0的交匯之處

互聯網的演化(來源:https://hackernoon.com/web-3-0-will-be-powered-by-blockchain-technology-stack-626ce3f828c7)

Web 3.0 的星辰大海里,數字世界與物理世界的邊界正在模糊。用戶海量的線上足跡和創作的線上作品,如果沒有一個穩定可靠的數據存儲網絡在背後默默地記錄下,當我們興緻勃勃地回望 Web 3.0 世界里所發生的一切,那時可能只剩下一片模糊的碎片。

去中心化存儲與元宇宙

2021 年隨着 Roblox 上市「元宇宙 /Metaverse」概念忽然席捲了互聯網、VR/AR 和金融投資界等各大行業,藉著微型計算機、VR 設備和以 5G 為代表的高速網絡技術的興起,人們來到了元宇宙紀元的門口。正如我們上一篇爆款研究報告《Metaverse 全景透視:從過去看向未來》所說:元宇宙世界的點睛之筆正是其經濟系統。其一,基於區塊鏈的開放式支付和清算系統,可以滿足用戶在元宇宙世界的實時、公平、透明、快速的 P2P 支付需求;將元宇宙中用戶的虛擬物品或創新成果貨幣化,不僅賦予了用戶與真實物理世界近似的權益保障,更能極大地促進元宇宙資產的流通、交易並鼓勵用戶通過持續創新來獲得財富積累。而這背後,在元宇宙輝宏的世界里,龐大的用戶信息交互及創作的虛擬物品信息如若失去可信任的區塊鏈鏈上存儲的保護,一旦其對應的元數據和媒體數據失效或被篡改,那麼用戶手上的 NFT 所有權憑證將會變成一張沒有承兌方的無價值支票。

去中心化存儲:元宇宙與Web 3.0的交匯之處

The Sandbox 遊戲內虛擬資產,數據源:The Sandbox

主要的去中心化存儲解決方案

Bittorren

最早期的去中心化傳輸方案為 Bittorrent,即 BT 下載,由軟件工程師 Bram Cohen 於 2003 年提出,通過 P2P 下載的方式克服了傳統下載方式的局限性——不需要資源發布者擁有高性能服務器來傳輸資源,且下載同一文件的人越多下載該文件的速度越快,加上其免費使用這一收費模式,吸引了眾多的網民使用。然而 Bittorrent 下載必須使用種子文件,即下載內容的所有地址放到這個種子文件中才能下載,且客戶端只能下載種子文件內的內容。但種子文件可能隨着時間推移而減少甚至消失,這也意味着存儲的內容可能會在傳播中消失。Bittorrent 的另一個明顯的問題是缺乏激勵機制,缺失激勵用戶無償共享文件的動力。在適當的經濟激勵缺席下,只有那些廣受流行且不斷有人下載的內容才能倖存下來,而某些未能引起大眾注意的精華則可能消失在歷史的長河中,只留下一抹模糊的剪影。

IPFS/ Filecoin

IFPS (InterPlanetary File System)是 2015 年提出的另一去中心化存儲方案,克服了 bittorrent 的不足——僅用 hash 地址即可尋找到所需文件、可存儲內容的多個版本、可預下載內容,進而實現去中心化、快速、高效率、可靠性、安全的內容存儲。值得注意的是,IPFS 又開創性地引入了激勵層 Filecoin,通過通證激勵機制以確保文件在約定期限內的可靠存儲。

Filecoin 允許任何個體利用空閑的硬盤空間和帶寬在公開市場上提供數據存儲和檢索服務,將未用硬盤容量貨幣化,並通過 PoRep (複製證明)和 Post (時空證明)來保證礦工真實存儲文件的情況,防止女巫、生成、外包等虛假存儲數據的攻擊。簡單來說 RoRep 是證明礦工真實存儲了數據,而 Post 則是證明礦工一直將該數據存儲在自己的硬盤中。運作原理如下圖:用戶通過發布訂單尋找合適的存儲礦工,數據加密並分割后發送至礦工,礦工將該信息添加至存儲區塊進行存儲並持續證明其工作以獲得獎勵。

去中心化存儲:元宇宙與Web 3.0的交匯之處

IPFS 工作原理圖,圖片來源:https://www.8btc.com/article/613165

當然,Filecoin 的這種模式並不意味着它就是完美無缺的。IPFS 挖礦需要專業設備—GPU 礦機而使挖礦成本較高,行業進入壁壘的提高導致普通個體可能無法直接參与存儲挖礦,進而全網總存儲將向少數存儲供應商或大規模礦池集中。這從某種程度上來說,IPFS 所構想的完全去中心化在執行過程中又變成了少數供應商壟斷的「中心化」存儲。

Filecoin 主網於 2020 年 10 月上線,目前已有 3,175 個活躍節點,主要遍佈於北美、歐洲、中國、韓國等。截止 21 年 10 月 14 日,Filecoin 全網提供了 12.393 EiB 有效算力,當前基礎費率為 0.1052 nanoFIL,封裝 32G 存儲花費 4.958 Fil/TiB。

去中心化存儲:元宇宙與Web 3.0的交匯之處

Filecoin 節點分布圖,圖片來源:filscan.io/statistics/map

去中心化存儲:元宇宙與Web 3.0的交匯之處

Filecoin 基線與算力走勢圖,圖片來源:filscan.io/statistics/map

伴隨着 filecoin 底層網絡和基礎設施的完善,其網絡效應發展的前期紅利吸引了更多的應用來布局。截至目前,filecoin 已建立起一個涵蓋「消費者存儲應用、數據市場、數檢索、NFT、Defi、可驗證存儲和隱私」等領域的生態環境,如 Fileswan、NFT Stororage、Opera、Livepeer 等項目。

去中心化存儲:元宇宙與Web 3.0的交匯之處

Filecoin 生態圖,圖片來源:https://github.com/filecoin-project/community/discussions/194

Arweave

與 Filecoin 將數據存儲在鏈下不同,另一存儲方案 Arweave 將數據內容直接存儲在區塊網中,是主打永久存儲 + 鏈上存儲的去中心化存儲方案。如下圖所示,Arweave 方案分為兩層架構:底層的區塊網絡 Blockweave 和上層基於 HTTP 構建的 Permaweb。Arweave 項目的技術亮點正是其底層 Blockweave 網絡:

  • Blockweave:

項目採用了全新的區塊鏈網 Blockweave——基於共識機制和特定的出塊模式,即將之前所有區塊的哈希值做成一個哈希列表並將系統中所有活躍錢包做成一個列表,礦工通過檢索哈希列表和錢包列表來完成驗證工作,而無需像 BTC、ETH 等節點一樣去驗證整個節點,這種方式減少了能源消耗並提高了節點工作效率。

  • 激勵算法 Wildfire:

與 Filecoin 需要持續性地收取存儲費用不同,Arweave 只在數據寫入時收取一次性的永久存儲費用,之後用戶讀取數據都是免費的,為了鼓勵節點對數據讀取請求作出響應,Arweave 引入了激勵算法 widfire。簡單來說,Wildfire 就是一個節點評分系統,根據節點發送新交易和區塊的次數以及響應請求的速度來讓每個節點對其他節點排名。從相鄰節點得到的可靠數據越多則給對方的評分就越高,相應地出塊概率就越大。

  • 智能網 SmartWeave:

Smart Weave 將智能合約執行的計算負擔從節點轉移到了用戶,即 Arweave 網絡中只存儲了應用程序的所有數據,這些數據將以代碼的形式提供給瀏覽器或其他客戶端應用程序,因而使得 Arweave 能支持需要大量計算的 Dapp。

去中心化存儲:元宇宙與Web 3.0的交匯之處

Arweave 架構

雖然 Arweave 存儲方案將數據保存在鏈上,能保證數據的不可篡改、「永久存儲」和所有人公開訪問;然而這種模式也具有一定的弊端。其一,數據的不可篡改導致任何改動都只能通過上傳新數據,這將造成一定的迭代成本。其二,為了保證數據的永久存儲,Arweave 需要不斷吸引新的節點加入同時確保節點的邊際收益大於邊際成本,然而 Arweave 節點數一直在減少,目前僅有 146 個節點,較 2020 年 5 月的 490 個節點減少了 70%。

去中心化存儲:元宇宙與Web 3.0的交匯之處

Arweave 節點分布圖,來源:https://viewblock.io/arweave/stats

Arweave 主網於 2019 年 1 月 29 日上線,並於 2020 年 5 月推出具有捆綁交易存儲功能的 Arweave 2.0 版本,鏈上交易量在 2021 年開始發力並於今年 9 月達到頂峰 (9 月日均交易量超 8 萬筆)。Solana 上 Metaplex Candy Machine 的推出以及 ipfs2arweave 跨鏈橋的推出等造就了 Arweave 的亮麗表現。

去中心化存儲:元宇宙與Web 3.0的交匯之處

Arweave 交易量統計,來源:https://viewblock.io/arweave/stat/txCountHistory

縱觀 Arweave 生態項目,目前較為活躍的是 NFT、DeFi 及基礎設施賽道,如 Koii、Limestone 等項目,目前生態還處於建設的早期階段。

去中心化存儲:元宇宙與Web 3.0的交匯之處

Arweave 生態一覽(圖片來源:鏈聞)

展望

站在 Web 3.0 與元宇宙的交匯處,對數據安全性和用戶數據所有權的重視,去中心化存儲的重要性將愈發凸顯。去中心化存儲與中心化存儲在存儲空間來源、帶寬來源、安全性、使用方式等多個維度的差異,導致現時去中心化存儲的規模和性能遠遠不如中心化存儲系統。雖然 IPFS、Arweave 等項目通過不同的「非中心化」設計方式彌補了其不同的缺陷,並引入通證激勵使全網存儲總規模擴大,但是項目方與用戶的利益不一致、費用結構的等因素阻礙了項目的快速拓展,其生態構建尚處於早期階段,未來需要在費用、節點量、用戶量之間找到平衡,實現規模與性能的兼顧。

去中心化存儲:元宇宙與Web 3.0的交匯之處

去中心化存儲方案的對比

我們期待隨着元宇宙和 Web 3.0 紀元的開啟,網絡的「飛輪效應」使去中心化存儲能迎來應用爆發的浪潮,期待存儲技術的改進和經濟激勵模式的優化,去中心化存儲這一賽道能有長足穩定的發展。

參考文獻
Cloud Storage Market (2021), Sneha Korad Rachita Rake , Vineet Kumar,
https://www.alliedmarketresearch.com/cloud-storage-market
分佈式存儲——千億存儲市場的藍海大戰,
https://www.8btc.com/article/613165
2020 分佈式存儲產業鏈研究報告(2020),焦仕可
https://www.jinse.com/news/blockchain/835473.html
A 'more revolutionary' Web(2006), Victoria Shannon,
https://www.nytimes.com/2006/05/23/technology/23iht-web.html
What Is Web 3.0 & Why It Matters (2020), Fabric Venture,
https://medium.com/fabric-ventures/what-is-web-3-0-why-it-matters-934eb07f3d2b
IPFS and Friends: A Qualitative Comparison of Next Generation Peer-to-Peer Data Networks (2021), Erik Daniel and Florian Tshorsch

本文鏈接:https://www.8btc.com/article/6698338

轉載請註明文章出處

(0)
上一篇 2021-10-16 17:14
下一篇 2021-10-16 18:13

相关推荐