Filecoin技術進展:將實現大規模資料的離線傳輸

買賣虛擬貨幣

這是突出介紹Filecoin協議獨特特性的新系列的第一篇部落格文章。

Filecoin 旨在儲存世界上最有價值的資訊。在全球範圍內,我們每天產生 2.5 億個位元組的資料。儘管其中許多資料不需要永久儲存,但其中一些資料涵蓋了人類在科學,數學,藝術,歷史和人文科學領域創造的最重要的資訊。

Filecoin 是用於買賣分散式儲存的基於區塊鏈的市場。區塊鏈機制提供了安全的儲存保證,而加密貨幣機制建立了一個動態的市場。

正如我們在加密經濟學構造部落格文章中討論的那樣,有時當您處理大量資料時,很難(昂貴且耗時)透過 Internet 傳輸這些檔案以進行保管。對於 PB 級資料集和更大的資料集,最明智的解決方案通常涉及在硬碟上傳輸資料。Filecoin 協議和專案具有工具和結構來支援所謂的離線資料傳輸。

何時考慮離線資料傳輸

決定是線上還是離線傳輸資料時要考慮的兩個因素是費用時間

1. 費用

考慮像網路這樣的儲存程式,因為資料的高速公路從一個地方移動到另一個地方。這種運動很快就會變得非常昂貴。想象一下一個龐大的資訊檔案館,例如博物館或圖書館,希望在分散的 Web(dweb)上上傳,儲存和保護其館藏。為此,組織可以透過網際網路流式傳輸其資料或使用物理裝置進行傳輸。

使用網際網路流式傳輸資料,可以快速建立傳輸成本。在當今的雲服務中傳輸 PB 級資料需要透過多個區域傳送資料,從而產生互連費和區域頻寬費,如果您選擇租用專用線路或考慮重試需求,則還需要支付額外費用。

從粗略的成本角度來看,僅傳輸 2.5 PB 資料所需的頻寬就需要約 140,000 美元-如果您要跨區域移動這些資料,則成本會更高。

這些費用可能會增加檔案館,博物館和其他非營利組織的費用。在現代藝術收藏的博物館超過 90 萬億位元組,預計到 2025 年將增長到 1.2 PB 級的英文維基百科包含超過600萬頁的文章和超過 36 十億字。

CERN 的開放資料入口網站在其粒子物理實驗中包含超過1PB的資料。倫敦自然歷史博物館資料入口網站包含近 400 萬個歷史標本。國家檔案館的電子記錄部門擁有500 TB的資料。這些是大量有價值的資料。

然後,考慮硬碟驅動器本身的成本–一種用於儲存和運送資料的物理介質。伺服器級 8 TB 驅動器的價格約為 200 美元。例如,要傳輸 2.5 PB 的資料,您將需要大約 315 個硬碟驅動器,總計約為 63,000 美元。

儘管您可能需要支付一些額外的運輸,進口費用和貨幣兌換單位成本,但您的成本遠低於透過網際網路傳輸資料的成本!

2. 時間

現在,讓我們想象一下,國家檔案館希望將其電子記錄傳輸到另一臺伺服器。以 100 Mbps 的速度傳輸 500 TB 的資料需要一年多的時間。用硬碟驅動器傳輸相同的資料僅需花費下載和傳送的時間,大概一週之內就可以完成!歸根結底,很明顯,在某些情況下,物理傳輸資料的成本效益更高且速度更快。

使用 Filecoin 進行離線資料傳輸

對於較小的資料傳輸,當儲存客戶端希望與礦工進行交易時,他們會向礦工提出交易以在“ Y”時間段記憶體儲“X”資料。礦工和客戶協商交易後,他們通常透過網路啟動從客戶到礦工的資料傳輸。

Filecoin 的離線資料傳輸功能允許擁有非常大資料集的使用者離線完成資料傳輸步驟(例如,透過將硬碟從客戶端運送到儲存礦工),並使交易按計劃進行。它是透過一個標誌來實現的,該標誌告訴客戶端不要透過網路傳輸資料。

相反,客戶傳遞一個 CID(描述資料的唯一識別符號),礦工隨後必須匹配該 CID,交易才能透過。這為客戶端節點提供瞭如何設定交易的靈活性,例如,將礦工在硬碟上的特定位置傳遞給礦工,以供他們用來生成分段 CID 的資料。

Filecoin 專案如何支援離線資料傳輸

5 月 7 日,我們啟動了 Filecoin Discover,該專案旨在激勵早期的礦工訂購和儲存裝有有價值的開源資料的硬碟,並作為交換,獲得其他 Filecoin 代幣。這是一種幫助 Filecoin 成為人類最重要的資料集之家的種子,並使其可供其他人訪問的途徑,以擴大我們的知識庫並形成新的想法。

礦工可以選擇硬碟驅動器,並在 Filecoin Discover 商店中籤署有保證的合同,Filecoin Discover 商店是 PB 級重要公共資料的目錄(並且正在增長!)。然後,礦工將以一定成本在驅動器上接收該資料。為了交換儲存這些資料,礦工獲得了 Filecoin。

商店開業後的最初 24 小時內,我們收到了 600 多個驅動器的訂單,這突顯了該專案帶來的興奮。

對於,Filecoin Discover 這樣的專案而言,成功程式設計的關鍵是降低硬體成本。4 月份,Filecoin 提出了一項有關儲存裝置(類似於 AWS Snowball)的提案請求,以實現更快的離線資料傳輸。

RFP 的目標是構建冗餘且安全的低成本硬碟解決方案。礦工可以在設定的期限內租用這些裝置,以保持資料傳輸。客戶端可以將資料載入到這些裝置上,而礦工則在收到資料後將其解除安裝到自己的伺服器上。

離線交易也可以在 Discover 程式之外進行。考慮一下海上的一艘潛水艇,它收集了 PB 級有關太平洋水下生物的資訊。當船舶返回陸地時,郵寄這些硬碟驅動器可能更有意義,而不是依靠線上資料傳輸。隨著我們努力分散網路的分散性,大量資料的物理傳輸將繼續在資訊傳播中發揮重要作用。展望未來,埃位元組規模的資料傳輸(例如AWS Snowmobile)是此演進過程中的下一步,用於傳輸大量資料。

最終,離線資料傳輸之類的解決方案將使 Filecoin 成為用於儲存資料的傳統雲端儲存平臺的更強大替代品。資料儲存是每個部門幾乎所有企業的實際成本。如果儲存成本下降,小企業將節省資金,他們可以將這些資金投資於僱用或研發。

這只是 Filecoin 網路獨特功能如何幫助企業以更有效,安全和負擔得起的方式滿足其儲存需求的一個示例。在接下來的幾週中,我們將推出更多突出這些功能的帖子。我們希望您能與我們一起完成這項任務,以分散儲存空間並改善對資訊的訪問。

免責聲明:

  1. 本文版權歸原作者所有,僅代表作者本人觀點,不代表鏈報觀點或立場。
  2. 如發現文章、圖片等侵權行爲,侵權責任將由作者本人承擔。
  3. 鏈報僅提供相關項目信息,不構成任何投資建議

推荐阅读

;