WEEX 唯客博客, Web3 在各個領域的應用和發展已成為討論的焦點,儘管行業對 Web3 的定義各不相同,但一個普遍的共識是 Web3 賦予了用戶對其數據的所有權和自主權。這一轉變在我們的生活和工作與數字化越來越深入地融合之際至關重要,這意味著所有人類活動很快將以數據流的形式呈現,也就是說我們的各類行為都將被作為數據而被記錄,一個龐大而複雜的數據生態系統將是 Web3 行業乃至全人類的數字生活的底層形態。 如何有效地存儲、管理、使用和共享數據資源,如何真正釋放數據價值享受數據價值,成為了企業和個人正在共同面臨的問題。Web3 數據解決方案以其所有權回歸成為了新的數據分配關係的實現手段,以 CESS 為代表的 Web3 數據基礎設施通過提供了一個開放的、去中心化的、無需許可、用戶掌握數據主權的數據經濟新生態。 然而,Web3 數據領域依舊面臨著數據丟失率高、存儲空間利用率低、數據使用受限如檢索速度慢、數據流通和交換受限、缺乏數據隱私管理等等問題。而其中最為關鍵的是 Web3 行業中的大規模商業應用存儲沒有得到有效的解決方案,這將從基礎設施層面限制 Web3 真正實現大規模的應用,限制互聯網下一個時代的完全到來。 本文將從以下幾個角度,介紹 CESS 首創的去中心化對象存儲服務 DeOSS,以及其如何解決數據存儲領域面臨的問題。 去中心化對象存儲服務 DeOSS 技術原理分析 對比分析「DeOSS」與「OSS」服務性能、安全與成本 DeOSS 應用場景與產品使用指南 為何需要去中心化的對象存儲服務 從大規模商用存儲需求來說,每個用戶的在互聯網數字生活中所產生的海量非結構化數據,如圖像、視頻和日誌文件,由於其格式多樣、體積龐大,成為了企業和個人生成和消費的主要數據類型。對象存儲(Object Storage Service,簡稱 OSS)服務應勢而生。對象存儲是一種針對非結構化數據的存儲和管理技術,能夠提供大規模、可擴展並且經濟高效的存儲服務,如 Amazon S3 就是行業聞名的對象存儲服務。然後行業目前的 OSS 因其中心化的特性,使用戶面臨著數據主權缺失、易受數據泄露影響、數字身份和數據被出售給第 3 方等等痛點問題。 與此同時,隨著 Web3 應用的快速發展,特別是依賴實時數據流的 Dapps,需要對高頻動態數據進行快速有效的處理和存儲,以保證應用的響應速度和用戶體驗。此外,新一代互聯網對數據存儲的安全性、隱私性和數據所有權有著更高的要求,存儲領域正探索更加高效、安全和可擴展的解決方案。 針對上述存儲問題與需求,CESS 首創了去中心化的對象存儲服務 DeOSS。CESS 旨在通過去中心化技術和創新的存儲協議,為非結構化數據、高頻動態數據以及大規模商用存儲提供可靠的支持。這不僅能夠促進 Web3 生態的健康發展,也為用戶提供更優質的服務,推動數據驅動的新時代向前發展。DeOSS 不僅能滿足企業級非結構化數據存儲需求,而且可以為企業提供高安全性、可擴展和隱私管理的高性能存儲服務。 認識「去中心化對象存儲服務 DeOSS」 去中心化對象存儲服務(Decentralized Object Storage Service,簡稱 DeOSS)是一種去中心化的基於對象的海量存儲服務,為 Web3 領域提供低成本、安全、可擴展的分散式數據存儲服務。 無論是個人還是企業都可以使用 DeOSS 存儲、管理和保護數據,例如 NFT 的圖像和視頻、DAPP 的用戶數據、Defi的程序等。基於區塊鏈技術,DeOSS 將線上閑散存儲資源有效利用起來,構建龐大的分散式存儲網路。 DeOSS 的使命是讓數據權益回歸到數據產生者本體,而不是屬於中心化的機構;DeOSS 遵循 Apache2.0 開源協議,允許任何人在任何時間和地點部署,並且能夠自由地訪問存儲在世界各地的文件。 產品介紹 產品原理 DeOSS 將提供一個標準存儲方法,以實現存儲的基本功能,如存儲空間購買、存儲容器創建刪除訪問限制、文件上傳下載刪除分享訪問限制,以及用戶的操作限制。 DeOSS 產品架構 具體而言,用戶的數據以對象(Object)形式進行存儲在容器(Bucket)中。在使用DeOSS存儲數據過程中,您需要先創建存儲容器,並指定地域、訪問許可權、存儲類型等屬性。數據將以對象形式上傳至存儲容器,且每個對象包含了用戶數據(Data)、數據標籤(Metadata)和文件地址(Key)以作為其唯一標識。 DeOSS 的存儲空間內部是扁平的,沒有文件目錄層級結構的關係。因此,數據對象直接隸屬於其對應的存儲空間。企業可選擇自行搭建網關供外部訪問,也可以使用現有的網關。這樣在用戶通過域名進行訪問時,DeOSS 網關會將用戶請求轉發至對應的存儲服務。 產品特性 – 去中心化:DeOSS 是 CESS 去中心化網路中的基於對象的海量存儲服務,支持通過 HTTPS 加密在線傳輸數據,保證數據傳輸中與存儲時的安全與隱私。 – 高擴展性:每個賬戶最多可管理 1000 個桶,每個桶無空間限制,提供海量存儲能力。 – 數據所有權:您對您的數據及其所有權擁有控制權,可以選擇隱私存儲,與特定人員共享,或完全公開,以及不受干擾地刪除數據的能力。 – 抗審查:任何用戶都可以根據協議規定,控制自己的數據,避免其他實體因素的干擾。 – 毫秒級數據檢索:支持數據在線實時共享,以及靈活的文件管理。 DeOSS 適合存儲什麼? DeOSS適合存儲網站與應用中的高清圖片、音頻、視頻、備份文件等,以及各種DApp應用、網盤應用的文件。 DeOSS 適合誰使用? DApp, NFT 和 Web3 應用開發者,SocialFi 開發者以及有大規模數據存儲需求的用戶使用。 如果您是非開發者用戶,可以通過前往 CESS 官網體驗 DeOSS。 如果您是開發者,可以使用 HTTP 請求體驗 DeOSS。 (參與鏈接:https://www.cess.cloud/deoss.html) 系統架構 與主流分散式系統架構不同,DeOSS 在底層實現了與 CESS 區塊鏈高度融合,形成了獨特的開放式、去中心化的去中心化對象存儲體系。系統架構總體分為四層,如下圖所示,分別為應用層、服務介面層、區塊鏈層和存儲服務層。應用層為用戶提供交互友好的文件對象管理服務。介面層作為應用層與區塊鏈層的中間件,使得 DeOSS 可以為各類自定義應用提供對象存儲服務,實現了服務功能的開放。 區塊鏈層 區塊鏈層作為 DeOSS 架構的核心內容,將調度程序、存儲礦工以及用戶應用程序連接起來,提供文件元數據管理,用戶存儲空間管理,調度和存儲礦工賬戶管理等重要功能。區塊鏈層基於 CESS 鏈作為基礎設施,採用自研的高效共識演算法 R²S。(機制詳解參見《CESS機制詳解(2):區塊鏈層與隨機選取輪值(R²S)共識節點機制》一文)DeOSS 還具備靈活的存儲擴展能力,任意滿足資質的賬戶可申請成為調度節點或存儲礦工,為 DeOSS 提供服務並獲得獎勵。 服務介面層 DeOSS 服務介面層實現了常用代碼庫的模塊化封裝,因此應用層只需實現少量介面就能提供完整對象存儲服務,DeOSS 應用層服務架構如下圖所示。目前 DeOSS 提供了兩種應用模式:基於命令行的 Go 客戶端模式和基於 Gin 框架的伺服器模式。二者均需簡單的配置即可以快速啟動服務。用戶也可根據需求自由添加功能模塊介面,而無需關心內部代碼實現細節。 DeOSS 應用層服務架構 應用層 DeOSS 應用服務具有清晰的三層架構。 網路連接層為上層提供用戶交互、數據對象傳輸和鏈上功能調用等基礎服務。 內部服務層處理來自交互層的用戶數據文件,提供諸如數據確權、文件分片與冗餘、文件聲明等預處理程序,並將處理后的內容交由調度程序調度。另一方面,還負責處理來自鏈端和存儲礦工端的數據。 交互層負責用戶與DeOSS之間的交互,形成完整的服務閉環; 此外,DeOSS還提供數據加密與解密、系統日誌等額外服務支持。 文件傳輸協議 DeOSS 採用面向可靠傳輸的 TCP 協議作為底層通信協議,在此基礎上建立安全可靠的文件傳輸機制,文件傳輸協議如下圖所示。應用的服務層發起文件發送或接收請求時,首先與接收/發送方建立 TCP 連接,再通過 DeOSS 文件傳輸協議的握手機制建立文件分片位元組流傳輸通道。 DeOSS vs OSS DeOSS 除了具備當前市面上已有的對象存儲產品的優勢(例如高可靠、易擴展、低成本、高安全等),還具備抗審查、數據所有權歸屬用戶等特性。當前 Web2 的對象存儲服務,比如 AWS、阿里雲的 OSS 都是中心化的存儲,如前文所說,用戶使用OSS存儲服務將面臨數據被監管和壟斷的風險。而用戶通過 DeOSS 上傳的數據,是基於 CESS 區塊鏈技術實現了去中心化的存儲,數據的所有權是歸用戶所有。用戶可以通過 DeOSS 授權給某些應用來使用,當然這些應用並不能控制用戶所授權使用的數據。 以下是 DeOSS 和 OSS 的詳細對比。 通過上表中對比可知,DeOSS 不僅具備當前市面上已有的對象存儲(OSS)產品在存儲性能、成本等方面的優勢,尤為值得注意的是 DeOSS 的去中心化屬性,通過上表中對比可知,DeOSS 不僅具備當前市面上已有的對象存儲(OSS)產品在存儲性能、成本等方面的優勢,尤為值得注意的是 DeOSS 的去中心化屬性,使該存儲服務突破了以往存儲服務在安全、數據確權與效益方面的桎梏。而這正是當下企業級大數據存儲亟需解決的問題。 DeOSS 應用場景 在傳統應用領域,DeOSS 去中心化對象雲存儲能夠如同亞馬遜雲,谷歌雲一樣進入商用雲的業務範疇。通過 DeOSS 可以為企業和個人提供所有類別的雲存儲服務,滿足各種各樣的使用案例,其中包含但不限於以下: 分散式文件系統 — 分散式文件存儲不僅可以用於個人用戶的備份和共享,也可為企業提供大規模商用存儲服務 社交媒體 — 以高效、安全、可擴展且支持大規模存儲的特性,DeOSS 滿足了社交應用對海量用戶數據的安全存儲、實時更新和用戶數據主權的需求 流媒體應用 — DeOSS 對高清圖片、音頻、視頻等大型文件的創建、存儲和流式傳輸提供最佳解決方案 數據交易市場 — DeOSS 支持數據價值化和數據價值的流通、共享,為數據交易市場的建立提供基礎 區塊鏈 DA 層 — DeOSS 可為 Layer 1 的塊數據和狀態數據、Layer 2 rollup 解決方案中的交易數據提供低成本、去信任、高可用性存儲 創作者平台 — DeOSS 集去中心化存儲網路與內容分發網路於一體,滿足了 創作者平台對於數據版權確立、溯源的需求 數據湖 — DeOSS 適用於存儲、處理和保護大量數據,可幫助企業削減費用、管理數據及使用 AI 生物數據 — DeOSS 支持多類型數據確權和溯源、提供海量存儲和高效檢索,解決了生物數據所面臨的數量巨大、增長迅速、來源廣泛繁雜和難以標準化與結構化的問題 立即體驗 DeOSS 在 Web3 革命性建設與創新的進程中,新型數據基礎設施架構和數據流通機制逐漸形成,其正創造著面向數據要素確權、流通、交易的經濟體系,有望推動互聯網商業模式和價值分配模式變革,加快數字經濟的發展和革新。 而 CESS 創新的去中心化對象存儲服務 DeOSS 將成為推動此進程的重要產品與服務之一。DeOSS 產品除了具備當前市面上已有的對象存儲的優勢,如高可靠、易擴展、低成本、高安全等,還具備了去中心化、數據主權歸屬用戶、抗審查等優點。 親愛的夥伴們,我們誠摯地邀請您體驗與使用 DeOSS 產品!DeOSS 功能在源代碼編輯和部署后即可使用,入門指南請參見下方鏈接: https://docs.cess.cloud/deoss/ 最後,若您在使用過程中遇到任何問題,歡迎隨時與我們聯繫。我們熱切地希望與全球夥伴們為下一代價值互聯網的建設,貢獻去中心化雲存儲的基建力量! WEEX唯客交易所官網:weex.com