必一运动随着近些年AI和物联网的发展,越来越多的电子设备产生了海量的数据。在数字时代,数据将成为主要生产要素,呈指数级增长的数据量对于当前的数据存储体系提出了更高的要求,适用于互联网时代的中心化存储方式将无法满足新时代的存储需求,去中心化存储将颠覆传统存储技术,革新存储市场。
近几十年来,中心化云储存的服务不断改进,成本逐渐降低。但由于中心化存储将数据集中化,涉及的数据量更大,使得数据更易受到攻击和泄露。中心化存储数据的安全性、隐私性和可持续性都存在一定风险,使得行业逐渐陷入瓶颈。
同时,云存储本身也不过是一种商业模式,中心化的云存储运营商可能因各种市场或自身经营的问题跑路或是停止服务,用户却无法对服务商的行为进行约束及索赔。这就造成用户往往倾向于将数据存储在规模更大、更有信用的服务商处,使头部公司的数据集中化程度越来越高,这也造成了数据一旦丢失将存在大面积丢失的情况。
在可持续性方面,当前中心化存储的模式存在一定服务上的限制。随着无人驾驶和物联网的普及,大量的智能设备将接入网络并产生指数级增长的实时数据。在这种情况下,中心化的数据存储显然不能满足网络存储的需求。未来数据存储系统不仅要做到数据的存储、共享、读取,还要做到高效、准确的数据传输和分析,这对中心化的数据存储结构造成了极大的挑战。
中心化存储模式的局限性在一定程度上不利于大数据时代的发展,已然无力支撑时代需求,为了从根本上解决传统中心化存储频繁的数据泄露、服务的限制、运营商停运等问题,去中心化存储这一概念逐渐兴起。
去中心化存储网络(Decentralized Storage Network, DSN)是一种以区块链为底层技术,通过分散存储将文件或数据分片存储在供应方提供的存储空间上的存储商业模式。去中心化存储之所以重要,是因为它基于区块链技术,解决了中心化云存储的种种弊端,并且更顺应大数据时代发展的需求,能以更低成本,更高效率地存储非结构化的边缘数据,赋能 AI、互联网、自动驾驶等新时代技术。
传统互联网采用的中心化存储数据全部在应用平台服务器上,目前面临着如用户数据安全、所有权、隐私保护和可持续性等诸多问题。而去中心化存储的优势正在于数据可跨多位置复制并在多处被访问,减少了黑客通过单一节点攻击的安全性问题,能够有效进行数据确权和隐私保护,并使用户可以完全控制自己的数据。这样的安全性和隐私性是中心化网络所不具备的。此外,以 Arweave 和MEMO为首的项目专注数据的永久存储问题,为重要数据存储的长期稳定性做贡献。可以说,中心化存储所面临的挑战正是去中心化存储迎来的机遇。
在去中心化存储系统中,影像数据存取速度的两个重要因素是数据冗余机制和内容寻址系统,如用户存储数据时这些数据会被生成多个副本并存储在全球各地的节点上,内容寻址系统将为这些数据副本进行分门别类,当用户需要读取数据时,这些数据将从全球距离最近、网络服务最好的节点副本中进行提取,彻底解决中心化存储因为流量瓶颈和中心化服务器限制导致的读取速度缓慢的问题。
结构化数据指代传统的关系数据库里存放的内容,而图片、音频、视频、文档等以普通文件形式存放的数据就是非结构化数据。根据IDC报告,未来的数据中,75%增量都是非结构化的边缘数据。不同于集中式云存储服务,去中心化存储可以将数据存储从远距离的云服务器端,迁移到离数据更近的边缘存储设备或边缘数据中心就近存储,具有更低的网络通信开销、交互延迟和带宽成本,更高的自适应能力与可扩展性,适合处理数量大、速度快的存储。在这一点上,Filecoin和MEMO分散式云存储系统选择了相同的边缘存储策略。
去中心化存储是 Web3.0 领域最早出现也最受关注的基础设施之一。最早的去中心化存储方案 Storj 和 IPFS 协议在 2017 年就已经上线,MEMO分散式存储协议也在2018年发布。如果没有去中心化存储,就不存在去中心化的网络,更加不会存在 Web3.0。那些只有去中心化服务,却没有底层去中心化存储支持的项目,严格意义上不能算是一个 web3.0 项目。所以说,去中心化存储是赋能 web3 .0长期发展的基础设施,意义重大。
去中心化存储既解决了传统中心化存储的问题,服务了大数据时代下传统行业的数据存储需求,又赋能了新兴的 web3.0。作为加密领域的重要基础设施,去中心化存储赛道的商业模式明确清晰,市场规模呈显著增长趋势。
虽然以上提到的Filecoin、Arweave、MEMO、Storj等都同属于去中心化存储赛道,但和其他三者迎合市场的多元化理念不太一样,MEMO则是更加注重存储本身,以数据为基本出发点,专注开辟了属于自己的一条高效、低成本、高空间利用率、全面的去中心化存储之路。
虽然Filecoin和MEMO一样都是利用了边缘存储,但MEMO分散式云存储系统基于世界各地海量的边缘节点进行构建,这些边缘节点主要来自于全球闲置和半闲置的存储设备,通过已有互联网基础设施进行相互连接,在降低节点构建成本的同时提升闲置资源利用率,打造了参与门槛更低、收益更高、空间更大的共享存储模式。
当下的分布式存储系统,大多是以出块目的,为了应对时下的热门需求而构建的,如Filecoin的主要存储数据为NFT、游戏等Web3项目数据,IPFS访问和下载并行的机制也是对热门内容更加有利,相反如果是冷门数据或者加密数据,可能就会遭遇无节点访问的情况。MEMO秉持存储理念,在MEMO分散式云存储系统中,用户可以实现数据自主权,数据类型、冗余度和存储时长都由用户自己控制,因此MEMO的数据接收范围更加多元化,只要用户有需求,都可以存储在MEMO系统中,如MEMO在2022年便和各大数据集平台展开合作,将动物数据、金融资料等冷数据加以备份并提供安全保障。
MEMO独立的数据可用性层是在链上存储+边缘存储的基础上实现的,通过部署智能合约,将计算与存储分离,链上仅进行交易结算,而存储证明等其他功能都在链下实现,这样一来,链上存储压力变小,结算能力更快,而将其它数据存储在链下也相应的降低了链上开销。
基于MEMO分散式存储协议的数据中间件服务是MEMO团队于2022年设计并构建的新一代中间协议层,通过关联MEMO数据中间件服务接口,向上已经对接Ethereum、Polygon、Meter、Metis、IoTeX等各大公链网络,向下可以兼容IPFS、Arweave这样的底层存储系统,尽可能地实现了链与链、计算与存储、Web3.0和Web2.0的互操作性。
虽然经历了5年的发展,去中心化存储还只是初具规模,存储规模与中心化存储相差甚远,MEMO分散式云存储也还在初始阶段,但是,基于去中心化存储的种种优势,随着 Web3 生态的发展、对隐私和用户数据所有权的重视,未来该赛道还有极大的增长空间,分散式云存储也将爆发出更多的可能性。