撰文:Feng & Carol,DFG
为什么去中心化存储对加密和Web3至关重要?
长期以来,比特币和以太坊等公共Layer1区块链一直依赖于外部存储技术的发展,因为出于以下几个原因,区块链本质上不适合存储大量的数据:
- 区块链本身是为价值传输而设计,而不是为存储大量数据而设计,并且在区块中存储数据非常昂贵。
- 如果将大量数据存储在区块中,网络拥堵将变得非常严重,这将引发Gas大战,并且导致费用上涨。
- 即使区块链通过扩容接纳大文件的存入,但区块链的数据结构决定了区块信息多为以加密压缩的形式存储,并不适合进行文件信息的检索和分析。
显然,这些成本和效率问题无法通过中心化存储服务商解决,他们的数据易受到审查且具有可变性,这有违区块链和Web3的精神。
实现去中心化存储才能真正实现数据确权和主权网络,否则以牺牲中心化效率来发展区块链网络的意义不大。因此去中心化存储网络(Decentralized Storage Network, DSN)发展成了主流的解决方案,这是一种以区块链为底层技术,通过分布式存储将文件或文件集合以分片形式存储在供应方提供的存储空间上的存储商业模式。
理想状态下,一个DSN 必须能够存储、检索和维护数据,同时确保网络内的所有参与者都能为自己所做的贡献获得激励,同时保持去中心化系统的去信任特性。不过在具体实践中,各个DSN 项目都做出了自己的权衡和取舍。例如,Filecoin追求去中心化,但由于其时空证明算法计算量大,写入速度慢,影响了存储体验和性能;Storj在追求高性能的同时,牺牲了部分去中心化特性;另辟蹊径的Arweave很好地实现了永久存储,但也因此带来了较高的存储成本,更适合NFT和DApp。
目前去中心化存储赛道的整体市场体量相对较小。据Messari发布的一份报告,四个头部存储协议(Filecoin、Arweave、Storj和Sia)的2022 年的总收入仅约1450万美元,这与当前数百亿美元的云存储市场需求形成了鲜明对比。据Vantage Market Research的研究报告,全球云存储市场预计将从 2022 年的 900 亿美元增长到 2030 年的 3,300 亿美元,2023 年至 2029 年期间的年复合增长率(CAGR)为 17.7%。
物联网(IoT)、人工智能(AI)和自动化等新技术的采用正在推动数据创建和存储需求指数级增长。中心化数据存储服务商在占据巨大市场份额的同时,暴露出了数据和市场垄断的诸多弊端,去中心化存储领域急需更多改变游戏规则的初创公司加入,以推动更多对数据主权有高要求的 Web3用例的实现。
全球云存储市场规模预测/来源:Vantage Market Research
Flostream Network:去中心化的Web3基础设施服务商
Flostream Network 试图为去中心化云存储市场带来一些改变。Flostream 是一家去中心化基础物理设施(DePIN)服务提供商,正在为Web 3构建全新的去中心化存储和分发解决方案。
Flostream Network不仅通过Amazon S3 兼容的API 提供内容存储服务,还能快速检索内容,实现按需内容分发,并支持社交媒体或视频点播流等应用程序,且性能上与Web 2同类产品无异。
Flostream 的设计将使其生态中的用户或应用享受到数据持久性、安全性和可靠性。加载到 Flostream 的任何数据都完全归用户所有,从而确保了数据的数字财产所有权。Flostream有一个本地验证服务,可以通过数字签名和时间戳验证加载的任意数据。 Flostream团队希望通过永久存储和原生认证功能保护互联网的完整性,允许用户将其社交媒体资料、创作者内容或整个互联网的副本备份到Flostream网络,从而在深度伪造(Deepfake)和AI时代保护真相。
Floststream 存储与内容可用性
Flostream 的创始人David Rhodus曾在 Consensys 工作,为一些大型公司开发了很多基于以太坊的 POC 产品,其中很多项目最终都困于扩展问题。David 及其团队花了大量时间试验如何将分布式系统与区块链连接起来,以及如何使用区块链控制这些系统。
在开发开放的、去中心化的钱包到钱包消息元协议的过程中,团队遇到了一个扩展性问题。大量的通信会产生海量数据,Flostream Network 团队意识到现有的去中心化存储解决方案(IPFS、Filecoin、Crust 等)存在诸多限制,这促使 Flostream 开始寻求自己的去中心化存储解决方案。
目前Flostream已经推出了自己的Amazon S3 兼容存储服务 Flostream Storage,从底层技术到存储架构设计都进行了大量创新,以实现差异化竞争。 通过引入专有的元数据层、Flostream 数据传输协议(FDTP)和基于 BLAKE3 的尖端哈希算法等创新技术,Flostream Storage有望很好地解决目前去中心化存储市场面临的可扩展性和低性能问题。 开发自主存储协议的目的是优化内容分发,并最终成为 Web3的内容可用性层,使数据能够轻松存储、移动、检索和分发。
技术概览
Flostream Storage由多个单元组成,每个单元包含一个存储集群以及相关的控制和监控基础设施。 这些单元为客户提供与Amazon S3 兼容的存储服务,确保客户数据的隔离和安全。单元由存储节点和网关节点组成,后者是单元存储集群的入口。集群中的节点可用作存储节点或网关节点。这两种类型的节点都能与集群中的所有其他节点通信,维护元数据库,并提供 S3 API 端点。
由存储和网关节点构成的Flostream 存储架构 /来源: Flostream 文档
竞争格局
目前,无论是主流的中心化存储服务商如AWS、谷歌云或者去中心化存储服务商Filecoin、Arweave都存在明显的不足。中心化方案尽管存储性能较高,但价格并不便宜,也存在单点故障的可能性。去中心化方案价格相对便宜(Arweave为一次性付费所以略有不同),但无论是存储或者吞吐均存在较多性能限制,无法应用于大规模、高并发的Web3应用场景。
现有的IPFS等分布式存储协议痛点在于:将数据存储在不断扩大的节点分支上,并依赖于线性文件检索方法,从而限制了可扩展性和速度。Flostream的目标是既达到中心化存储服务商的性能优势,同时能做到价格低廉,并且网络延迟比市面上头部去中心化存储项目都要低,寻求一种更为均衡的存储方案。
针对这一系列瓶颈,Flostream存储采用了专有元数据层,可实现快速数据检索和低成本运行。此外,Flostream采用了自研基于BLAKE3的尖端散列算法进行数据压缩和网络管理,比目前AWS用的SHA-256快14倍。同时引入了高性能数据传输协议FDTP,在现有UDP协议基础上进行了优化。Flostream还采用了智能数据放置和数据迁移,人工智能数据位置迁移能够减少热点部署,边缘存储可以在更靠近数据源的地方处理数据,从而实现更快速的访问,并在高负载时提供更快的吞吐量。自创的智能重复数据删除算法则最大限度地减少存储冗余并优化容量的使用,从而降低成本并提高数据传输速度。通过一系列的技术优化,Flostream存储在多个维度上实现了较大的改进:
- 存储和流量价格低于中心化AWS和谷歌云,尽管仍略高于Filecoin和Storj等去中心化项目,但在同等成本情况下能够提供更为优越的存储和带宽性能。
- 读/写吞吐量能够达到目前中心化存储服务商水平,且在中心化运作模式下,吞吐能力将远超去中心化存储头部项目Filecoin、Arweave、Storj等。
- 仍然保持类似中心化存储服务商的高可扩展性和低时延。
Flostream目前已经为数千位个人用户提供服务,并正在与多家企业开展试点,未来会将存储工作负载从 AWS 和谷歌转移到 Flostream。
坚实而富有经验的团队
Flostream团队成员在区块链、软件工程、云计算、数据存储和项目管理方面拥有丰富的经验,致力于利用自身的技能和资源,提供加密行业最先进的Web3解决方案。创始人David是一位拥有超过25年工程经验的连续创业者。早在2010年,他建立了一个每年支持超过 100,000 场体育赛事直播的流媒体平台,最后被Amazon Web Services成功收购,这样的案例在Web3创业者中并不多见。2015年他加入Consensys,专注于大型企业区块链解决方案的开发。David连续创业的背景不但为项目提供了强有力的背书,同时也已吸引到不少知名机构的关注。Flostream于今年2月完成了300万美元融资,DFG、Fuse、Scytale、D1 Ventures和TRGC等机构参投,是为数不多在加密熊市中仍然能获得外部资金的去中心化存储项目。
总结
目前,大部分的云存储市场份额仍然被Amazon、Google等巨头提供的中心化方案垄断,去中心化存储项目产品在用户体验、性能、成本等方面并未显现出明显优势。这些去中心化项目主要以挖矿方式运作,试图通过代币激励来吸引用户,这也就导致了加密熊市中代币激励减少后,用户大量流失。缺乏Web3原生应用属性,长期必然无法吸引更多的用户和企业,实现规模化的增长。
虽然去中心化存储可以解决很多问题,如数据隐私保护、抗审查、避免单点故障等,但目前去中心化系统的发展还不成熟,仍有很多问题亟待解决, 去中心化存储的行业规模远未达到顶峰。由于先前熊市整体市场萎靡、缺乏内容分发能力、应用场景有限等原因,即使是Filecoin、Arweave 和 Storj等头部去中心化项目在市场规模上也无法与中心化存储巨头相抗衡。
随着Layer2技术的成熟,DApp运行速度越来越快,成本也越来越低。Web3应用叙事重回大众的视线,大量数据的积累和市场需求会将行业热度再一次转向去中心化存储赛道。在未来,整个DSN市场一方面需要更多的中间件、聚合器去承载更多的用户流量,另一方面也需要对DSN应用门槛和成本不断调整优化,从而吸引更多用户。Flostream的存储和数据可用性产品是目前将DApp和去中心化存储无缝结合的理想解决方案。DFG作为Flostream的早期投资者,我们很高兴看到Flostream的产品正在为更广大的Web3市场带来更为实际可行的应用解决方案。David作为一个云服务行业的老兵,之前创业项目被AWS收购已经证明了他卓越的领导力和创造力。我们坚信David能够带领团队走向下一个成功,并使Flostream成功引领新一波的去中心化存储和Web3应用的创新。
原文:javascript:;
编辑:web3528btc 来源:加密钱包代币