TL;DR
将非核心数据从主链上分离并存入DSN已经成为了解决扩容、提升互操作性和隐私保护的主流方案。Filecoin在矿工网络和存储成本上拥有极大的优势，但是Arweave的永久性存储可以给NFT或社交类应用提供更加可靠的解决方案。L1扩展存储网络可以提供相比DSN互操作性更高的新方案，但是仍然需要时间验证模式。未来的去中心化存储场景会包括完整的互操作性、数据可用性、安全性以及通过中间件和API提供用户/开发者友好的链下计算。去中心化存储的发展历程
数据存储板块一直以来都是科技界发展的基石和重点关注领域。从基于亚马逊、微软、阿里巴巴等提供了中心化云存储服务以来，云存储市场已经基本形成了1000亿美元以上(2021年)的市场规模且头部效应明显。而随着Web3的爆发，一批去中心化存储的供应商开始满足传统云存储市场满足不了的需求。
虽然目前大多数的dApp仍然部署在AWS上，而以太坊的节点在merge前也有超过50%在AWS上运行，但是Web3项目却逐渐发现了将后端和元数据与去中心化存储连接的重要性和必然性。根据Ethereum.org的定义，去中心化存储是一个由p2p网络构成的，每个运营者拥有整体数据的一部分并可以通过算法复原的数据分享系统。
去中心化存储虽然可以解决诸多问题，例如数据隐私性保护、抗审查等，但目前的去中心化系统发展还不成熟且有诸多亟待解决的问题。经过链上存储方案的不断尝试，DSN是目前的主流解决方案，这种方案可以最大程度上将存储容量提升到接近于无限，并且对数据的安全性和隐私性有所保障。
表1区块链数据存储方案比较
具体链上扩容方案可以参考文章：https://zhuanlan.zhihu.com/p/48078642
笔者认为，链下的存储层终将会成为Web3生态中的重要基础设施，并通过热存储、冷存储的方式解决任何协议层、运行层的数据存储问题。
Core Scientific在2021年挖掘近6000枚比特币:金色财经报道，数字资产矿业公司Core Scientific在12月共挖掘了1,044枚比特币，全年的挖掘总数达到5,769枚。根据周三的公告，截至年底，Core Scientific持有5,296枚BTC（按当前价格计算约为2.48亿美元）。Core Scientific 2021年挖掘的总数超过了Bitfarms和Marathon Digital的3,452和3,197枚。Core Scientific运营着大约67,000台ASICS矿机，算力为6.6 EH/s。[2022/1/6 8:27:57]
在未来，“不可能三角”中的扩容问题可以通过将存储层完全剥离但维持互操作性的方式来解决，并通过建立于冷存储层之上的中间件、API等服务提升数据计算、调用、推送的效率。
去中心化存储的发展现状：分类与规模
去中心化存储本质上服务于Web3生态的应用层，因此在解决方案上更加倾向于满足终端用户的需求，也就是用更高效、更低成本的方式执行数据存储、计算与调用的需求。从分类上来看，Arweave、Filecoin和Storj已经形成了独立的三个头部去中心化存储网络，其中Filecoin和Storj是更加去中心化的P2P存储网络，而Arweave是更紧密组织的存储节点网络。
另一方面，不同类型的存储聚合网络因为满足用户费用优化、存储方便等需求，逐渐成为更有吸引力的gateway，但仍然架构在Arweave或Filecoin之上。另外，以EthStorage为代表的L1扩展网络则专注于可直接调用主链DA层且提供额外的算力的设计，与L1深度链接。
来源:PuzzleVentures
财富：Blockchain.com 2021年收入已超15亿美元:10月15日消息，《财富》杂志援引Blockchain.com总裁Nicolas Cary的说法，该加密平台今年迄今为止的收入已突破15亿美元。这一数字落后于竞争对手，Coinbase仅在二季度就实现了22.3亿美元的收入。3月，Blockchain以52亿美元估值筹集3亿美元，迄今为止共筹集5.37亿美元。其估值大约是Coinbase目前548亿美元市值的十分之一。（财富）[2021/10/15 20:31:06]
另外还有建立于底层存储网络之上或独立的计算网络和协调型中间件也是去中心化存储生态的补充部分，但以生态dApp为主，本文不重点讨论。
从发展规模角度来看，Filecoin无论在收入、FDV还是市场份额角度来看都遥遥领先，并且用户存储使用度仍然在不断增加。然而，三百多万美元的季度收入无论在Web2还是Web3领域都不能算多，并且还是在几乎垄断的情况下。所以整个去中心化存储赛道仍然有着很大的发展空间。
表2去中心化存储Q32022收入与规模
来源：FundamentalLabs
从最新的技术发展进程来看，Filecoinversion17“Shark”主要建立了存储协议的可编程性，也就是在存储层上增加了智能合约的互动层，并计划于明年二月推出FEVM系统。Filecoin上的数据可用性和活跃度将有所提升，并可以支持更多元化的互操作性，这也是Filecoin相比Arweave的灵活性优势。而Arweave仍然在数据安全性、节点激励稳定性和存储入口上着力发展，对于永久性存储这一理念持续“充值信仰”。因此，虽然很难断言哪一种方案更有优势，但无论如何这两个去中心化存储协议已经在各项功能上发展的比较完善来满足去中心化存储的基本需求。
2）费用
同样，Filecoin和Arweave在费用方面也很难直观的比较，本文旨在尽可能合理的方式来对两者的费用形成一定的感知。为了形成数据可比性，本文采用同等存储大小在200年的存储时间内的价格作为比较对象。
浙江：2025年建成数字化改革标准化体系:《浙江省数字化改革标准化体系建设方案(2021-2025年)》已正式印发，该《方案》为浙江省数字化改革标准化体系建设工作明确了总体框架、分阶段目标、重点任务和相关保障举措。《方案》提出，到2021年底，浙江将初步建立支撑一体化智能化公共数据平台标准体系，在术语定义、方法标准、编码标准等方面率先形成一批广域通用标准；到2022年底，党政机关整体智治、数字政府、数字经济、数字社会、数字法治五大系统标准体系基本建成；到2025年底，全面建成系统集成、实用高效的标准体系，标准在数字化改革领域广泛实施。[2021/7/9 0:38:45]
表3云存储费用比较
来源：Amazon.com,Arweavefees.com,File.app,Filfox.info
?从表3中可以看出，AWS最基础的S3Standard套餐的价格约为$0.023perGBpermonth，则存储200年需要$55.2perGB，而相对更适合长期冷存储的GlacierDeepArchive方案可以把价格压低至$2.38perGB，但是每年的归档次数有限制。而Arweave随着ARtoken的价格波动会产生不同的价格，2022年12月的价格是$1.42perGB，也就是说存储5年左右就可以和S3standard的存储成本持平。
另一方面，Filecoin的价格计算较为复杂，因为不同的矿工给到的价格有差别且FILtoken价格、存储时间和数据调用的频率都会对价格造成影响。但无论如何Filecoin的存储成本相比Arweave和S3来说已经便宜了好几个数量级，可以几乎被认为是零成本存储。
但价格是最主要的因素吗？Arweave的永久性存储对于Web3的意义是更加重大的。例如NFT如果丢失了元数据和图片数据就会瞬间失去价值而变成一个点不开的连接，而在Filecoin的存储协议中，由于过于去中心化的管理方式会造成GarbageCollection的风险，也就是其存储文件的节点中如果对某些文档没有标星的话会有被误删的风险。
美SEC检查办公室将数字资产列为2021年优先事项:金色财经报道，数字资产已被美国SEC检查办公室列入2021年的优先事项清单，将努力确保市场参与者符合投资者的最佳利益并遵守该机构的规则。对数字资产市场参与者的考核将继续评估以下内容：投资是否符合投资者的最大利益；投资组合管理和交易惯例；客户资金和资产的安全性；定价和估值；合规计划和控制的有效性；监督代表的外部业务活动等。[2021/3/4 18:12:45]
同时，当Filecoin存储的时间到期时需要更新存储方，这个过程中也容易形成风险。反观Arweave，通过AR的激励机制鼓励节点存储数据到200年，并且针对AR未来的贬值也做出了相应的补偿激励，同时在存储过程中会通过周期性的随机检查来确保节点仍然完整的存储数据。这些措施都是为了确保每一个节点都能通过完整的存储数据来获得激励，也保障了被存储数据的安全性和可靠性。在已经黑客事件频发的Web3世界中，数据存储的可靠性带来的价值不是用简单的存储价格来衡量的。
3）生态
去中心化存储的生态包括矿工/节点和生态dApps。
表4?Filecoin与Arweave的生态数据比较
来源：Filscan.io,Messari
Filecoin由于社区建设较早且关注度较高，目前的存储力在18.9EB左右，是Arweave的17万倍。但是Arweave在3年多的发展时间内已经形成了比Filecoin高2.5倍的存储力增长率，而且Filecoin的增长率实际上已经趋近于稳定的直线。从市值的角度来说，Arweave目前的FDV是Filecoin的40%左右，我们可以判断Arweave在未来会快速追赶Filecoin的存储力生态。
根据Filecoin今年11月发布的未来计划，Filecoin未来会致力于满足computation和更大范围的dataonboarding这两个需求，从而真正成为Web3世界的Layer0。从存储力扩展的角度来说，Filecoin通过向FIL+和ESPABootcamps这样的激励计划来促进更多的矿工来参与节点建设。
分析 | 区块链市场规模2022年或达到近77亿美元:据prnewswire消息，MarketsandMarkets一份报告显示，区块链市场预计在未来五年间实现快速增长，到2022年将达76.837亿美元，复合年均增长率为79.6%。报告指出，推动增长的主要因素是区块链技术解决方案的日益普及以及区块链即服务（BaaS）需求的增长。该报告还预计，在此期间，北美市场将继续拥有最大的市场份额，因为该地区很早便已经采用加密货币和区块链技术。同时，亚太地区的复合年均增长率将达到最高，这是因为有多数行业的区块链应用正在快速增长。[2018/8/23]
而在dataonboarding和computation上，Filecoin会关注一些具体的细分市场，例如NFT元数据、Web2数据源等等，然后通过FilecoinVirtualMachine建立链上的算力，让这些数据可以更加方便地被使用。从最新的一些Filecoin提案中也可以看出dataonboarding是目前的发展重点。
反观Arweave,最新的2.6版本中主要的关注点是降本增效，也就是通过迭代硬件等方式降低整体存储成本和存储价格，同时提升数据存储、调用的效率。所以Arweave实际上是希望通过建立更好的基础环境来吸引更多的开发者和用户，同时通过生态项目来满足例如gateways,computation等进一步的用例。
所以Filecoin的逻辑是提供大一统、专注于存储业务且依赖于矿工生态的去中心化存储网络；而Arweave更像是一个标准的Web3生态，通过提供完善的底层架构和激励机制营造一个适合开发和用户友好的环境，实现用户数量和dApp数量的有机增长。
从生态项目角度来说，Arweave上已经孵化出了包括Bundlr,Kyve,ArDrive,KwilDB等一批针对技术优化、存储入口、应用扩展方向的优质项目，并且大部分项目负责人都是年轻的创业者为主，发展潜力较大。Filecoin的生态项目数量上有着基数大的优势，Filecoin生态更像是一个开源环境，可以满足更广阔的存储相关需求但并没有重点的发展方向。
新方案：聚合网络与L1拓展网络
1）聚合网络
聚合网络的概念实际上早在Filecoin上线之初就有了，例如Coldstack等早期项目。然而Coldstack并没有获得巨大成功，究其原因主要是纯粹的、Uber式的聚合器并不能真正提升存储效率，而且除此之外无法提供进一步的价值。存储协议的聚合网络的确可以解决用户存储效率和成本上的痛点，但是做法却可以有多种。
首先，这些聚合网络得比Filecoin和Arweave自身的gateway要做的好才能获得市场认可。随着Filecoin往FVM链上计算的方向发展，很可能会挤掉一批建立在Filecoin之上，提供额外computation能力的聚合网络。其次，不同的聚合协议要解决Filecoin或Arweave本身很难实现的问题，而不是做大一统的聚合流量入口，因为大一统的流量入口最终将会由Filecoin和Arweave自身把控。
Jackal就是建立在Filecoin之上且专注于提升数据隐私性和安全性的聚合器方案。它提供了一套给已存文件进一步AES-256加密的方案，并通过Cosmos建立PoS共识的L1链来管理和收费，相当于在Filecoin之上又建立了一层私有云存储协议。
同时，Jackal还将通过其Proof-of-Persistence算法来提供3倍的文件拷贝，并在存储价格上进行优化。Redundancy和cost并不是去中心化存储的核心问题，但是数据隐私和安全的提升是Filecoin本身在短时间内较难做到的。4EVERLAND是另一个聚合了Filecoin,Arweave和Dfinity作为底层存储层的云计算平台，主要专注于给dApp提供去中心化存储、计算和网络的核心能力，打造底层去中心化存储层和应用层之间的连接层。
从目前来看，Webhosting和Bucket是其主要的两个产品，hosting在4EVERLAND全球200多个网关加速的情况下可以完成前端托管，而Bucket则是一个聚合gateway。这两个产品都从用户友好性上大幅提升了去中心化存储的实际使用度，并且解决了例如多币种付费、数据面板等细节层面的优化问题。
2）L1存储扩展网络
L1存储扩展网络本质上和现有的Layer2相同，都是提升L1性能和可扩展性的解决方案的总称。而EthStorage则是第一个以存储扩展为核心的Layer2解决方案，主要包括三大类的功能：ProofofPublication,ExternalDataRetention,AccessProtocol。
ProofofPublication即通过其特制的KZGCommitment和Reed-SolomonCode来实现存储数据的CRUD功能，而Filecoin和Arweave目前只能做到CRD。在增加了Update功能以后，再结合AccessProtocol这样的可直接渲染以太坊合约上面托管的资源的Web3URL功能，就可以轻松实现例如Web3Email、Web3Blog、Web3Drive等链上活动，这些尝试都有助于未来的Web3大规模应用。
另一方面，由于其EVM兼容和链上存储的特性，相比Filecoin和Arweave来说交互路径更短，所以可组合性也更高。举例来说，EthStorage可以将NFT的元数据链上存储在EVM环境中，并可通过智能合约完成NFT组合等需要可编程性才可以实现的新玩法，改善用户体验，而链上数据的可编程性在未来也会衍生出更多的新Defi、Gamefi、Socialfi应用。目前来看，L1存储扩展网络和DSN网络是互补且竞争的，要在EVM生态中生存并且将其存储范式演化成官方标准，需要时间来验证。
未来发展的可能性
总的来说，Filecoin和Arweave发展至今已经成为了去中心化存储的代表性项目，也代表着去中心化存储的0到1过程基本完成。在发展理念上，将非链上核心数据拆分到存储层已经成为了以太坊扩容的主要手段。
与此同时，存储聚合网络和L1扩展网络作为补充和延展，可以更高效、低成本的满足用户的具体需求，而基础的DSN网络还有很多需要解决的问题：生态应用偏少、存储与计算分离、Web2onboarding较难等问题都阻碍了DSN迈向下一波增长。在未来，本文判断以下几种类型的项目有可能成为下一波增长的引擎：
1.DSN聚合器：建立在不同/相同DSN网络上的聚合入口，并提供费用最优化的选择、统一代币支付、数据可用/调用服务等提升用户友好性的工具。类似项目：Lighthouse,4EVERLAND
2.链下计算：虽然Filecoin已经在链上的去中心化计算布局，但纯粹的链上计算并不能满足更复杂的计算要求。结合链上数据和链下计算的综合性解决方案可可以通过完成更复杂的计算来提升数据的使用价值，扩展用例。类似项目：KwilDB,Tableland
3.L1存储扩展网络：L1存储和算力扩展的优势是可以直接与L1生态产生深度连接，即使满足类似social、gaming这样数据存储需求较大的项目，同时还可以在获得官方认可后快速大规模实现integration。类似项目：EthStorage
4.第三方数据安全网络：对现有的DSN中存储的数据进行安全保护，对存储节点进行审查、备份和阻挡黑客攻击，提供相关赔偿保险方案。类似项目：Jackal
参考文献：
https://cointelegraph.com/news/3-cloud-providers-accounting-for-over-two-thirds-of-ethereum-nodes-data
https://ethereum.org/en/developers/docs/storage/
https://6pjecoitbb3mbacc67rvmct3gbugplnty5ptok4rgunlo24tvq.arweave.net/89JBORMIdsCAQvfjVgp7MGhnrbPHXzcrk_TUat2uTrA
https://filecoin.io/blog/posts/the-filecoin-masterplan/
https://arweave.news/arweave-2-6-major-upgrade-more-data-less-energy/
郑重声明： 本文版权归原作者所有， 转载文章仅为传播更多信息之目的， 如作者信息标记有误， 请第一时间联系我们修改或删除， 多谢。