WEAVE:IOSG Ventures:从存储到计算,去中心化存储复兴_Arweave

撰文:Leo,IOSGVentures

概要:

Arweave协议设计从技术上保证永久存储的实现,更适用于高价值数字资产,如NFTmetadata的保存

数据存储之上,更需要计算。随着智能合约和可编程性的引入,去中心化数据存储网络的发展已经进入「不仅仅是存储」的新阶段

实现存储数据冗余,Filecoin诉诸经济激励手段,Arweave则借助协议设计

FVM为Filecoin带来存储金融,将存储空间和时间商品化,用户可以提前锁定成本,存储供应商也能提前回笼资金,并根据远期需求规划管理库存、硬件、运营

计算机网络发展的主流,无外乎数据计算,传输,存储三个方向。Web3发展时至今日,去中心化数据存储协议的发展有目共睹。Filecoin于2023年3月14日2,683,348Epoch高度正式在主网发布了兼容EVM的FilecoinVirtualMachine(FVM),将智能合约和可编程性带入Filecoin网络,去中心化数据存储协议的发展已经进入了「不仅仅是存储」新阶段。

去中心化数据存储协议有很多,最引人注目的唯属Filecoin和Arweave,针对FVM发布赋予Filecoin的新特性,我们在本文中逐一进行讨论。

永久存储?PerpetualStorage

永久存储在Web3中有特别的意义和需求,高价值的数字资产如NFTMetadata须要被永久保存。

Filecoin在FVM发布后,强调了永久存储的特性。我们理解的Filecoin永久存储是通过经济手段在理论上实现长期保存,但在Filecoin协议设计层面没有太多改动。在Filecoin当前设计中,存储订单是在存储供应商和存储需求者之间链下撮合链上记录的,订单包含的信息有数据大小、存储时间、订单价格和抵押物。若想所存数据在订单所定义的存储时间到期后被继续保存,存储需求者不得不人为手动地提交更新订单。但FVM发布后,订单可以在链上得到自动续费更新。Lighthouse是致力于实现Filecoin上永久文件存储的项目,用户只需付费一次,文件即可「永久」保存。Lighthouse通过基于智能合约的捐赠池来为文件持续支付存储费用。当用户创建订单并付费时,金额的一部分交给存储供应商,剩下的部分则进入捐赠池。捐赠池智能合约将在订单到期时自动续约并用捐赠池中的金额付费,以此实现「永久存储」。这个设计的可行性在于捐赠池会通过质押、farming等方式实现池内资产增值,随着时间流逝,增值的部分足以覆盖存储的开销。这与Arweave黄皮书中对于存储成本的假设类似,即存储费率会不断下降,存储需求者支付金额的增值足以涵盖永久存储的开销。

香港特区政府行政长官李家超:将建设国际先进科技创新规则试验区:金色财经报道,香港特区政府行政长官李家超今日在星岛新闻集团《中国宏观经济暨大湾区融合》论坛2023的致辞,他指出中央上星期公布《河套深港科技创新合作区深圳园区发展规划》规划提出三大发展定位,分别是:一、构建深港科技创新开放合作先导区,打造国际科技创新高地;二、建设国际先进科技创新规则试验区,营造高度开放的国际化科研制度环境;三、形成粤港澳大湾区中试转化集聚区,为大湾区建设持续产生高质量的科技创新供给。特区政府感谢中央和深圳市政府对深港科技创新合作区发展的大力支持,香港将继续助力大湾区国际科技创新中心的建设,为大湾区构建国际创新人才港。[2023/9/4 13:16:36]

「过去50年,存储费率以年均下降30.57%」。

ArweaveYellowPaper:自1980年来,每保存1GB数据1小时的成本

Arweave则是在常见的区块链数据结构上引入了命名为Blockweave的设计,通过协议设计从根本上来实现数据被永久存储。Blockware中,链上的每一个区块会和另外三个区块相连,分别为前序区块、后序区块和召回区块。对某一高度的区块而言,召回区块可以是Blockweave中该高度区块以前的任意历史区块。在矿工挖新块时,召回区块的选择是由前序区块高度和哈希随机决定的。召回区块在Arweave所采用的共识机制——随机访问简洁证明中扮演了重要的角色。在Arweave中,矿工不必保存所有历史区块,但矿工本地保存有被随机选中的召回区块是矿工参与候选新块挖矿的入场券。召回区块功能上类似于随机抽查矿工是否保存有历史某一区块的内容,从而实现历史数据的永久存储。

中国香港特区前财政司司长曾俊华加入数字财富公司StashAway担任顾问:4月11日消息,中国香港特区前财政司司长曾俊华(John Tsang)加入数字财富公司 StashAway 担任顾问。StashAway 是一家成立于 2016 年的新加坡公司,管理资产超 10 亿美元,并曾获红杉资本投资。该公司去年开始在香港开展业务,并正在与当地监管机构就向专业和散户投资者提供加密相关产品进行谈判。

此外,曾俊华还将向在 StashAway 首次投资存款超过 5 万港元的客户赠送其铸造的Choi Yeah(取财神爷谐音)NFT。(彭博社)[2022/4/11 14:17:11]

Arweave的永久存储是根据协议设计从技术上来保证的,相较于Filecoin的永久存储是更robust的方案,也是Web2科技巨头Meta,Instagram和Web3应用Mirror选择Arweave作为其NFT、内容的存储方案的主要原因。

去中心化计算DecentralizedComputation

数据保存了,更重要的是使用。Filecoin和Arweave的愿景远不仅是「去中心化网盘」,更要做兼具低成本存储和高吞吐计算的区块链协议。数据存储之上,Web3Dapps还需要计算。

Filecoin和IPFS在遍布世界各地的存储供应商之间分发内容寻址的数据集,以增加数据的冗余性和弹性。这种去中心的数据分布,带来了成本、可用性和可靠性的优势,但随之而来的问题是单个数据集的各部分被存储在地理位置相距较远的各个存储供应商处。广泛而分散保存的数据集不利于在数据之上执行计算或查询索引的操作。但是将高度分散的数据重新组合到一个中心以对其进行计算是昂贵、浪费、性能低下且违背去中心化存储原则的。Filecoin上EVM兼容的FVM提出了边缘计算结合链上协调执行计算的方案。FVM中的合约可以代理经纪计算资源、激励计算执行、在可用存储供应商之间分配工作负载,并证明计算结果的有效性以获得奖励。存储供应商可以通过FVM合约注册参与去中心化计算网络。计算客户端会将计算任务发布到合约。合约定义的机制会将计算任务分配给注册参与计算网络的存储供应商,当完成计算,存储供应商将发布证明来获得报酬。

香港特区政府:在有需要时限制或禁止持牌虚拟资产服务提供者及其有联系实体的运作:5月21日消息,香港特区政府有关修订《打击及恐怖分子资金筹集条例》(第615章)(《打击条例》)的立法建议公众咨询工作已完成,政府今日发表文件,文件显示,建议参考《证券及期货条例》中类似的赋权条文,赋予证监会干预权力,在有需要时限制或禁止持牌虚拟资产服务提供者及其有联系实体的运作。 无牌进行受规管的虚拟资产活动,可处罚款500万元和监禁七年;以及如属持续的罪行,则可就该罪行持续期间的每一日,另处罚款10万元。[2021/5/21 22:29:32]

Arweave上的去中心化计算通过SmartWeave智能合约协议实现,具备直接处理丰富数据的能力。SmartWeave和其他区块链智能合约协议的主要区别是「LazyEvaluation(惰性计算)」,将智能合约执行计算的负担从网络节点转移到智能合约用户。惰性计算的好处是显而易见的,通过将存储和计算解耦,节点不需要保存不断增长的全局状态。智能合约可以在被使用时才由用户计算、验证最新状态,而不需要参与链上共识的每个节点都进行计算、验证。将计算下放给用户,区块链的可扩展性也得到了提升。Warp开发了一套基于SmartWeave初始版本的WarpSDK,相较于原生版本提升了性能和模块化程度,并允许不同的执行环境。

Warp近期发布了2023年路线图,开发目标包括:

1)Layer1同步器:实现Warp合约与基础Arweave层的高效同步;

2)Layer2排序器,与其将数据直接发到Arweave主网,数据交易被导向Warp排序器,再通过Bundlr网络,交易可以立即结算,为用户提供数据的即时访问和近乎即时的最终确定性;

BitGo执行董事:企业每周都要求将比特币纳入其资产负债表中:金色财经报道,BitGo欧洲、中东和非洲地区的总经理Darren Jordan表示,企业经常询问如何将比特币添加到他们的资产负债表中。在同一小组中,Genesis Trading首席执行官Michael Moro同意Jordan的观点,尽管该公司早在2015年就与对冲基金合作,而且家族办公室和类似企业也在此后进入市场,但这是去年最大的变化之一。Moro表示,我们已经看到企业将加密货币放在他们的资产负债表上的巨大增长,这不仅仅是美国的科技公司,我认为我们看到南美和东南亚的公司再次参与其中,作为他们的财务投资组合的一种。(theblockcrypto)[2021/10/7 20:11:27]

3)合约增强改进,Warpcontract旨在为Web3Dapps提供功能齐全的技术堆栈,以与Web2服务竞争;

4)开发委托解析环境和聚合节点,委托解析环境允许对高交互和/或不安全合约进行计算委托,聚合节点则提供合约状态信息的监测和洞察。

存储冗余?StorageRedundancy

去中心化数据存储网络避免了单点故障,但如何保证各节点/各存储供应商真实有效地保存了存储需求者的上传数据?并让多个节点/存储供应商分别保存上传数据以实现存储冗余和可靠性?Filecoin和Arweave采取了不同的方案,Filecoin诉诸经济激励手段,Arweave则借助协议设计。

FVM发布亮点中介绍了ReplicationWorker,RepairWorker。在FVM发布前,如果存储需求者希望在网络节点中备份他们的数据,以最大限度地提高数据在存储供应商出现故障时被保存下来的机率,需求者必须繁琐地与供应商链下撮合N次订单,执行N次链上交易,并密集耗费资源传输N次数据。在FVM发布后,数据复制工作者将作为中介,仅收取少量费用来实现数据冗余,为存储需求者节约时间和开销。复制工作者会根据需求者所选择的备份数量、存储地理区域、延迟要求、价格范围等条件,自动在Filecoin网络上撮合并生成存储订单。数据维修工作者则可以作为需求者的代理,监控存储数据是否丢失或过期,并根据需求者的设置将低于冗余阈值的数据自动复制备份到更多存储供应商,还可以代表存储需求者更新已过期或终止的存储订单。

RippleNet总经理:RippleNet持续增长,每周约有2个新客户:据今日早间报道,Ripple发布公告称,Ripple和速汇金(MoneyGram)共同决定终止当前的合作伙伴关系协议。

对此,RippleNet总经理Asheesh Birla称公司将继续保持强劲增长,每周平均有两个新客户加入RippleNet。他预测,一旦监管明确将在全球部署。“ODL为传统金融服务所遗留的消费者解决一个真正的问题,为其提供低成本、快速、透明和安全的选择。随着政府理解这项技术对金融包容性和即时结算的价值,监管透明度将会到来。RippleNet持续增长(每周约有2个新客户),强大的资产负债表使我们能够扩大ODL,并试验像LOC这样的新解决方案。随着全球对加密服务的呼声,我们对RN的产品市场契合度、货币化和全球使用量完全有信心。”

XRP社区成员Leonidas Hadjiloizou质疑称,Ripple改变网站客户展示方式,将300多个改为数百个。自2019年Swell更新以来,此数字尚未更新。对于Ripple是否失去除了速汇金以外的其他客户的传言,Birla尚未作出回应。(Crypto News Flash)[2021/3/9 18:28:50]

Arweave的存储冗余是通过协议设计自然实现的。Arweave将召回区块作为随机访问简洁证明工作量算法输入的一部分,保证挖得新块的矿工确实保存有召回区块的所有数据。SPoRA共识机制鼓励矿工在其存储空间能力范围内尽可能多地保存历史区块和Blockweave数据。但若矿工的存储能力不足以保存所有历史区块和完整Blockweave数据,矿工会优先保存被其他矿工较少保存过的区块,因为当一个被较多矿工保存了的召回区块被选中时,较多矿工会同时参与挖新块的竞争;而当一个被较少矿工保存了的召回区块被选中时,竞争会相对较小。又因为召回区块的选择是高度随机的,任一召回区块被选中的几率是离散均匀分布的,因此在存储能力受限的情况下,理性矿工应该优先保存被较少保存过的区块以提高其挖得新块的几率来获得区块奖励。Arweave的协议通过精巧设计和经济激励,让blockweave和所有历史区块能够在整个网络所有矿工存储能力范围的约束下,尽可能地将任一历史区块被最大化地备份,保证了Arweave去中心存储网络的可靠性和数据冗余。

数据检索?DataRetrieval

数据保存了,如何高效、准确、快速地取回数据是另一个问题。

Filecoin中数据检索服务是一套单独的经济激励系统。RetrievalProvider负责为存储需求者提供对其数据的快速访问。检索供应商专注于快速访问数据,而不是长期存储。大多数存储供应商同时也是检索供应商。需求者向检索供应商付费以获取数据。Filecoin生态中已有retrieval.market和SaturnNetwork等项目实现数据的快速检索和内容分发。

Arweave的SPoRA共识机制除了上述永久存储和存储冗余的优点,也一石三鸟地提高了数据检索和访问速度。在升级SPoRA之前,Arweave的可访问证明旧共识机制解决了如何激励矿工尽可能多地存储数据的问题,但并没有激励矿工快速检索存储数据。事实上,在PoA时期,矿工们将存储资源归集起来做了存储池,存储池里保存历史区块。当某一召回区块被选中,存储池在被矿工请求时向矿工发送该召回区块的内容。这是不利于网络去中心化的。Arweave网络统计曾出现了全网哈希算力增长的同时节点数量却下降的情况,间接证明了存储池的存在。为解决这个问题,也为鼓励各个矿工在本地存储数据,Arweave将PoA升级成了SPoRA。升级SPoRA后,选择不在本地存储历史区块数据的矿工向存储池请求并传输召回区块,传输数据的成本和时间极大增加,而在本地存储了历史区块数据的矿工能有较高的几率挖得新区快。从机制设计上杜绝了存储池的存在。而分布世界各地的矿工节点在本地存储历史区块数据,也提高了存储需求者对数据的检索和访问速度。

存储金融?Financialization

随着FVM的发布,Filecoin上可以引入包括DeFi在内的众多Web3应用,例如质押协议、保险协议、存储衍生品等。Filecoin中的存储供应商需要抵押一定数量的FIL作担保才能提供存储服务,在过去存储供应商要么筹钱购买FIL,要么依赖链下的借贷合同借得FIL。但借助建立在FVM上的质押协议,FIL代币持有者可以将闲置FIL存入协议中,并制定规则和条款,任意规模的存储供应商可以根据这些规则和条款在链上获得FIL来筹集足够抵押数量的FIL,以开展存储服务。存储衍生品是另一个很有趣的应用场景,动态的存储开销给存储需求者和存储供应商都带来了统筹预算的挑战。将存储空间和时间商品化,存储需求者可以提前锁定存储成本,存储供应商也能提前回笼资金,并根据远期需求提前规划管理库存、硬件、运营和财务。

项目定位和现状

Filecoin当前全网共有3678个节点提供约19.544EiB的存储空间,而Arweave全网共有112个节点实际保存了125.62TiB的数据。从规模上看Filecoin网络更大,但Filecoin和Arweave虽同为去中心化数据存储协议,但他们有着不同的定位,不能简单地诉诸网路节点多少或规模大小来比较。

ProtocolLabs将Filecoin定位为StorageMarketplace和Incentivelayer,围绕Filecoin做了完善的存储市场、检索市场、金融产品等,通过经济激励设计来实现丰富的产品功能,致力于成为最大最重要的去中心化的数据存储、分发、计算协议。Arweave最重要的定位则是永久保存数据,并基于最底层的Arweave开发智能合约协议实现对数据的计算。所有的机制设计均为这个最重要的目标服务,从前面几个特性的介绍中,不难体会到Arweave的设计是精巧而统一的。

展望

相较于以太坊生态和以太坊虚拟机的突飞猛进,去中心化数据存储网络的发展在过去几年略显平淡。在Filecoin和Arweave生态中有很多优秀的项目和创业者,但是现在Web3Dapps的存储方案并没有大规模采用Filecoin和/或Arweave,很多Dapps依然依赖Web2存储方案。在解决存储的区块链上做计算是一个新颖的路径,不论是FVM还是SmartWeave,都具备让开发者解锁前所未有的去中心化应用的潜力。作为开发者或用户,使用哪个去中心化存储协议并不是二选一的问题,而是应该根据应用和内容的存储需求来选择。Filecoin和Arweave的定位虽有重叠的地方,但更能在各自独到之处精进发展,满足持续演进的去中心化网络存储需求,实现从「去中心化网盘」到去中心化服务器的愿景。

郑重声明: 本文版权归原作者所有, 转载文章仅为传播更多信息之目的, 如作者信息标记有误, 请第一时间联系我们修改或删除, 多谢。

大币网

[0:0ms0-9:949ms