宇宙链 宇宙链
Ctrl+D收藏宇宙链
首页 > DOT > 正文

拆解数据可用性层 模块化未来中被忽视的乐高积木

作者:

时间:1900/1/1 0:00:00

模块化区块链中,执行层和共识层已是红海市场,数据可用性层的价值仍然有待被发掘。

原文标题:《IOSGWeeklyBrief|拆解数据可用性层:模块化未来中被忽视的乐高积木#136》?

撰文:Jiawei,IOSGVentures

tl;dr

对于轻客户端的数据可用性,采用纠删码来解决该问题几乎没有异议,不同点在于如何确保纠删码被正确编码。PolygonAvail和Danksharding中采用了KZG承诺,而Celestia中采用了欺诈证明。

对于Rollup的数据可用性,如果把DAC理解为联盟链,那么PolygonAvail和Celestia所做的就是使数据可用性层更加去中心化——相当于提供「DA-Specific」的公链,以此提升信任级别。

未来的3至5年内,区块链的架构必然由单体化向模块化演变,各层呈现低耦合状态。未来可能出现Rollup-as-a-Service、DataAvailability-as-a-Service等许多模块化组件的提供商,实现区块链体系结构的可组合性乐高。模块化区块链是支撑下一个周期的重要叙事之一。

模块化区块链中,执行层已经「四分天下」,后来者寥寥;共识层逐鹿中原,Aptos和Sui等崭露头角,公链竞争格局虽未尘埃落定,但其叙事已是新瓶装旧酒,难以寻找合理的投资机会。而数据可用性层的价值仍然有待被发掘。

模块化区块链?ModularBlockchain

在聊数据可用性之前,我们先花点时间对模块化区块链进行简要回顾。

图片来源:IOSGVentures,据PeterWatts改制

关于模块化区块链的分层暂无严格定义,一些分层方式从以太坊出发,另一些则偏向通用化的视角,主要看在何语境下进行讨论。

执行层:两件事发生在执行层。对单笔交易而言,执行交易并发生状态更改;对同批次的交易而言,计算该批次的状态根。当前以太坊执行层的一部分工作分给了Rollup,即我们熟知的StarkNet、zkSync、Arbitrum和Optimism等。

结算层:可以理解为主链上的Rollup合约验证状态根的有效性或欺诈证明的过程。

共识层:无论采用PoW、PoS或其他共识算法,总之共识层是为了在分布式系统中对某件事达成一致,即对状态转换的有效性达成共识。在模块化的语境下,结算层和共识层的含义有些相近,故也有一些研究者把结算层和共识层统一起来。

SEC主席:今天稍晚将公开讨论加密货币以及证券法相关问题:6月6日消息,美国 SEC 主席 Gary Gensler 发推称,将于美东时间 9:10(北京时间 21:10)和 10:30(北京时间 22:30)分别出席 Squawk on the Street 和 Bloomberg TV,讨论加密货币以及证券法相关问题。[2023/6/6 21:19:52]

历史状态层:由Polynya提出。因为在引入Proto-Danksharding之后,以太坊只在一定时间窗口内维护即时数据可用性,之后则进行修剪操作,把这项工作交给其他人。例如PortalNetwork或是其他存储这些数据的第三方可被归类于这一层。

数据可用性层:数据可用性存在什么问题?对应的解决方案各自是什么?这是本文要集中讨论的问题,在此先不对它进行概括。

图片来源:IOSGVentures

回到18、19年,数据可用性更多在于轻客户端节点的语境;而在之后的Rollup角度下数据可用性又有着另一层含义。本文将分别从「节点」和「Rollup」的两个不同语境来解释数据可用性。

DAinNodes

图片来源:https://medium.com/metamask/metamask-labs-presents-mustekala-the-light-client-that-seeds-data-full-nodes-vs-light-clients-3bc785307ef5

我们首先来看全节点和轻客户端的概念。

由于全节点亲自下载和验证每个区块中的每笔交易,因此不需要诚实假设来确保状态被正确执行,有着很好的安全性保证。但运行全节点需要存储、计算能力和带宽的资源要求,除了矿工以外,普通用户或者应用没有动力去运行全节点。况且,如果某个节点仅仅需要在链上验证某些信息,运行全节点显然也是非必要的。

这是轻客户端在做的事情。在IOSG的文章「多链生态:我们的当前阶段与未来格局」中我们简要介绍了轻客户端。轻客户端是区别于全节点的一种说法,它们往往不与链进行直接交互,而依赖邻近的全节点作为中介,从全节点请求所需要的信息,例如下载区块头、或是验证账户余额。

Waves Labs去年曾在长达半年的黑客攻击中遭受“财务损失”:5月17日消息, Waves创始人Sasha Ivanov(Aleksandr Ivanov)在接受采访时表示,黑客去年入侵了Waves Labs,破坏了内部数据并造成了“财务损失”。黑客“潜入”Waves的管理软件系统,并试图从这家陷入困境的区块链公司敲诈钱财。黑客告诉Ivanov:“我们已经在你的系统里潜伏半年了。所以我们什么都知道,你必须付钱给我们。”Ivanov拒绝透露黑客攻击造成的具体经济损失,也没有提供有关被盗数据的详细信息。Ivanov表示:“情况非常糟糕,我们可能会遭受更大的经济损失。”对Wave内部系统的黑客攻击也有可能泄露用户的数据。[2023/5/17 15:08:36]

作为节点的轻客户端可以很快地同步整条链,因为它只下载和验证区块头;而在跨链桥模型中,轻客户端又作为智能合约——目标链的轻客户端只需要验证源链的代币是否被锁定,而无需验证源链的所有交易。

问题出在哪?

这样存在一个隐含问题:既然轻客户端只从全节点那里下载区块头,而不是自己下载和验证每笔交易,那么恶意的全节点可以构造一个包含无效交易的区块,并把它发送给轻客户端来它们。

我们容易想到采用「欺诈证明」来解决这个问题:即只需要1个诚实的全节点监测区块的有效性,并在发现无效区块后构造一个欺诈证明、将其发送给轻客户端来提醒它们。或者,在收到区块后,轻客户端主动询问全网是否有欺诈证明,如果一段时间后没有收到,那么可以默认该区块是有效的。这样一来,轻客户端几乎可以获得与全节点等同的安全性。

然而,在以上论述中,我们实际上假设了区块生产者总是会发布所有的区块数据,这也是生成欺诈证明的基本前提。但是,恶意的区块生产者可能在发布区块的时候隐藏掉其中的一部分数据。这个时候,全节点可以下载这个区块,验证它是无效的;但轻客户端的特点使它们无法这样做。并且由于缺少数据,全节点也无法生成欺诈证明来警告轻客户端。

另一种情况是,可能由于网络原因,一部分数据在稍后才会上传,我们甚至无法判断这时的数据缺失是客观条件所致还是区块生产者有意为之——那么欺诈证明的奖惩机制也就无法生效。

这就是我们要讨论的在节点中的数据可用性问题。

?

?图片来源:https://github.com/ethereum/research/wiki/A-note-on-data-availability-and-erasure-coding??

外媒:Bitwise和Roundhill均已美SEC提交以太坊期货ETF申请:5月12日消息,在灰度本周早些时候宣布推出计划以太坊期货ETF,其他公司也纷纷效仿。除了Direxion外,Bitwise Asset Management、Roundhill Investments在周三申请了类似的产品。根据注册文件,拟议的产品将分别投资于在芝加哥商品交易所(CME)交易的以太坊期货合约,而非直接持有以太坊。此前5月10日消息,灰度已向美国SEC申请注册以太坊期货ETF和比特币综合ETF,昨日消息,Direxion已向美SEC提交以太坊ETF申请。[2023/5/12 14:59:18]

上图中给出了两种情况:其一,恶意的区块生产者发布了数据缺失的区块,这时诚实的全节点发出警告,但随后该生产者又补充发布了剩余的数据;其二,诚实的区块生产者发布了完整的区块,但这时恶意的全节点发出了假警告。在这两种情况下,网络中的其他人在T3之后看到的区块数据都是完整的,但都有人在其中作恶。

这样看来,采用欺诈证明来确保轻客户端的数据可用性是存在漏洞的。

解决方案

2018年9月,MustafaAI-Bassam和Vitalik在合著的论文中提出采用多维纠删码来检查数据可用性——轻客户端只需要随机下载一部分数据并验证,就能确保所有数据块是可用的,并在必要时重建所有数据。

采用纠删码来解决轻客户端的数据可用性问题几乎没有异议,PolygonAvail、Celestia中都采用了Reed-Solomon纠删码。

不同点在于如何确保纠删码被正确编码:PolygonAvail和Danksharding中采用了KZG承诺,而Celestia中采用了欺诈证明。两者各有优缺,KZG承诺无法抗量子,而欺诈证明依赖一定的诚实假设和同步假设。

除KZG承诺外,还有采用STARK和FRI的方案可用于证明纠删码的正确性。

DAinRollup

Rollup中的数据可用性是:在zkRollup中,需要使任何人可以自行重建Layer2的状态,以确保抗审查;在OptimisticRollup中,需要确保Layer2的所有数据都被发布,这是构建欺诈证明的前提。那么问题在哪?

?

?图片来源:https://forum.celestia.org/t/ethereum-rollup-call-data-pricing-analysis/141?

a16z公布首批Optimism代表名单,含GFX Labs和6所高校学生社团:2月15日消息,a16z宣布代表a16z参与投票的Optimism基金会第一批代表名单,名单由7名代表组成,包括GFXLabs以及南加州大学、卡耐基梅隆大学、普渡大学、北卡罗来纳州立大学、佐治亚理工学院、东北大学6所高校的区块链协会。每位代表将获得100万枚OP委托授权,预计在3月底前完成。

a16z网络运营官Ross Shuel表示,a16z根据9个关键标准对潜在代表进行评估,并与被选代表签署法律协议,不会控制委托投票,如果没有罕见的法律例外,委托授权将至少维持6个月。目前,a16z第二批Optimism代表已开放申请。[2023/2/15 12:08:17]

?

我们来看Layer2的费用结构,除了固定花费外,与每批次交易笔数相关的变量主要在于Layer2的Gas花费以及链上数据可用性的支出。前者的影响微乎其微;而后者需要为每个字节恒定支付16gas,整体占到Rollup成本的80%-95%之多。

数据可用性很贵,怎么办?

一是降低在链上存放数据的成本:这是协议层做的事情。在IOSG的文章「合并在即:详解以太坊最新技术路线」中,我们提到以太坊正在考虑引入Proto-Danksharding和Danksharding来为Rollup提供「大区块」,即更大的数据可用性空间,并采用纠删码和KZG承诺解决随之而来的节点负担问题。但从Rollup的角度去想,被动等待以太坊来为自己做适配是不现实的。

二是把数据放到链下。下图列出了当前的链下数据可用性方案,通用化方案包括Celestia和PolygonAvail;在Rollup中作为用户可选的方案包括StarkEx、zkPorter和ArbitrumNova。

?图片来源:IOSGVentures

以下我们具体来看这些方案。

DAProvidedbyRollup

在最简单的Validium方案中,由中心化的数据运营商来负责确保数据可用性,用户需要信任运营商不会作恶。这样的好处是成本低,但实际上几乎没有安全保证。

于是,StarkEx在2020年进一步提出了由数据可用性委员会维护的Validium方案。DAC的成员是知名且在法律管辖区内的个人或组织,信任假设是他们不会串通和作恶。

Arbitrum今年提出了AnyTrust,同样采用数据委员会来确保数据可用性,并基于AnyTrust构建了ArbitrumNova。

三箭资本Zhu Su:债权人以合作为由套取资产信息,并递交至美国法院:金色财经报道,三箭资本联合创始人Zhu Su在社交媒体上称,遗憾的是,我们与清算人合作的诚意遭到了诱导。希望他们在StarkWare代币认股权证方面确实行使了诚意。此外,Zhu Su在下方披露了两封其律师与三箭债权人之间的电子邮件,邮件内容显示,债权人 Russell 假意提供帮助并与 Zhu Su 商议了清算解决方案,而后未履行,并将协调过程中三箭资本方提供的资料递交至美国法院。三箭资本方律师表示,债权人未能兑现 StarkWare 股权收购要约已导致公司蒙受重大损失,其债权人、投资者和公司股东的权利将因此受到不利影响。

据金色财经观察,这是自6月15日三箭资本出现流行性危机以来Zhu Su首次在媒体上发声。[2022/7/12 2:08:36]

zkPorter则提出由Guardians来维护数据可用性,他们需要质押zkSyncToken,如果发生了数据可用性故障,那么质押的资金将被罚没。

三者都提供了称为Volition的选项:用户按需自由选择链上或链下数据可用性,根据具体的使用场景,在安全性和成本之间自行取舍。

图片来源:https://blog.polygon.technology/from-rollup-to-validium-with-polygon-avail/

GeneralDAScenarios

提出上述方案基于这样的想法:既然普通运营商的信誉度不够高,那么就引入更权威的委员会来提高信誉度。

一个小型委员会的安全程度足够高吗?以太坊社区早在两年前就提出了Validium的勒索攻击问题:如果窃取了足够的委员会成员的私钥,使得链下数据可用性不可用,那么可以威胁用户——只有他们支付足够的赎金才能从Layer2提款。据RoninBridge和HarmonyHorizonBridge被盗的前车之鉴,我们无法忽略这样的可能性。

既然链下的数据可用性委员会并非足够安全,那么如果引入区块链作为信任主体来保证链下数据可用性呢?

如果把前述的DAC理解为联盟链,那么PolygonAvail和Celestia所做的就是使数据可用性层更加去中心化——相当于提供了「DA-Specific」的公链,拥有一系列的验证节点、区块生产者和共识机制,以此提升信任级别。

除了安全性的提升之外,如果数据可用性层本身就是一条链,那么它其实可以不局限于为某个Rollup、或者某个链提供数据可用性,而是作为通用化的解决方案。

图片来源:https://blog.celestia.org/celestiums/

我们以Celestia在以太坊Rollup上的应用QuantumGravityBridge为例进行解释。以太坊主链上的L2Contract像往常一样验证有效性证明或欺诈证明,区别在于数据可用性由Celestia提供。Celestia链上没有智能合约、不对数据进行计算,只确保数据可用。

L2Operator把交易数据发布到Celestia主链,由Celestia的验证人对DAAttestation的MerkleRoot进行签名,并发送给以太坊主链上的DABridgeContract进行验证并存储。

这样实际上用DAAttestation的MerkleRoot代替证明了所有的数据可用性,以太坊主链上的DABridgeContract只需要验证并存储这个MerkleRoot,开销得到了极大的降低。

小结

图片来源:IOSGVentures,据CelestiaBlog改制

在逐一讨论上述方案后,我们从安全性/去中心化程度、Gas花费的角度来做一个横向比较。注意,该坐标图仅代表笔者的个人理解,作为模糊的大致划分而非定量比较。

左下角的PureValidium安全性/去中心化程度和Gas花费都是最低的。

中间部分是StarkEx和ArbitrumNova的DAC方案、zkPorter的Guardians验证者集方案,以及通用化的Celestia和PolygonAvail方案。笔者认为采用zkPorter采用Guardians作为验证者集,对比DAC来说安全性/去中心化程度稍高;而DA-Specific区块链的方案对比一组验证者集又要稍高。与此同时Gas花费也相应增加。当然这只是极粗略的比较。

右上角的方框内是链上数据可用性的方案,有着最高的安全性/去中心化程度和Gas花费。从方框内部来看,由于这三种方案的数据可用性都由以太坊主链提供,故它们具有等同的安全性/去中心化程度。纯Rollup方案对比单体化的以太坊来说显然Gas花费更低,而在引入Proto-Danksharding和Danksharding之后,数据可用性的成本将进一步得到降低。

注:本文讨论的「数据可用性」语境大多在以太坊之下,需要注意Celestia和PolygonAvail是通用化的方案,并不限于以太坊本身。

最后我们在表格中对上述方案做个总结。

图片来源:IOSGVentures

ClosingThoughts

在讨论完上述数据可用性问题之后,我们发现所有方案本质上是在三难困境的相互制约下做权衡取舍,而方案之间的区别在于权衡的「细粒度」不同。

从用户角度考虑,协议提供同时链上和链下数据可用性的选项是合理的。因为在不同的应用场景之下、或者不同的用户群体之间,用户对安全性和成本的敏感程度亦各不相同。

上文更多讨论了数据可用性层对以太坊和Rollup的支持。在跨链通信上,Polkadot的中继链为其他平行链提供了数据可用性的原生安全保证;而CosmosIBC依赖于轻客户端模型,故确保轻客户端能够验证源链和目标链的数据可用性至关重要。

模块化的好处在于可插拔和灵活性,能够按需为协议做适配:例如卸下以太坊的数据可用性包袱,同时确保安全和信任级别;或是在多链生态下提升轻客户端通信模型的安全级别,降低信任假设。不仅限于以太坊,数据可用性还可以在多链生态、甚至未来更多的应用场景下发挥作用。

我们认为:未来的3至5年内,区块链的架构必然会由单体化向模块化演变,各层呈现低耦合状态。未来可能出现Rollup-as-a-Service、DataAvailability-as-a-Service等许多模块化组件的提供商,实现区块链体系结构的可组合性乐高。模块化区块链是支撑下一个周期的重要叙事之一。

其中,执行层的估值巨兽已经「四分天下」,后来者寥寥;共识层逐鹿中原,在Aptos和Sui等公链开始崭露头角后,公链竞争格局虽未尘埃落定,但其叙事已是新瓶装旧酒,难以寻找合理的投资机会。

而数据可用性层的价值仍然有待被发掘。

References

https://twitter.com/ptrwtts/status/1509869606906650626

https://twitter.com/0xAlec/status/1545176941002575872

https://github.com/ethereum/research/wiki/A-note-on-data-availability-and-erasure-coding

https://vitalik.ca/general/2021/04/07/sharding.html

https://coinmarketcap.com/alexandria/article/what-is-data-availability

https://dankradfeist.de/ethereum/2019/12/20/data-availability-checks.html

https://vitalik.ca/general/2021/04/07/sharding.html

https://www.parity.io/blog/what-is-a-light-client/

https://ethereum.org/en/developers/docs/scaling/validium/

https://forum.celestia.org/t/ethereum-rollup-call-data-pricing-analysis/141

https://ethresear.ch/t/adamantium-power-users/9600

https://notes.ethereum.org/DD7GyItYQ02d0ax_X-UbWg?view

https://blog.polygon.technology/introducing-avail-by-polygon-a-robust-general-purpose-scalable-data-availability-layer-98bc9814c048/

https://blog.polygon.technology/the-data-availability-problem/

https://blog.celestia.org/ethereum-off-chain-data-availability-landscape/

https://blog.celestia.org/celestiums/

标签:EST以太坊ROLLROLGamesta以太坊币最新价格今日行情2022.10.12roll币出獠牙肩几率TROLLER

DOT热门资讯
如何判断一款GameFi游戏是否有发展空间?

任何熟悉区块链和游戏行业的人都一定听说过Play-to-Earn游戏以及这些游戏在社区中的影响力。随着市场的走向和NFT的火爆,在过去的几年里P2E游戏的用户群和收入都呈指数级增长.

1900/1/1 0:00:00
相比于多链 多层跨链桥是否能获得更大的机会?

撰写:AdamCochran对于跨链桥,我认为有两种正确的解决方案:更加复杂和去中心化——可能更接近协议的原生级别。 速度更慢且成本更高.

1900/1/1 0:00:00
以太坊分叉倒计时

引言 最近关于以太坊分叉的声音又多了不少,毕竟合并日期基本确定,全网800多T的算力归属仍是疑问,甚至比特大陆前几天还在升级自己的以太坊矿机.

1900/1/1 0:00:00
金色前哨 | 洪都拉斯推出“比特币谷”吸引全球加密投资者

洪都拉斯已经为“比特币谷”破土动工,该项目位于该国蓬勃发展的圣卢西亚镇,旨在吸引来自全球的加密投资者。洪都拉斯是一个促进市政当局使用加密货币作为支付方式的中美洲国家。据路透社报道,许多圣卢西亚镇的公司现在都接受比特币作为支付方式.

1900/1/1 0:00:00
DataFinnovation:解密 DCG、三箭资本与 GBTC 的复杂关联交易

作者:DataFinnovation看起来DCG和3AC参与了某种计划,从GBTC的溢价中提取价值。这为3AC提供了大量的杠杆,他们将其兑现并用于资助各种事情,它还通过收费为DCG创造了大量的短期利润.

1900/1/1 0:00:00
金色观察|以太坊硬分叉愈演愈烈:为了分叉而分叉or保全矿工利益?

众所周知,以太坊将会在9月中旬正式迎来TheMerge,而PoS的诸多影响及其优势大家早已耳濡目染。但也正是在共识机制转换上,PoW的一众矿工也将迎来自己的硬着陆。由此,为了保证其利益,对以太坊分叉的支持观点也甚嚣尘上.

1900/1/1 0:00:00