宇宙链 宇宙链
Ctrl+D收藏宇宙链
首页 > FIL > 正文

IPFS分布式存储研究报告

作者:

时间:1900/1/1 0:00:00

分布式存储是2020年区块链行业最热门的主题之一,该领域除了最热门项目

IPFS/Filecoin主网10月上线带来整个分布式存储行业热度和流量快速上升,另外赛道也涌现出很多新的分布式存储项目,包括波卡生态分布式存储项目CrustNetwork、永久存储区块链项目Arweave紧随IPFS步伐也推出各自的主网,这些存储新星和老牌分布式存储项目Storj、Sia一起,共同为区块链分布式存储生态贡献力量,扩大分布式存储的生态版图。

作为一种分布式的信息基础设施,区块链分布式存储系统通过将文件或文件集存储在不

同的存储空间比如硬盘上,在链上同时生成文件存储确权证明,通过激励机制来激励存储空

间的提供方,区块链分布式存储在数据隐私、透明度、确权方面相比传统云存储都具有优势,

加上数据存储市场本身天花板高,赛道从长期看具有足够的想象力,分布式存储也是区块链

圈内外都普遍关注的方向,成功捕获了大量圈外流量,基于区块链的分布式存储项目赢得了

密切关注,传统行业和资本已经通过直接投资或者间接的方式加入到分布式存储阵营的角逐

中。

??海量非结构化数据存储的技术挑战

随着社交网络、移动互联网和物联网的兴起,互联网信息爆炸式增长产生了海量数据,

数据量级也从最初的GB、TB逐渐发展到PB、EB甚至更高。数据类

型从简单的文本扩展到了复杂高维度数据,比如半结构化数据、图片数据、视频数据、传感

器数据和流数据等。

根据研究机构IDC预测,2018年到2025年之间,全球产生的数据量将会从33ZB增

长到175ZB,复合增长率达到27%,其中超过80%的数据都会是处理难度较大的非结构

Gnosis Chain发布去中心化支付网络Gnosis Pay和自托管借记卡Gnosis Card:7月17日消息,Gnosis Chain在巴黎EthCC(Ethereum Community Conference)大会上发布去中心化支付网络Gnosis Pay和自托管借记卡Gnosis Card。Gnosis Pay基于Gnosis Chain,使Web3开发人员能够集成各种传统支付方式,包括Visa,用户可以在任何接受Visa的地方直接从钱包中使用加密资产消费;Gnosis Card是经过Visa认证的自托管消费者借记卡,需要进行KYC认证,建立在GnosisPay去中心化支付网络上,直接链接到链上钱包,支持线下线上的各种刷卡消费,每笔交易通过智能合约。此外Gnosis Pay支持用户将ENS与卡片绑定,用户可以将其与任何钱包一起使用,每个社区或每个钱包都能发行自己品牌的对应Visa卡。[2023/7/17 11:00:08]

化数据。预计到2030年全球数据总量将进一步达到3,5000EB。

海量非结构化数据带来的存储挑战主要在于如果采用传统集中式存储的Scale-Up的扩

展方式,这种纵向扩展架构处理海量数据环境中会存在扩展成本高、耗时长、难度大的问题,

性能与容量无法灵活扩展,造成扩容成本较高。

而采用Scale-Out架构,通过分布式接入技术将独立的低成本存储节点组成一个大而强

的存储系统。通过添加存储节点来进行处理和存储能力的扩展。目前的云存储系统也是通过

分布式接入扩展储存容量已经可以达到PB级,每增加一个存储节点,性能和容量同时增长,大大降低了存储系统采购、部署和升级的成本。

于区块链的分布式存储的优势

传统云存储基于「分布式文件系统」存储文档、图像、视频等非结构化数据。典型的分

加密支付应用Strike将集成USDT:5月22日消息,基于比特币闪电网络建立的加密支付应用Strike宣布将 Tether (USDT) 整合到其平台上。[2023/5/22 15:19:21]

布式文件存储系统像Google的GoogleFileSystem。GFS是Google分布式存储的基

石,是构建在廉价服务器之上的大型分布式系统。GFS的基本架构如下图

GFS系统包含三类节点角色:GFSMaster、GFSChunkServer(CS,数据

块服务器)以及GFS客户。主控服务器中维护系统元数据,包括文件及chunk命名空间、

文件到chunk之间的映射、chunk位置信息。主控服务器是性能最好的节点之一,很少有性

能瓶颈,还存在备份服务器节点作为主服务器的镜像。

虽然这种存储系统将数据分散存储在多个存储节点实现较好扩展性,但因为元数据被保

存在中心节点。在存储和读取数据时,都需要访问中心节点来获取元数据信息,也存在一些

弊端,比较明显的问题包括:

??元数据安全问题

如果中心节点发生故障或宕机,那么元数据无法被读取。虽然,通过引入备份节点可以

一定程度上避免该问题,但节点之间切换效率较低;云数据中心因为各种问题经常出现运行

故障或数据丢失泄露等情况。

信任问题

存储元数据的节点可信性很难保证,元数据存在被篡改的可能性,中心节点由各大云存

储机构独立管理和运营,数据的可靠性和安全性完全依赖该机构的实力和信誉。如何保证用

户数据不被窃取使用,存储运营商难以保证。

区块链是一个分布式账本数据存储技术,使用P2P网络、加密算法、数据存储等要素共

Web3用户社区参与平台Passion Labs获Animoca Brands Japan投资:2月24日消息,Web3用户社区参与平台Passion Labs获Animoca Brands Japan投资。此后,二者将合作帮助日本公司利用Passion Labs的技术进行KOC(关键意见消费者)分析,制定相应Web3战略并创建Web3社区。

据悉,Passion Labs成立于2022年,其通过“NFTs即Cookies”的参与量证明(PoE)平台Passion重新定义品牌和用户之间的数据共享基础架构,提供客户体验和社区参与工具,让用户拥有数据所有权,并帮助品牌建立社区。PassionLabs已为超3万个亚太品牌提供数据分析以加强其社区凝聚力。[2023/2/24 12:26:42]

同组成整个分布式账本,通过激励系统促使网络成员积极广播区块并进行数据维护,每一个

参与区块链运行的节点都可以复制一份完整的数据拷贝。除非有人能够同时控制住整个区块

链中的51%以上的节点,否则单个节点的数据篡改系统不会承认,这就确保了数据的不可篡

改。区块链用冗余存储保障了分布式存储系统的一致性与安全性。

从存储角度,区块链存储构建成一个规模巨大的全球统一、全球共享的存储池,将数据

分散在多处,来增强数据的可靠性、可用性、异地容灾性等特性。不同于分布式云存储有专

门的备份节点负责数据冗余,区块链所有的参与节点参与冗余存储。让存储成为区块链技术

的最佳落地应用场景。对于非代码和线下的事物,应用区块链的难度会很大。企业级数据中

心面临可靠性不足时,有人探讨将数据分布在多个数据中心,即把数据存储到全球上千万个

节点上来提高数据的安全可靠性,拜托单个数据中心被黑客攻击而出现的数据泄露问题。

说唱歌手Tyga遭NFT平台Kreation起诉,被指未履行协议:9月11日消息,说唱歌手Tyga因一份50万美元的协议被NFT平台Kreation起诉。根据法律文件,双方协议推出三套NFT。这笔交易包括说唱歌手同意帮助“促进NFT的设计、创建、生产、营销、销售和分销,以换取使用和纳入TYGA的名称、图像、肖像、音乐和艺术品”。该协议金额50万美元,为了顺利签约已经给Tyga支付了10万美元。

该公司指责Tyga没有履行他的承诺,首先,他没有在Instagram或Twitter上发布有关该项目的消息,然后取消了在Twitter Space和Reddit的论坛上的AMA媒体采访和社交媒体露面。该公司声称,在NFT发行的当天,Tyga再次未能在他的社交媒体账户上推广,也未能“实质性地参与该项目的推广和营销”。该平台还收到了Tyga律师的一封信,要求删除NFTs,他们基于存在的法律问题遵从了这一要求。

Tyga未进行回应,目前案件仍在进行中。[2022/9/11 13:23:04]

目前已经发展出四类存储:桌面级存储、企业级存储、云存储(数

据中心)和区块链存储。与企业级存储、云存储相比,基于区块链分布式存储的优势主要体

现在以下方面:

可靠性更高,区块链存储将数据存储到成千上万个节点上,不是传统分布式存储的多副本模式,而是冗余编码,可以有效避免单点故障问题,比特币运行10年以来其分布式

账本数据库未被任何黑客攻破就是最好的可靠性证明。

??可用性更高,云存储即使采用多节点分布式存储方式,仍然可能出现因为节点宕机

或者中心节点负载过高故障问题而出现无法提供服务的情况,区块链只需要保证一定比例的

节点数量正常,系统服务就是可用的。

??边缘存储成本更低,区块链将存储成本分摊到边缘节点,相对搭建独立的数据存储

上海气象博物馆将发行中国首张台风眼手绘图数字藏品:5月15日消息,上海气象博物馆将于 5 月 16 日联合文博数藏平台公益发行中国首张台风眼手绘图数字藏品,限量 3000 份。据了解,中国首张台风眼手绘图是上海气象博物馆的镇馆之宝,这次发布的数字藏品基于区块链技术进行唯一标识,拥有独一无二的链上序列号,不仅具有收藏价值,也让探索科学、普及科学变得更加有趣、多元。(新民晚报)[2022/5/15 3:17:20]

中心对硬件的需求和成本都更低。

??加密隐私性更高,中心化存储最终数据加密流程在企业内部完成。区块链存储数据

都经过加密,没有明文数据,加密过程由数据拥有者用户自己完成,只要用户保存好加密密

钥,就无法被第三方窃取到数据隐私。

分布式存储和区块链天然具有一定匹配性,两者都基于分布式系统。分布式存储作为链

下存储方案可以扩展区块链存储空间效率低的问题,比如可以将核心的交易元数据和实际数

据进行分离存储而非全链上存储,缓解链上账本空间膨胀的问题,元数据加密后存储链上,

实际数据本身通过分布式存储避免单一节点故障造成数据丢失问题,分布式存储可以优化区

块链的存储效率,释放链上存储空间存储更关键信息,同时又不影响区块链处理大数据时的

可用性。

IPFS?分布式存储和挖矿激励

星际文件系统由协议实验室创始

人JuanBenet提出,通过不同的设备连接建立一个「分布式文件系统」,使用「内容寻址」

18

方法将大文件分拆为数据块对象来提高存储效率,每个文件块通过对应块内容的哈希值索

引,建立全局的分布式散列表,通过MerkleDAG树数据结构

组织这些分散的文件块的哈希索引,将存储在树根节点位置的索引作为文件寻址哈希值。

IPFS结合了DHT、MerkleDAG、版本控制Git、自验证系统SFS,在点对点网络进行去

中心化的数据存储和交换,可以由用户自主设置数据访问和读写权限而不依赖信任主体,不

存在单点故障问题,上传到IPFS上的数据不可更改,数据变更将生成新的IPFS对象,并链接到之前的对象版本这种基于Git的版本管理可以很方便追踪数据更新情况。另外IPFS产品拥有类似TCP/IP一样的协议簇,可以同样按分层模型对IPFS产品分层,包括八层,产品每层功能都使用不同的协议。

????????????????????????????IPFS文件系统的主要技术

??????????????????????????????IPFS系统协议栈

总结来说,IPFS提供了在没有中心化服务器的前提下搭建一个全新的web网页的可能

性,只要节点贡献存储和计算资源来成为IPFS节点,就能实现这点,其本质是一个P2P的

内容分发网络,不同于HTTP的中心化分发模式,没有中心化问题,所以它一直被对标HTTP

致力为成为下一代互联网协议,但是IPFS要实现这个目标挑战非常大,在分布式环境下数

据存储可用性很大程度来自数据冗余备份,取决于节点积极存储备份,如果节点删除数据,

数据甚至可能出现丢失情况。

为了解决IPFS节点数量有限而影响网络性能的问题,协议实验室2017年发起Filecoin

项目,作为IPFS的激励层,模仿的是比特币的区块链激励模型,不同的是Filecoin挖矿放弃耗能的PoW(Proofs-of-Work),而是创建新的存储证明挖矿算法,即基于有效存储证明的复制证明和时空证明,基于存储挖矿的方式来激励存储节点在IPFS网络上贡献资源,矿工提供的有效存储空间并存储有效数据容量越大,最后获得挖矿奖励概率也越大,Filecoin的挖矿模式相比起来更环保、

效率也更高。Filecoin主网已经于2020年10月正式上线,从Filecoin官方区块链浏览器之一Filfox获取到的数据,目前全网存储算力已经达到1.85EB,算力前十的节点存储能力都是PB级别,算力占比分布来看,网络去中心化程度不低,活跃矿工节点数1059,矿工数量还不够多,尤其从区域分布看主要集中在亚洲国家,很多区域显示海外的可能也是VPN的影响;Filecoin主网目前区块高度达到404049,平均出块时间30s,另外Filecoin挖矿和其他PoW区块链项目提现出明显差异化的特征是它的质押挖矿,节点需要为有效算力提供FIL质押才能获得「挖矿权」,目前每个扇区大小32G需要质押0.27FIL,每新增1T算力,质押成本增加12.46FIL,从目前挖矿产出看,相当于43.4%的流通量是锁定状态,由于Filecoin总供应20亿,其流通率目前仅3.4%,随着更多的FIL进行流通,项目生态市值变化可能比较快。另外Filecoin目前网络运行的过程中也遭遇了网络Gas费率的问题,比如持续一段很长的时间费率达到4-6nanoFIL,Filecoin引进以太坊EIP1559案将Gas分为基础和附加两部分,基础部分会直接销毁,加速FIL的通缩,附加部分才会奖励打包矿工,而从目前的情况当Gas费率较高时,由于基础部分占比较高Filecoin矿工挖矿收益扣除支付的Gas可能会导致收益下降甚至为负的情况,而Gas费高企的背后是Filecoin在Gas费率设置了类似比特币挖矿那样的难度调整,Filecoin矿工挖矿过程即封装数据并将消息上链都会涉及Gas费用支付的问题。随着加入Filecoin网络的矿工数量上升,不光挖矿收益已经从0.25FIL/TiB下降到目前的0.13FIL/TiB,由于目前处理的交易消息大概每秒14笔,可能低于实际需求量,也是导致矿工Gas费率的上升的原因。Gas费持续高位将不利于矿工提高算力参与网络,协议实验室最近也是在FIP-9方案中加入提交时空证明阶段免除矿工基础费用的新政策来降低矿工Gas压力。

???????????????????????????Filecoin网络情况

????????????????????????Filecoin矿池算力排行榜

Filecoin网络出现Gas费较高情况

总体来看,目前Filecoin区块链目前还处在矿工如何通过提高有效算力来挖矿的阶段,

并没有在「为用户提供低成本高效存储服务」上有很多的动作,矿工和官方之间几乎不可避

免经常陷入博弈的状态。如果从Filecoin网络效用而言,协议实验室从一开始就非常排斥矿工牺牲网络来为自身牟利的各种行为,所以设置各种处罚机制,硬是把节点挖矿变成了一项复杂困难的生意,矿工如果不留意违规可能面临出局的风险,因为Filecoin挖矿并不像比特币那样自由。Filecoin矿工未来的收益当然可以不仅仅来自存储挖矿奖励,比如还有Gas手续费收入、检索收入,但目前阶段在FIL币价稳定在可观的水平上,努力封装数据提高算力才是王道,可随着更多的玩家进入,算力收益一定会下降,算进其他成本项,FIL挖矿没有那么多「暴富神话」,如果要继续留守在赛道,就需要真正考虑能提供真正的商业价值,FIL挖矿不能当纯金融来玩,目前官方在算力增长方面明显开始倾向用户存储订单的数据,网络公开验证人作为「数据质量检察官」,这样的数据在矿工算力贡献方面就是十倍的增长。另外从未来几年的发展目标,Filecoin目前的挖矿算法在性能方面不能匹配大量数据存储和检索的需求,需要调整来满足未来检索市场的发展,所以下阶段可能在会封装数据环节进行新的算法迭代来提高矿工提交证明消息的速度。Filecoin生态的构建对于项目成功也是非常关键,以太坊和波卡的成功基础都在于生态,目前Filecoin作为一条存储公链,而不是计算公链,后面也要上线自己的智能合约,如何结合自身定位来发展生态也是接下来项目进展的重要方向。

??小结

面对未来海量高并发的数据存储和计算需求,分布式存储是当下重要的发展趋势之一,

传统的分布式文件存储方式仍然存在单点信任问题,基于区块链的分布式存储在可靠性、可

用性、成本和数据隐私方面具有优势,这方面像IPFS/Filecoin通过将比特币的工作量证明激励模型模式迁移到提供数据存储服务的场景,设计了新的挖矿机制来保障区块链存储网络的安全,另外像CrustNetwork、Arweave、Storj、Sia这些分布式存储赛道的项目也都从不同的角度来发展分布式存储,体现一定的差异化,回到商业本质,未来分布式存储项目的竞争力一定体现在用户数量和存储生态建设上。

来源:金色财经

标签:FIL区块链FILEOINfil币了多少人区块链币在中国合法吗dogecoin

FIL热门资讯
XF挖矿流程-heco必备行情软件

XF软件功能 1、看行情,在heco玩新币,看行情很麻烦,xf解决了这个问题,可以随时观看新币的价格,自己关注的币种可以添加到自选,捕捉到机会随时可以出击.

1900/1/1 0:00:00
玩币队长:3-11 以太坊多空布局 斩获143个点位 做奇迹的创造者

心动不如行动,虽然行动不一定会成功,但不行动则一定不会成功。生活不会因为你想做什么而给你报酬,也不会因为你知道什么而给你报酬,而是因为你做了些什么才给你报酬.

1900/1/1 0:00:00
3.11晚间比特币以太坊行情分析

相信自己;越活越坚强,我没有靠山,自己就是山,我没有天下,自己打天下,活着就该逢山开路,我依然是你们的老朋友老刘,废话不多说就让老刘等你了解今天牛市的最新行情吧!欢迎新老朋友关注老刘,老刘每天会为你带来最新的行情,准确的操作方法.

1900/1/1 0:00:00
品牌创新大会|飞瓜首席数据分析师洞察四大平台新锐美妆品牌营销策略

3月10号,由CIBE中国国际美博会主办、广州美妆电商协会协办的“寻找隐形冠军·第三届品牌创新大会”在广州南丰朗豪酒店顺利召开.

1900/1/1 0:00:00
泽熙洲:3.13沪金沪银下周行情看点解析及黄金td操作建议

  国际黄金走势分析:今天早间黄金小幅反弹测试1728区域承压回落,在午后受美国10年期国债收益上涨,美元止跌反弹,打压金价,黄金跌破1720、1707支撑刷新日内低点至1699区域暂时止跌,目前在1700上方弱势震荡.

1900/1/1 0:00:00
别出机杼,Conflux打造全球最快PoW公链

牛市当前,各个赛道格局都在不断演变,前些年频繁诞生号称以太坊杀手的新兴公链也逐步没了声音,甚至归零,只有少数公链在历经时间的考验后留了下来,Conflux就是其中一个.

1900/1/1 0:00:00