月亮链 月亮链
Ctrl+D收藏月亮链

FIL:冗余策略:双副本与纠删码该如何选择?_Wider Coin

作者:

时间:1900/1/1 0:00:00

Filecoin主网的上线后,存储的数据呈爆炸式增长,如今全网有效算力已经达到了1.40EiB,海量数据的安全存储给矿工带来了巨大的挑战。

关注Filecoin的小伙伴们近两天可能看到过这两个账户的图片,这两个账户都是之前排名靠前的节点,可是现在账户显示可用余额为负几万FIL-十几万FIL,质押币被罚没,出块奖励被罚没,损失折合人民币数千万元,出现这样的状况非常可惜。

拜登签署行政命令 限制在半导体、量子信息技术和AI三个领域对中国投资:金色财经报道,美国总统拜登周三签署了“对华投资限制”行政命令,该命令将严格限制美国对中国敏感技术领域的投资,禁止美国在中国对计算机芯片等敏感技术进行一些新投资,并要求政府在其他科技领域进行通报。

这项命令授权美国财政部长禁止或限制美国在三个领域对中国实体的投资,包括半导体和微电子、量子信息技术和某些人工智能系统。[2023/8/10 16:16:55]

扇区生命周期是180-540天,在这期间内我们要不断地进行时空证明,来验证数据存储的安全无误,如果提交的数据有误或者没有在时间内提交就会报错,如果14天内还没有提交上来正确的数据,就会触发非常严重的罚没机制!

所以存储方案对于Filecoin挖矿非常重要!

普通的硬盘存储是很危险的。硬盘在存储实际使用过程中年故障率一般在2%上下,这意味着100块硬盘中,平均每年会故障2块,硬盘故障率是非常高的,我们可以看下图的浴缸曲线,硬盘在刚上线时故障风险更大,更远高于平均故障率。

Nansen:6月NFT创作者版税支付额创两年新低:金色财经报道,根据区块链数据分析平台Nansen发布的最新报告,6月份NFT版税支付额降至两年来的最低点。数据显示,NFT版税支付金额在2022年4月达到顶峰,当时创作者周收入可以达到28,000 ETH,接近7600万美元,而6月份的高峰周,创作者总共赚取了2,000 ETH,仅约380万美元,分析称版税收入在BAYC地板价暴跌和Azuki Elementals铸造失败之前就已经开始。此外,截至7月4日,Yuga Labs通过旗下NFT系列已赚取近1.66亿美元的集体版税,Azuki及其衍生项目BEANZ和Elementals的版税收入超过5800万美元。[2023/7/6 22:20:41]

这说明我们存储打包的数据是很容易因硬盘损坏而丢失,仅仅靠硬盘存储很难保证可以在扇区生命周期内存储数据的安全。

Web3公司RACA完成1600万美元融资,DWF Labs领投:金色财经报道,Web3 公司 RACA 完成 1600 万美元融资,DWF Labs领投。这笔交易包括购买数量不详的 RACA 代币。该公司已经推出了 R3 游戏基础设施、SimCity 风格的沙盒游戏 USM.WORLD、社交派对游戏 Looki Looki Jazzi、跨游戏 DID 钱包 JAZ 和 NFT 市场。DWF Labs 已成为加密货币熊市期间最活跃的投资者之一。最近的投资包括为衍生品交易平台 Synthetix筹资 2000 万美元,以及为专注于 AI 的加密协议Fetch.ai筹资 4000 万美元。

根据 CoinMarketCap 的数据,RACA 代币在过去 24 小时内基本持平。[2023/4/6 13:47:18]

图:浴缸曲线

所以冗余保护策略就变得非常必要。

多副本和纠删码是目前分布式存储系统中常用的两种数据冗余保护策略,也就是保护我们数据安全的两项技术。

注:分布式存储系统中的CAP原则,Consistency、Availability、PartiTIontolerance,对于可用性来说常见的两种技术是多副本和纠删码。

2805枚BTC从Kraken转出至未知钱包:金色财经报道,2805枚BTC于今日03:30从Kraken转出至未知钱包,价值约4757万美元。[2022/12/4 21:20:30]

多副本与纠删码分别是什么

多副本就是把数据复制成多份并分别存储到不同地方以实现冗余备份。以双副本为例,双副本顾名思义就是数据存储为两个副本,当某个副本丢失时,可以通过另一个副本复制恢复数据。

纠删码主要是通过纠删码算法将原始的数据进行编码得到冗余,它将数据分割成片段,把冗余数据块扩展、编码,并将其存储在不同的位置,并将数据和冗余一并存储起来,以达到容错的目的。

纠删码最早是在通信行业解决部分数据在传输中损耗的问题,它的基本原理是把传输的信号分段,加入一定的校验再让各段间发生一定的联系,即使在传输过程中丢失掉部分信号,接收端仍然能通过算法把完整的信息计算出来。纠删码技术本身更多是用于传输,而并不是存储。

多副本与纠删码技术如何选择

多副本与纠删码技术在不同的应用场景下有各自的优势。

法官否认前OpenSea员工驳回欺诈案的动议:金色财经报道,纽约南区的一名法官驳回了前OpenSea员工Nathaniel Chastain驳回的电汇欺诈指控的动议。

在前OpenSea产品负责人涉嫌购买和出售他知道将在市场主页上列出的NFT后,一个大陪审团起诉了Chastain,美国司法部称这一计划类似于利用内幕信息获利。

Chastain在8月提出了驳回动议,认为NFT既不构成证券也不构成商品,并且指控抢先交易的电汇欺诈指控需要在这些类别中进行交易。

地区法官杰西·弗曼今天在一份备忘录和命令中正式表示不同意,否认驳回起诉的动议,并称这一论点“完全没有根据”。(The Block)[2022/10/22 16:35:01]

1.存储利用率

多副本是复制多份分别存储到不同地方以实现冗余备份,比如双副本磁盘利用率只有50%,冗余度很高,这带来了巨大的额外存储空间消耗,无形中提高了很大的成本,但它更安全、读写更快。

纠删码技术不需要完整写入真实数据的副本,它主要是通过纠删码算法将原始的数据进行编码得到冗余,并将数据和冗余一并存储起来,以达到容错的目的。其基本思想是将n块原始的数据元素通过一定的计算,得到m块冗余元素。对于这n+m块的元素,当其中任意的少于m块元素出错时,均可以通过对应的重构算法恢复出原来的n块数据。生成校验的过程被称为编码,恢复丢失数据块的过程被称为解码。磁盘利用率为n/(n+m)。与双副本方法相比具有磁盘利用率高等优点。

附:容量空间对比

2.容错性

双副本很好理解就是存一份,备份一份,容错性比较好。双副本在部分数据丢失后可以从另一个副本复制出来损失的数据,恢复正常使用。

纠删码技术本质就是计算,如果出现数据丢失,纠删码技术做的是把丢失的数据计算出来,而计算是需要一些已知的量再进行运算的,当数据丢失多的话,是无法计算的。容错性比起副本有一定差距,

放到实际情况来讲,当纠删码设置4/1情况下,节点或者数据块故障,数据恢复需要读取3个数据块和1个校验,也就是说这5项损坏了任意2项的数据块,数据就无法计算找回,就造成信息丢失、无法找回的严重后果。

3.可靠性对比

双副本有两份数据,可以允许任意一个数据块损坏。

纠删码配置一个数据块配备一个校验位时才能提供和双副本近似的可靠性。

4.数据恢复对性能影响及恢复效率

双副本下,一个节点或者数据块故障,数据恢复直接从另一个副本读取、写入,一次进行恢复副本,影响一个节点的读取性能。恢复效率较高。

纠删码设置4/1情况下,一个节点或者数据块故障,数据恢复需要读取三个数据块和一个校验,通过运算后写入一次进行数据恢复,影响四个节点的读取性能。恢复效率较低。

5.写惩罚

双副本下,某个节点的一次数据写入,实际需要两个节点参与,写惩罚为2。

纠删码设置4/1情况下,一次数据写入,实际需要至少两个节点参与,其中读取两次,写入两次,写惩罚为4。

6.CPU开销

双副本是基于数据完整复制,几乎没有计算的开销,对CPU开销较低。

纠删码由于读写都需要计算校验值,有较高的计算开销,需要额外的CPU资源开销。

7.这两项技术如何选择

副本技术可以更好的保证数据的安全性,提升读写效率。一般适用于关键业务,对性能要求比较高,网络对数据出错容忍度极低的业务,如数据库等。

纠删码则可以提高存储系统利用率,降低成本。一般适用于其他非关键性业务,如视频监控等,部分数据块的损坏不会影响信息的传递。

结语

Filecoin挖矿中最为核心的就是存储,在存储上省钱,如果有一天出了问题,赔了夫人又折兵。在当前副本策略在安全性上无疑是更优的,尽管成本很高,但对我们挖矿中的数据的安全是一个重要保障,备份冗余并不是浪费,而是非常必要的。

当前Filecoin挖矿热度依然很高,市场鱼龙混杂,充斥着各种各样的Filecoin挖矿产品。比如市场上相同价格可能有80%利用率的产品,也有双副本50%利用率的产品,要如何选择呢?投资Filecoin挖矿产品绝对不能只看售卖价格,作为投资人一定要有一个投资标准,很多技术问题可能很难去理解和分析,但我们可以化繁为简比较每万元收益,毕竟拿到手里的收益才是最实在的。

标签:FILCOINCOIOINfil币价格今日行情币百科coinw交易所老板是谁VoteCoinWider Coin

Gate交易所热门资讯
APP:DappRadar报告:2020年DeFi繁荣推动DApp总交易量增长近12倍_DAP

根据DappRadar,2020年迄今为止的DApp总交易量已经高达2700亿美元,其中95%来自以太坊上的DeFi生态系统.

1900/1/1 0:00:00
数字货币:金融时报:多个经济体加强数字货币研究_现在比特币市值多少

在科技日新月异的背景下,数字化所带来的影响和变化正从经济社会向金融领域不断延伸。其中,对数字货币的研究近年来备受关注.

1900/1/1 0:00:00
DOT:三方聚首,波卡平行链插槽拍卖有何吸引之处?_FDOTA价格

本篇文章为Polkadot社区志愿者组织提供的第二篇文章。众所周知波卡的平行链插槽数量是有限的,因而项目方想要成为波卡的平行链,必须要抵押DOT,和其他项目方一起竞争插槽的使用权,我们把平行链插.

1900/1/1 0:00:00
比特币:从不看好到坚定持有,巨头们的“比特币世界观”正在重塑_STE

众多迹象表明,2020年,已成为机构投资者采纳比特币的“分水岭”。这一年,机构投资者对比特币的态度已从早期的看不起,到积极学习,再到拥抱的巨大转变.

1900/1/1 0:00:00
比特币:加密投资者:黑客入侵了美国财政部,而比特币永远不会遭遇黑客攻击_加密货币

关于黑客入侵了美国财政部的消息,加密货币投资者快速地给出了回应。根据路透社的一份报告,从熟悉此次调查的三位人士那里了解到,由一个外国政府支持的“老练的黑客团体”能够攻击美国财政部以及国家电信与信.

1900/1/1 0:00:00
数字货币:巴比特专栏 | 蔡凯龙:中国的数字货币交易所,到底该如何监管?_加密货币未来前景分析

原标题:《蔡凯龙丨加密数字货币交易未来之路》最近比特币价格飙升到23000美元历史新高,再次成为焦点,一时风光无限。而作为比特币价格发现的重要环节,加密数字货币交易所,却暗流涌动.

1900/1/1 0:00:00