火星链 火星链
Ctrl+D收藏火星链
首页 > 火必下载 > 正文

FIL:冗余策略:双副本与纠删码该如何选择?

作者:

时间:1900/1/1 0:00:00

Filecoin主网的上线后,存储的数据呈爆炸式增长,如今全网有效算力已经达到了1.40EiB,海量数据的安全存储给矿工带来了巨大的挑战。

关注Filecoin的小伙伴们近两天可能看到过这两个账户的图片,这两个账户都是之前排名靠前的节点,可是现在账户显示可用余额为负几万FIL-十几万FIL,质押币被罚没,出块奖励被罚没,损失折合人民币数千万元,出现这样的状况非常可惜。

29.6万枚ILV从未知钱包转入Coinbase:金色财经报道,据WhaleAlert数据监测,29.6万枚ILV(价值约14,198,380美元)从未知钱包转移到Coinbase。[2023/5/24 15:22:15]

扇区生命周期是180-540天,在这期间内我们要不断地进行时空证明,来验证数据存储的安全无误,如果提交的数据有误或者没有在时间内提交就会报错,如果14天内还没有提交上来正确的数据,就会触发非常严重的罚没机制!

所以存储方案对于Filecoin挖矿非常重要!

普通的硬盘存储是很危险的。硬盘在存储实际使用过程中年故障率一般在2%上下,这意味着100块硬盘中,平均每年会故障2块,硬盘故障率是非常高的,我们可以看下图的浴缸曲线,硬盘在刚上线时故障风险更大,更远高于平均故障率。

这说明我们存储打包的数据是很容易因硬盘损坏而丢失,仅仅靠硬盘存储很难保证可以在扇区生命周期内存储数据的安全。

Web3游戏DAO Game7推出开源NFT标准“NFT Inventory”:金色财经报道,Web3游戏DAO Game7宣布与Web3游戏经济基础设施初创公司Moonstream.to合作推出开源NFT标准“NFT Inventory”,该标准能让游戏开发人员快速扩展游戏,无需运行复杂的智能合约升级、或对游戏服务器进行重大调整;此外,该标准也可以让游戏设计师自定义游戏内资产,目前支持ERC-1155(用例包括游戏武器、盔甲、药水)、ERC-721(独特徽章、特殊头衔、玩家等级)和 ERC-20(金币、xp 等)代币。

据此前报道,Game7由链游平台Forte提议与Alameda等投入5亿美元构建,去年底Game7启动了1亿美元资助计划以加速Web3游戏开发。(prweb)[2023/2/12 12:01:54]

图:浴缸曲线

所以冗余保护策略就变得非常必要。

多副本和纠删码是目前分布式存储系统中常用的两种数据冗余保护策略,也就是保护我们数据安全的两项技术。

注:分布式存储系统中的CAP原则,Consistency、Availability、PartiTIontolerance,对于可用性来说常见的两种技术是多副本和纠删码。

Ripple CTO:加密行业正处于类似21世纪初谷歌的境遇:1月2日消息,Ripple首席技术官David Schwartz认为,XRP以及更广泛的加密行业持续表现低迷是因为市场还不确定加密市场会成为“下一件大事”。这就像2000年谷歌所遭遇的境遇:当时科技行业同样对“搜索引擎是否可以提供数十亿美元价值”持怀疑态度,但有些人成为真正的信徒并因此成为百万富翁。而加密货币目前也处于类似的情况,导致价格因为投资者的情绪起伏而波动。最终随着加密领域的成熟,市场会做出选择。(U.Today)[2023/1/2 22:20:58]

多副本与纠删码分别是什么

多副本就是把数据复制成多份并分别存储到不同地方以实现冗余备份。以双副本为例,双副本顾名思义就是数据存储为两个副本,当某个副本丢失时,可以通过另一个副本复制恢复数据。

纠删码主要是通过纠删码算法将原始的数据进行编码得到冗余,它将数据分割成片段,把冗余数据块扩展、编码,并将其存储在不同的位置,并将数据和冗余一并存储起来,以达到容错的目的。

纠删码最早是在通信行业解决部分数据在传输中损耗的问题,它的基本原理是把传输的信号分段,加入一定的校验再让各段间发生一定的联系,即使在传输过程中丢失掉部分信号,接收端仍然能通过算法把完整的信息计算出来。纠删码技术本身更多是用于传输,而并不是存储。

纽约梅隆银行CEO:客户需求是推出加密托管服务的关键因素:金色财经报道,纽约梅隆银行首席执行官Robin Vince在三季度财报的电话会议上表示,客户对加密货币的需求是该公司推出加密货币托管服务的关键因素。

此前消息,纽约梅隆银行上周宣布已将比特币和以太坊添加到其托管产品中。Vince在电话会议中说:“我们从客户那里听到的是,他们想要该领域的机构级解决方案,其中75%的人正在投资或积极考虑投资数字资产,而90%的人预计将在未来几年内将资金投入代币化资产”。[2022/10/18 17:30:08]

多副本与纠删码技术如何选择

多副本与纠删码技术在不同的应用场景下有各自的优势。

1.存储利用率

多副本是复制多份分别存储到不同地方以实现冗余备份,比如双副本磁盘利用率只有50%,冗余度很高,这带来了巨大的额外存储空间消耗,无形中提高了很大的成本,但它更安全、读写更快。

纠删码技术不需要完整写入真实数据的副本,它主要是通过纠删码算法将原始的数据进行编码得到冗余,并将数据和冗余一并存储起来,以达到容错的目的。其基本思想是将n块原始的数据元素通过一定的计算,得到m块冗余元素。对于这n+m块的元素,当其中任意的少于m块元素出错时,均可以通过对应的重构算法恢复出原来的n块数据。生成校验的过程被称为编码,恢复丢失数据块的过程被称为解码。磁盘利用率为n/(n+m)。与双副本方法相比具有磁盘利用率高等优点。

币安:支持以太坊合并计划,目前不做任何上币保证:8月10日消息,币安发布《关于支持以太坊合并计划的公告》,据公告内容显示,币安密切关注预计将于 2022 年第三季度/第四季度在以太坊网络上进行的合并计划,该计划可能产生新的分叉 Token。币安将支持以太坊合并计划,若产生新的分叉 Token,币安将评估并支持分叉 Token 的分发和提现。

币安补充表示,所有分叉币需和其它 Token 一样通过币安的上币审核流程。根据内部政策,币安不会做任何的上币保证。[2022/8/10 12:16:32]

附:容量空间对比

2.容错性

双副本很好理解就是存一份,备份一份,容错性比较好。双副本在部分数据丢失后可以从另一个副本复制出来损失的数据,恢复正常使用。

纠删码技术本质就是计算,如果出现数据丢失,纠删码技术做的是把丢失的数据计算出来,而计算是需要一些已知的量再进行运算的,当数据丢失多的话,是无法计算的。容错性比起副本有一定差距,

放到实际情况来讲,当纠删码设置4/1情况下,节点或者数据块故障,数据恢复需要读取3个数据块和1个校验,也就是说这5项损坏了任意2项的数据块,数据就无法计算找回,就造成信息丢失、无法找回的严重后果。

3.可靠性对比

双副本有两份数据,可以允许任意一个数据块损坏。

纠删码配置一个数据块配备一个校验位时才能提供和双副本近似的可靠性。

4.数据恢复对性能影响及恢复效率

双副本下,一个节点或者数据块故障,数据恢复直接从另一个副本读取、写入,一次进行恢复副本,影响一个节点的读取性能。恢复效率较高。

纠删码设置4/1情况下,一个节点或者数据块故障,数据恢复需要读取三个数据块和一个校验,通过运算后写入一次进行数据恢复,影响四个节点的读取性能。恢复效率较低。

5.写惩罚

双副本下,某个节点的一次数据写入,实际需要两个节点参与,写惩罚为2。

纠删码设置4/1情况下,一次数据写入,实际需要至少两个节点参与,其中读取两次,写入两次,写惩罚为4。

6.CPU开销

双副本是基于数据完整复制,几乎没有计算的开销,对CPU开销较低。

纠删码由于读写都需要计算校验值,有较高的计算开销,需要额外的CPU资源开销。

7.这两项技术如何选择

副本技术可以更好的保证数据的安全性,提升读写效率。一般适用于关键业务,对性能要求比较高,网络对数据出错容忍度极低的业务,如数据库等。

纠删码则可以提高存储系统利用率,降低成本。一般适用于其他非关键性业务,如视频监控等,部分数据块的损坏不会影响信息的传递。

结语

Filecoin挖矿中最为核心的就是存储,在存储上省钱,如果有一天出了问题,赔了夫人又折兵。在当前副本策略在安全性上无疑是更优的,尽管成本很高,但对我们挖矿中的数据的安全是一个重要保障,备份冗余并不是浪费,而是非常必要的。

当前Filecoin挖矿热度依然很高,市场鱼龙混杂,充斥着各种各样的Filecoin挖矿产品。比如市场上相同价格可能有80%利用率的产品,也有双副本50%利用率的产品,要如何选择呢?投资Filecoin挖矿产品绝对不能只看售卖价格,作为投资人一定要有一个投资标准,很多技术问题可能很难去理解和分析,但我们可以化繁为简比较每万元收益,毕竟拿到手里的收益才是最实在的。

标签:OINCOINCOIFILPonziCoinTCOINprimecoinfilecoin币价格币币情

火必下载热门资讯
BitMart:香港发出首张加密货币牌照,限八百万港币以上专业投资者,北京会参考吗?

12月15日BC科技集团旗下OSL交易所宣布,获得香港证券及期货监察委员会颁发的首个虚拟资产牌照,牌照类型为第1类证券交易和第7类提供自动化交易服务。这意味着香港发出了第一张加密货币牌照.

1900/1/1 0:00:00
DEFI:国家区块链漏洞库发布DeFi网络安全态势报告

来源:国家区块链漏洞库近期DeFi安全事件频发,国家区块链漏洞库收录的安全事件包括shroom.finance项目增发无限代币、Unicats项目授权攻击、Balancer项目攻击事件、Akro.

1900/1/1 0:00:00
COIN:Coinbase上市背后:中国资本入局,估值或达280亿美元

8年磨一剑,Coinbase终于申请上市!12月7日,CoinbaseGlobal宣布,已向美国证券交易委员会提交了上市申请,成为首家试水资本市场的加密货币交易所.

1900/1/1 0:00:00
USD:AAX研报:比特币若突破24000美金,目标30000美金

BTCBTC这个月的表现非同一般。本月达到历史最高点,可能所有人都在想,BTC这艘火箭船何时会耗尽燃料。然而,一周前,BTC开始显得有些不稳定.

1900/1/1 0:00:00
人工智能:“加密妈妈”Peirce:SEC可能会效仿怀俄明州制定加密货币监管“新规则”

这位SEC专员说:“加密货币带来的一些问题,并没有被我们现有的证券法彻底解决。” 美国证券交易委员会专员HesterPeirce最有名的昵称是“加密妈妈”,她说,如果仅将数字资产纳入其现有监管框.

1900/1/1 0:00:00
BAS:透视Rebase类代币:非对称机会成博弈窗口,紧缩比扩张更常见

分析师|Carol?编辑|Tong?出品|PANews非稀释性的弹性供应模型“走红”币圈。这种经济模型被称为Rebase,其核心结构可以笼统地表述为,在一定周期内,当市场价格偏离基准价格或偏离基.

1900/1/1 0:00:00