ITPub博客

首页 > 大数据 > Hadoop > 除了Filecoin分布式存储HDFS项目也值得你了解

除了Filecoin分布式存储HDFS项目也值得你了解

原创 Hadoop 作者:chenxiao123 时间:2020-08-15 16:56:34 0 删除 编辑

大数据引导的 HDFS

 

许多人还没有搞清楚个人电脑互联网是什么,移动互联网在这里,当我们还没搞清楚移动互联网的时候,大数据时代又来了," 马云在离任时说。大数据的应用已经进入了一个快速发展的时期,未来一种新的商业模式的出现有望带来更大的发展。

 

由于以人工智能、5G 和物联网为主导的新一轮信息技术革命,数据中心的迅速增长导致存储产业链的需求大幅增加。在全球和中国数据存储需求迅速增长的背后,必然伴随着产业链的繁荣。

 

HDFS分布式存储公链是一套完整的个人数据存储解决方案,它由无数的节点以p2p的形式组成一个数据存储阵列,采用POC+POST的双重共识机制来识别及分配奖励,采用加密机制对数据传输及存储过程进行保护形成一套安全、高效、经济的个人数据存储全套解决方案。

 

 

数据层:是整套 HDFS 的底层机制,包含了整套个人数据存储方案的解决体系,基于数据层的约定的机制,各方可以在这套分布式存储网络中找到自己的应该履行的义务及可以获取的权利,数据层是开源的任何联网的单机下载并运行数据包既是HDFS的节点,同步存储HDFS的数据获得HDFS 的奖励。

 

 

网络层 :HDFS采用的是p2p的网络机制,用户的数据上传及下载直接从对应的节点磁盘内调取资源,P2P 的形式更加安全而且充分利用了节点独立带宽的优势在数据上传及下载的过程之中能够实现多线程同步协作的形式,极大提升了数据读写的效率。

 

 

共识层: HDFS 采用的是抵押挖矿的模式,即检查用户的POC也检查用户的POST,识别节点的贡献的时候,一方面是考察节点的可用存储空间的大小POC,另外POST机制还要求节点定时回传硬盘存储的文件的哈希值以验证节点是否一直履行自己的义务。如果节点掉线或者硬盘扇区被破坏则主网会对节点采取惩罚措施,视情节的轻重采取罚款、罚没用户抵押金甚至是取消节点身份的惩罚措施。

 

 

端到端连接之后是数据的存储和安全。在存储方面, HDFS 增加了一个激励层使用HDFStoken 作为激励措施,考核的是节点对数据的封装速度,poc越强大则用户的封装速度越快获得区块链几率就越大,主网每四分钟将产生一次区块奖励。

 

奖励那些贡献硬盘资源的人,有效和合理地整合社会资源。在HDFS中,当数据信息被存储时,除非根据我们自己的公钥授权打开数据信息,否则就不可能探索存储数据信息的内容,即使连接点是存储的。另外,HDFS的存储方法是将文件分割成多个副本,并将其存储在最近的多个节点上,因此在每个存储连接点都不容易获得详细的数据信息,从而大大提高了非法获取隐私保护数据信息的难度系数。

 

作为存储,HDFS更安全、更高效;作为一个项目,合理地整合了社会资源,创造了社会价值!在互联网金融飞速发展的时代,HDFS技术的出现带来了革命性的创新。同时, HDFS 也是区块链分布式存储技术的典型代表,也被称为引领区块链到3.0 时代的典型代表。

 

基于HDFS 存储生态构建:

 

HDFS作为下一代个人数据存储的承载着,基本面是负责将数据安全、有效的记录到网上另一方面则是以庞大的个人数据为一套延伸出更多的基于数据之上的服务,帮助用户将个人数据充分利用起来,服务于用户自身。

 

 


来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/69979736/viewspace-2712031/ ,如需转载,请注明出处,否则将追究法律责任。

请登录后发表评论 登录
全部评论

注册时间:2020-07-22

  • 博文量
    25
  • 访问量
    18839