分布式存储开启第四次工业革命
互联网开始进入一个新的发展阶段,有人说它是瞬息万变,有人则认为互联网没有变,变的只是财富风口。每当几年的时间过去,就有一个财富风口出现,比如在线支付、电子商务,以及后来的智能手机、VR/AR。在风口的力量推动下,有的人实现事业和财富的丰收,有的人则学会了飞。财富风口,是他们实现事业和财富大规模增长的法宝。那么下一的风口在哪里?如今大红大紫的区块链行业是否值得投入?
分布式存储火了
Web3.0时代来了,第一个应用实例会是什么?有人说是分布式存储。
2019年5月15日,华为发布分布式存储FusionStorage 8.0,凭借单节点性能高达16.8万每秒读写速度和1毫秒以内时延,一时间把分布式存储推向了风口浪尖。
在此之前,IBM公司也推出了GPFS分布式存储系统,与华为一样将在云计算和高端存储领域战略布局。
在以前,硬件的不足限制了软件的发挥,还有的忽视了云计算和云存储的重要性,从而错失了发展先机。集中式存储也普遍优于分布式存储。在当时分布式存储的概念太超前,软硬件条件都跟不上。
但是现在,时机终于成熟了。分布式存储建设在全球地区如火如荼展开,拥有高扩展性和超低延迟的分布式存储网络似乎将助推互联网财富风口的爆发。
作为芯片巨头的英特尔正式推出傲腾™ 技术,旨在消除数据中心存储瓶颈。它的官网这样写道“以分布式存储应对大数据应用趋势”。英特尔自信满满,它们笃定IT 消费化、用户数量的增加,更多的设备和更多的数据等,将存储环境推向一个新的水平。这些新的技术不仅推动了云计算 — 它们还同时推动了支持云计算的所有技术。云计算的核心就是数据中心和数据存储。
之后,阿里云推出商业级云托管关系型数据库POLARDB——它以分布式共享存储架构为基础,使用了英特尔®傲腾™固态盘。在2018 华为全联接大会上,华为与英特尔联手推出了诸多的解决方案与软硬件产品,内容覆盖了云端、网络以及各类终端产品。双方合作将华为的 FusionStorage 软件部署在搭载了英特尔可扩展处理器的服务器上,把所有服务器的本地硬盘组织成一个分布式的存储资源池,提供块存储等功能,满足不同行业的业务需求。凭借其优势,思科、甲骨文、腾讯、华为、阿里巴巴等都成为英特尔合作伙伴。
为什么一夜之间,从IBM、英特尔、甲骨文这些老牌科技霸主,到华为、阿里巴巴等新兴互联网科技巨擘,从云计算到移动互联网,所有人都开始进入分布式存储了?
正如英特尔所认定的一样,价值核心就是数据存储。
区块链的分布式存储才是王道?
随着比特币网络和区块链的兴起,过去十年,互联网经历了翻天覆地的变化。之后IPFS分布式技术的崛起,迅速成为下一代存储的解决方案。
区块链是去中心化的分布式账本数据库结构,没有中心化服务器,也没有单点控制。它被认为是下一代互联网的发展形态,区块链技术可以弥补当前We2.0互联网的不足。而底层的数据存储系统势必随之变化。
2018年,在IPFS协议发展三年之际,基于该协议的IPSE存储搜索引擎也就此推出。IPSE是IPFS的应用检索层,解决数据高效存储、快速检索和用户分享激励。
从存储架构上,IPSE底层依托IPFS协议建立起一个分布式存储系统,数据分散保存。在IPSE的分布式存储架构中,基于存储节点或Peer对象,对节点运行实例服务器优化,每个服务器均针对其角色配置最优的计算、I/O 和内存容量。随着存储需求的不断增长,客户可根据需要直接添加服务器来提高容量。这样,让IPSE分布式存储获得高扩展性。
针对数据安全,IPSE采用两个主要的方式,其一是文件版本溯源,既可防止文件重复保存,又可以快速溯源索引。其二是加密技术应用,数据打散加密存储于分布式节点,经过区块链共识机制(PoST存真证明)来维护网络安全性。除此之外,IPSE降低存储成本。采用分布式的存储系统,减少冗余,避免宕机,节点相互连接也优于传统的灾备,保证存储网络稳定性;IPSE的智能配置可删除重复数据并回收,通过智能分配提高存储空间利用率。企业可运行为降低成本和容量需求的实例,按容量付费,而不需要为庞大的且累计的空间套餐和年限埋单。
数据量级规模,需要相应的存储技术解决方案来支撑,主要涉及存储容量、数据处理速度和数据吞吐速率、扩展性等指标。对于IPSE这样的分布式存储和企业来说,这种挑战必然存在且必须面对。
分布式存储开启第四次工业革命
如果追溯历史,互联网在工业革命发展演变中起到中流砥柱的作用。
18世纪60年代,以蒸汽机作为引擎动力,第一次工业革命开始,它开创了以机器代替手工劳动的时代,引起了深刻的社会变革。19世纪中期,电力大规模应用,开启了第二次工业革命,人类进入了辉煌的“电气时代”。到了今天,电子计算机和互联网的发展,使得第三次工业革命继续向前,彻底改变了整个社会的运作模式,将人类的高科技产业从地球带到了外太空。第三次工业革命更像是科技革命。截至目前,第三次科技革命是人类历史上规模最大、影响最深远的科技革命。现在,我们正经历工业革命4.0。
未来,基于分布式全球网络,计算机相互联系并相互沟通,最终在没有中间人参与的情况下做出决策。随着智能机器的增多,机器之间也将存在智能。网络将变得更加高效,高效,资源将浪费更少。这些机器的网络相互之间进行数字化连接,并创建和共享信息,从而产生工业4.0的真正力量。
由于科技发展始终无法离开硬件,而连接的机器处于硬件的最前沿,这些需要收集大量数据,并分析这些数据以识别人类在合理的时间范围内无法做到的模式和见解,工业4.0给硬件制造商(这里主要指英特尔、甲骨文这种服务器及配件制造商,以及其它存储设备)有机会通过有效地快速布局并优化运营。但是机器连接数据收集必须处于一个安全的环境。这是IPSE分布式网络存在的意义,它去除中间人,无中心化服务器控制。数据的价值将处于安全的环境中,而不是数据被滥用。
如果往前推导,我们不难发现一个促使新旧科技“实体”扎根数据存储,它一直存在,那就是数据价值。
诞生于20世纪50年代的第二代电子计算机(也被称为晶体管计算机),当时的主存储器为磁芯,外存采用磁带和磁盘。对比今天的计算机,恐怕每个人都会惊讶于当时它的成本、体积、功耗、和重量,而且还不稳定。而那时候,集中式存储时当时的唯一解决方案。
面对数据爆炸和日益严峻的数据安全危机,靠传统方式(中心化和集中式)进行数据存储显然已经不现实。因此开发一个支持分布式存储、运算、点对点通信的系统,来处理数据就成一种办法。
可是,面对新技术的诞生和发展,系统软件脱离硬件不现实,应用脱离商业同样不现实。
分布式存储称为当下最火的技术之一,基于此实现全新的云计算解决方案,为企业提供高端存储和低成本的存储系统,面对一个用亿来衡量的市场,云计算和云存储就如同一座座的金山。它既是机遇也是挑战。
毫无疑问,去中心化的分布式存储最大的特性安全,用户获得数据所有权。但是在商业的大规模应用下,和中心化的存储对比却又难以超越,而取代还为时尚早。
但分布式取代集中式却是必然。这时也有一个巨大的问题:基于区块链技术的IPSE、Sia、Storj、Filecoin等,真正开启了分布式存储,但是传统科技巨头(如IBM、英特尔)现在已经快速进入分布式存储领域,他们实力强劲,巨头之间的合作又无形中形成了资本屏障。这种残酷的竞赛下,已经不再是单纯的比赛,更像是一场科技革命的战争。
IBM、英特尔与华为,他们想打通全场景应用,不仅仅是分布式,还有AI、5G、智能家居,他们还可以实现市场合作、共同开发,抢占下一个工业革命时代的先机。那么以区块链为基础的分布式存储网络,是否就此失去了机会?
可以预见,随着区块链和分布式技术的演进,We3.0已经不可阻挡,工业革命4.0的形态也将完全不同。区块链和分布式技术不是它的全部,确实未来可信任的价值互联网、乃至构建整个人类文明基础。底层的存储系统将需要全新的、安全可信的存储系统,越来越多的应用开始转向去中心化应用,在分布式网络中,人类价值也将获得安全、高效的流转。而对于企业,面对的不再是架构利弊,更多的是如何选择,在技术创新和科技革命中,利于不败之地。