中国拥有三个大型的数据库中心,分别是清华大学、北京大学和国防大学。它们分别是存储和管理中国大量数据的地方,被广泛用于教学、科研、行政和军事等领域。
华为分布式存储来势凶猛,IPFS还有机会吗?什么分布式存储?分布式存储简单来说,就是将数据分散存储到多个存储服务器上,并将这些分散的存储资源构成一个虚拟的存储设备,实际上数据分散的存储在企业的各个角落,假如你要存储10PB的一个视频文件,自己一个人的电脑存储不了,需要存储在多个服务器上,每一个服务器就是一个datanode,当你需要获取文件时,逐一访问效率太低,可以找一个中间人来存放文件在哪台服务器的信息,通过信息可以快速的找到文件,这个中间人就是namenode,存储的有关文件的信息就是元数据,为了数据安全,每一个小的视频(存储单元)复制一份存放到不同服务器上,当有服务器停止运行时,可以通过访问备份来寻找到自己想要的数据,这种存储方式叫做分布式存储。
分布式存储架构由三个部分组成:客户端、元数据服务器和数据服务器,客户端负责发送读写请求,缓存文件元数据和文件数据,元数据服务器负责管理元数据和处理客户端的请求,是整个系统的核心组件,数据服务器负责存放文件数据,保证数据的可用性和完整性,该架构的好处是性能和容量能够同时拓展,系统规模具有很强的伸缩性。
IPFS全称是Inter Planetary File System,直接翻译的话叫做“星际文件系统”,它由Protocol Lab提出,是一种点对点(P2P)的分布式文件系统,不过虽然说它是文件系统,是一种用来存储数据的技术,但更确切的说IPFS是一种传输协议,日前,在2019年世界移动大会(MWC)上,华为发布新一代数据中心级融合分布式存储FusionStorage 8.0,华为IT产品线智能存储与数据管理领域总裁孟广斌发布FusionStorage 8.0面向纷繁复杂的云环境,华为FusionStorage 8.0实现了一套存储系统同时支持块、文件、对象、HDFS、数据库协议,适用于全业务场景混合负载,以一套设备支持数据的生产、灾备、分析、归档等全生命周期场景,满足云上云下数据流动并保障一致性体验。
据悉,华为FusionStorage 8.0是业界首个支持企业关键业务的分布式存储系统,单集群横向扩展达到4096个节点,支持千万级IOPS,借助华为企业级存储成熟的芯片和FlashLink加速技术,节点与SSD盘之间协同更高效,时延响应低至0.5毫秒,基于华为企业存储产品久经验证的HyperMetro双活方案,华为FusionStorage 8.0可提供99.9999%的方案级可靠性,适用于虚拟化及数据库等多应用场景,保障关键业务不中断,提供支持秒级RPO(恢复点目标)的异步复制技术,凭借独有的自适应重复数据删除与数据压缩能力,即使在VDI(桌面虚拟化)应用场景中也能达到5:1的数据缩减比,华为FusionStorage 8.0通过协议融合、关键业务融合、场景融合、多云融合、管理融合五大创下融合特征,华为FusionStorage 8.0可帮助用户实现"一个数据中心一套存储"的终极目标。
作为华为FusionStorage的用户,中国移动通信集团辽宁有限公司累计部署容量超过10PB,到目前已稳定运行超过4年,数据库系统性能大幅提升,100TB经营分析数据处理时长由之前的超过10小时缩短至2小时,保障业务7x24小时在线,华为IT产品线智能存储与数据管理领域总裁孟广斌表示:"在数据中心从传统孤岛向云架构演进的趋势下,华为全新一代分布式存储FusionStorage 8.0通过创新的五大融合,打通企业数据壁垒,在业界首个支持关键业务,真正实现一个数据中心一套存储,助力行业客户数字化转型,华为FusionStorage已经为全球数千家企业用户持续提供数据存储服务"。
伴随5G、IoT、云、人工智能等新兴技术快速发展,传统集中式存储烟囱式部署的扩展性和管理难题日益凸显,越来越多的用户期望有一种新的形式,可以打破不同类型存储间的数据孤岛,让各类业务以统一的方式进行存储和管理,同时降低TCO、提升数字化平台服务效率。
中心化的网络就像一座城堡,而华为是里面的改革家,IPFS这样的新兴技术,就像是外来的革新者,城堡只能从内部攻破还是从外部摧毁?又或都会有之?分辩开来并不是绝对的,毕竟无论是哪个文化体系的人们都会思考这个问题,文件存储方式也在不断进化中,我们会继续关注这一话题的发展。