消除数据孤岛 定义存储破局之道

网友投稿 253 2022-11-19

消除数据孤岛 定义存储破局之道

从人类文明出现到2003年,人类所留下的所有信息总和可以装满100万个1000G的硬盘,但这个庞大的数据量仅仅相当于如今人类单日制造的数据量。据IDC预测,3年后全球数据总量将达到175ZB,数字基础设施面临庞杂数据带来的新挑战,存储软件架构也正在被重新定义。

01

高并发处理&非结构化数据

传统存储 难以应对新需求

跟随“新基建”的步调,传统行业纷纷加快业务数字化转型,5G、云计算、人工智能等创新技术成为重要发展工程,伴随疫情常态化的影响,线上办公、学习所产生的数以亿计的终端访问量也加速了私有云、混合云的发展,企业业务云化进入加速跑阶段,高并发的业务需求对数据处理提出了海量、实时、多元、多云的挑战。

在企业组织的存储系统中,非结构化数据往往占据数据总量的80%至90%。这一庞然大物也是存储中的“隐秘角落”。尽管花费高昂的维护成本做到了数据存储,但对于数据的管理、利用往往不尽人意,面临扩展困难、数据孤岛等困境,数据价值难以被挖掘。面对数据中心里几十甚至上百个业务系统的不同存储需求,如企业数据库系统需要IOPS的块存储服务,影像数据业务如医院PACS系统等需要高容量高吞吐的文件存储、对象存储等,传统单一的集中式存储方式(DAS存储、NAS存储、SAN存储)已不适应业务发展需要,于是弹性、灵活的分布式存储成为应对首选。

02

分布式存储 “新基建”之基

软硬结合 定义存储新篇章

如今的存储市场正从传统存储向以分布式存储为主的SDS(软件定义存储)加速过度。据预测,未来10年,传统存储降幅将达16.7%,与之形成鲜明对比的是SDS平均每年以40%的速度增长,10年后,SDS将成为市场主流,而传统存储将萎缩到不足10%。

▲传统存储VS分布式存储性能对比

分布式存储采用分布式架构,利用标准x86服务器构建存储资源池,利用私有分布式协议统一所有服务器行为,并提供块、文件、对象等多种存储服务。此外,分布式架构可实现多节点高并发的业务处理需求,每个节点都具备存储和处理数据的能力,因此性能更高、更可靠,能够同时满足数据库等结构化数据的高IOPS需求和图像、视频等非结构化数据的高容量高吞吐需求。SSD作为一种全新的存储介质,从一开始的GB级别发展到目前的TB、PB级别。从SATA-SSD到NVMe,读写性能大幅提升,很好地解决了分布式存储系统随机性能不足的问题,满足了现阶段的业务需求。

版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。

上一篇:kafka topic 权限控制(设置删除权限)
下一篇:基于EFM32的无磁热表的方案
相关文章

 发表评论

暂时没有评论,来抢沙发吧~