浅谈分布式存储系统架构设计

• 146
•ELECTRONICS WORLD ・技术交流
本文分析了传统存储系统的缺陷和分布式存储的优势,
介绍了分布式非结构化存储系统的总体架构、软件架构和网络架构设计,系统基于通用存储服务器,可以提供海量非结构化文件存储服务,适用于电信运营存储资源池、智慧城市视频监控、媒资云存储、智慧医疗影像存储等各类云存储应用场景。1  传统存储系统和分布式存储系统
随着信息技术的发展,越来越多的信息被数据化,尤其
是随着因特网和移动通信网的发展,数据呈爆炸式增长,图片和视频已经逐渐成为人们记录和分享信息的主要方式,各种互联网应用,催生海量的内容与数据,预计到2020年底,全球数据总量将达到44ZB ,其中80%左右为非结构化数据。
20世纪最重要的资源是石油,控制了石油,就控制了
所有国家。而到了21世纪,海量的信息则成了资本市场的石油,大数据左右了资本市场的竞争。谁能掌握更多的数据,并及时做出分析、决策,谁就是市场的赢家。
海量的非结构化数据要发挥它的价值,首先要存储下来,
需要提供低成本、高可扩展的存储能力,而传统存储系统面临以下缺陷:
(1)各业务平台的存储系统独立建设,都需要存储设
备、网络设备等,大量重复建设,导致投资成本较高;不同的设备需求和运维手段,导致维护成本较高。(2)新业务部署成本高、周期长。(3)存储设备日常运行中负荷不均,平均利用率低。采用分布式存储系统将解决以上缺陷,并带来以下优势:(1)高资源利用率和低能耗:多平台共享数据,避免数据孤岛,提升存储资源利用率,降低存储、网络等IT 设备的投入,从而降低能耗。
(2)高效的存储管理:可以快速部署开展业务,并根据业务
需求弹性扩展伸缩存储资源。(3)高性能:通过分级存储实现数据的高速存储和读取。(4)高可靠性和可用性:通过分布式存储技术实现异地容灾备份,保障数据安全。(5)提供标准化存储接口,
提供一键备份、恢复、迁移、镜像、快照、还原、回退等操作维护脚本和模板,提升操作维护效率。2  分布式存储系统架构2.1  系统总体架构本文所述分布式文件存储系统,作为云存储的一种产品形态,基于通用存储服务器,可以提供海量非结构化文件存储服务,可以应用于电信运营存储资源池、智慧城市视频监控、媒资云存储、智慧医疗影像存储等各类云存储应用场景。系统采用完全去中心化架构,各节点分布式部署,无任何单点故障,通过纠删码、副本等多种数据冗余备份方案,可自动快速重构恢复磁盘故障数据,实现系统的高可用性和数据的高可靠性。数
浅谈分布式存储系统架构设计
中兴通讯股份有限公司  穆志纯
图1 系统总体架构

本文发布于:2024-09-21 22:57:27,感谢您对本站的认可!

本文链接:https://www.17tex.com/tex/1/97389.html

版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。

留言与评论(共有 0 条评论)
   
验证码:
Copyright ©2019-2024 Comsenz Inc.Powered by © 易纺专利技术学习网 豫ICP备2022007602号 豫公网安备41160202000603 站长QQ:729038198 关于我们 投诉建议