四川分布式存储与计算

块存储：块存储是将数据划分为固定大小的数据块，每个块单独寻址。它通常用于需要高性能读写操作的场景，如数据库和虚拟机磁盘。上海雪莱信息科技有限公司针对企业级应用场景，部署了基于块存储的解决方案。通过合理规划块设备布局和缓存策略，公司有效提升了系统IO性能，满足了金融、电商等行业对低延迟、高吞吐量的严苛要求。文件存储：文件存储是以文件为单位进行管理，通过目录结构组织文件，并支持标准文件访问协议（如NFS、SMB）。它适合共享文件系统和协同办公环境。数据冗余备份机制使分布式存储系统在部分硬件故障时仍能保证数据完整性。四川分布式存储与计算

扩容方式特点：横向加节点，数据自动均衡。雪莱的扩容流程写在《运维白皮书》第3页：用户提出书面申请，雪莱24小时内发货，货到48小时内完成上架，上架后系统进入自动均衡，均衡速度默认每节点每小时迁移800GB，可手动调到1.2TB。均衡期间读写性能下降不超过15%，超过即自动降速。雪莱在2021年给某三甲医院一次性扩容20个节点，总裸容量增加1.2PB，均衡耗时48小时，期间PACS阅片室未投诉卡顿。扩容完成后，雪莱出具《性能对比报告》，显示扩容后集群IOPS提升1.7倍，带宽提升1.9倍，时延下降0.3毫秒，用户签字确认后视为验收通过。天津EDS分布式存储厂家分布式存储技术通过数据分级策略，将重要数据存储于高性能节点，普通数据存储于低成本节点。

数据分布特点：切片三副本均匀落地。雪莱的内部培训讲义把数据分布总结为四句话：文件进来先切片，切片默认1MB；每片存三份，三份落在不同节点、不同硬盘、不同机柜；切片位置由算法实时计算，管理员无法指定；切片位置一旦确定写入元数据，后续搬迁只能由系统触发。雪莱在2018年做过一次断电演练：随机拔掉3个节点，共36块硬盘，集群里存放的监控录像业务未丢一帧，原因是丢失的切片在剩余节点里全部找到副本。演练后雪莱把“断电3节点不丢数据”写进用户手册，成为后续投标的硬性承诺。

负载均衡与数据迁移：负载均衡（LoadBalancing）。为了较大限度地提高系统的效率和资源利用率，分布式存储系统通常会采用负载均衡的技术。这包括将新的数据片段均匀地分配到各个节点上，以及动态调整现有分布以适应变化的负载情况。上海雪莱的产品在这方面采用了先进的算法和机制，不仅能够实现高效的负载均衡，还可以实时监控和优化数据分布状态，从而确保系统的稳定运行。自动化的数据迁移（AutomaticDataMigration）：当系统的拓扑结构发生变化时（例如，添加或移除节点），系统需要对现有的数据进行重新分布和迁移，以维护较佳的性能和服务质量。分布式存储技术采用加密传输协议，确保数据在网络传输过程中不被窃取或篡改。

硬件构成特点：节点即硬盘柜。雪莱的出库单显示，分布式存储的硬件只有两种形态：2U12盘位和4U36盘位。CPU、内存、系统盘、网卡全部内置，没有单独光纤交换机，也没有单独Raid卡。每节点出厂时已经在系统盘里预装存储软件，上架后只要插两根网线、两根电源线即可开始组建集群。雪莱规定：任何节点必须双路供电，任何机柜必须N+1PDU，任何机房必须单独两路市电，否则拒绝开机。节点之间通过万兆电口互联，线缆长度不超过5米，超出距离必须加中继交换机。雪莱的交付记录里，较长链路89米，加了一对中继，运行5年后时延仍稳定在0.18毫秒以内。数据迁移工具帮助用户将传统存储数据转移到分布式存储。安徽分布式存储与计算

分布式存储系统通过缓存技术提升热点数据的访问速度。四川分布式存储与计算

这种架构带来了几个根本性的优势。首先是极高的可扩展性。当存储空间不足时，无需停机，只需简单地增加新的存储节点即可线性地扩充整个系统的容量和性能。其次是强大的可靠性。数据不再是单点存放，而是通过冗余编码技术，将一份数据切分并生成冗余校验块，分散存储在不同的节点甚至不同的物理机房。即使同时出现多个节点故障，只要存活的节点数量满足一定条件，数据就不会丢失，并且系统能够自动利用冗余数据恢复出原始数据，实现故障的自愈。然后是出色的性能。由于数据被分散存放，访问请求也可以被分散到多个节点上并行处理，从而避免了单一设备的性能瓶颈，能够轻松应对高并发访问场景。四川分布式存储与计算