进阶 rustfs.com 2026-11-14 08:26:37 · 12 阅读

第18章 RustFS 1.0.0-beta.10 发布:分布式存储性能大幅提升

← 所有文章 RustFS 1.0.0-beta.10 发布:分布式存储性能大幅提升 2026年7月17日 6分钟阅读 RustFS 发布 性能 S3 分布式存储

今天,我们很兴奋地宣布 RustFS 1.0.0-beta.10 正式发布。

这是 RustFS 的一个里程碑版本。与之前的版本相比,1.0.0-beta.10 在性能和稳定性方面都有显著改进。在与 MinIO 的基准测试中,RustFS 在 PUT 请求上的性能现已超越 MinIO,GET 请求的性能差距也在持续缩小。

主要架构与质量改进 除了原生性能提升外,1.0.0-beta.10 还在整个软件栈中引入了严格的生产级增强:

核心存储路径优化:简化数据路径,降低锁定延迟,增强 IO 可观测性,提升整体吞吐量稳定性。 S3 兼容性与复制:解决大量边缘情况合规问题、存储桶复制死锁以及生命周期收敛延迟。 强化默认安全:修复多个 GHSA 级别的授权漏洞,消除危险默认配置回退。 解耦模块化架构:提取核心存储、配置和执行运行时契约,系统性减少与 ECStore 的遗留耦合。 企业级 CI/CD 网关:升级发布管道,加入自动化软件物料清单(SBOM)生成、SLSA 溯源验证、严格依赖锁定以及多层端到端(E2E)回归测试。

性能基准测试 为了验证这些性能提升,我们在 Azure 云上部署了 RustFS 和 MinIO,并构建了镜像的企业级环境。

测试环境配置 节点数 每节点磁盘数 磁盘存储容量 磁盘 IOPS 操作系统 CPU 核心数 内存 云服务商 4 4 300GB 32000 Ubuntu 24.04 8 16GB Azure

方法论与版本信息 基准测试工具:MinIO 的开源 warp 工具,使用 11 种对象大小,64 个并发客户端,每次运行 5 分钟(涵盖 GET、PUT 和混合阶段)。

RustFS 构建配置:

rustfs 1.0.0-beta.10 build time : 2026-07-17 04:58:16 +00:00 build profile: release build os : linux-x86_64 rust version : rustc 1.97.1 (8bab26f4f 2026-07-14) rust channel : stable-x86_64-unknown-linux-gnu git branch : git commit : f67e8a6cdcb3e08dfa3c3c390412a9815837d0b2 git tag : 1.0.0-beta.10 git status :

MinIO 构建配置:

minio version RELEASE.2026-06-06T02-44-06Z (commit-id=a5e7b80cc659ff4b75d6d3d7be2caf72317b7a23) Runtime: go1.26.4 linux/amd64 License: MinIO AIStor License Copyright: 2015-2026 MinIO, Inc.

集群配置

RustFS 环境变量配置:

RUSTFS_ACCESS_KEY=rustfstest RUSTFS_SECRET_KEY=rustfstest RUSTFS_VOLUMES="http://rustfs-node{1...4}:9000/data/rustfs{1...4}/mnmd" RUSTFS_ADDRESS=":9000" RUSTFS_CONSOLE_ADDRESS=":9001" RUSTFS_CONSOLE_ENABLE=true RUSTFS_OBS_LOGGER_LEVEL=error

MinIO 环境变量配置:

MINIO_ROOT_USER=minioadmin MINIO_ROOT_PASSWORD=minioadmin MINIO_LICENSE="/opt/minio/minio.license" MINIO_BROWSER="on" MINIO_VOLUMES="http://rustfs-node{5...8}:19000/data/rustfs{1...4}/mnmd" MINIO_OPTS="--address :19000 --console-address :19001"

基准测试结果:演进与直接对比 第一部分:RustFS 1.0.0-beta.8 vs. 1.0.0-beta.10 我们最近两个版本之间的性能跳跃是惊人的。写入(PUT)速度最高提升 2.4 倍,读取(GET)在几乎所有负载大小上都实现了 100% 以上的提升。 PUT 对象大小 1.0.0-beta.10 1.0.0-beta.8 提升百分比 1KiB 2,195.91 1,524 +44.1% 4KiB 2,150.88 1,562 +37.7% 10KiB 2,150.42 1,518 +41.7% 16KiB 2,082.30 1,559 +33.6% 32KiB 2,006.79 1,436 +39.7% 100KiB 1,850.76 1,093 +69.3% 1MiB 1,017.72 293 +247.3% 4MiB 652.31 481 +35.6% 10MiB 301.34 267 +12.9% 16MiB 190.33 175 +8.8% 32MiB 90.67 69 +31.4%

GET 对象大小 1.0.0-beta.10 1.0.0-beta.8 提升百分比 1KiB 12,409.74 6,125 +102.6% 4KiB 12,071.08 5,829 +107.1% 10KiB 11,556.06 5,656 +104.3% 16KiB 11,239.02 5,463 +105.7% 32KiB 10,209.60 5,194 +96.6% 100KiB 7,152.31 3,689 +93.9% 1MiB 1,327.43 705 +88.3% 4MiB 1,549.36 271 +471.7% 10MiB 595.67 248 +140.2% 16MiB 370.21 ERROR N/A 32MiB 187.66 ERROR N/A

第二部分:RustFS vs. MinIO RustFS 现在在所有 PUT 工作负载上都超越了 MinIO,在某些对象大小上性能达到 MinIO 的 2.x 倍。对于 GET 性能,RustFS 与 MinIO 之间的差距也在继续缩小。 PUT 得益于高度并行的元数据序列化和无锁内存映射 IO 操作,RustFS 在 100% 的写入工作负载上超越了 MinIO,吞吐量最高提升 2.85 倍。 对象大小 RustFS MinIO 比率 领先者 1KiB 2,195.91 1,470 1.49 RustFS ✅ 4KiB 2,150.88 1,077 2.00 RustFS ✅ 10KiB 2,150.42 1,075 2.00 RustFS ✅ 16KiB 2,082.30 1,219 1.71 RustFS ✅ 32KiB 2,006.79 1,155 1.74 RustFS ✅ 100KiB 1,850.76 712 2.60 RustFS ✅ 1MiB 1,017.72 470 2.17 RustFS ✅ 4MiB 652.31 229 2.85 RustFS ✅ 10MiB 301.34 146 2.06 RustFS ✅ 16MiB 190.33 182 1.05 RustFS ✅ 32MiB 90.67 69 1.31 RustFS ✅

GET 对于读取性能,RustFS 已将差距缩小到极小范围。关键在于,我们优化的预读缓存机制和零拷贝数据路由使我们能够在此类小文件和多个大对象段(>4MiB)上超越 MinIO。 对象大小 RustFS MinIO 比率 领先者 1KiB 12,409.74 11,938 1.04 RustFS ✅ 4KiB 12,071.08 11,769 1.03 RustFS ✅ 10KiB 11,556.06 11,009 1.05 RustFS ✅ 16KiB 11,239.02 10,963 1.03 RustFS ✅ 32KiB 10,209.60 10,887 0.94 MinIO 100KiB 7,152.31 9,965 0.72 MinIO 1MiB 1,327.43 5,893 0.23 MinIO 4MiB 1,549.36 1,234 1.26 RustFS ✅ 10MiB 595.67 550 1.08 RustFS ✅ 16MiB 370.21 315 1.18 RustFS ✅ 32MiB 187.66 166 1.13 RustFS ✅

重要的迁移与升级说明 为了符合现代安全最佳实践并防止默认部署下的未授权访问,我们已弃用硬编码的默认回退凭据(rustfsadmin)。 安全增强:

用户现在必须在使用前显式指定 RUSTFS_ACCESS_KEY 和 RUSTFS_SECRET_KEY 的值。 如果默认占位符未更改,运行时将不再允许服务器启动。

现有集群所需的操作:

如果你当前的 RUSTFS_SECRET_KEY 仍设置为 rustfsadmin,你必须添加一个额外的环境变量:RUSTFS_RPC_SECRET。 注意:RUSTFS_RPC_SECRET 的值必须不同于 RUSTFS_SECRET_KEY。 如果你已经在使用自定义的 access/secret 密钥,则无需额外操作。

生态系统更新 企业级对象存储系统依赖于同样健壮的开发者工具集。除了服务器外,我们还发布了 CLI 工具和 Kubernetes Operator 的重要更新。 rc CLI (v0.1.27) — 原生命令行工具 我们的专用 CLI 伴侣工具 rc(类似于 MinIO 的 mc)已更新,增强了多流上传逻辑和更快的本地到远程目录同步。

快速设置与验证:

# 设置集群连接别名 $ rc alias set rustfs http://:9000 rustfstest rustfstest ✓ Alias 'rustfs' configured successfully.

# 创建和列出存储桶 $ rc mb rustfs/benchmark-bucket ✓ Bucket 'rustfs/benchmark-bucket' created successfully.

$ rc ls rustfs [2026-07-16 14:30:01] 0B benchmark-bucket/

# 流式上传本地文件 $ echo "RustFS performance milestone" > test-object.txt $ rc cp test-object.txt rustfs/benchmark-bucket test-object.txt -> rustfs/benchmark-bucket/test-object.txt (29 B)

有关详细用法,请探索 RustFS CLI GitHub 仓库。 RustFS Operator (v0.0.5) — 原生 Kubernetes 编排 我们的云原生 RustFS Operator 实现了全面的基础设施自动化,增加了原生多租户管理和动态存储池扩展。

步骤 1:添加官方 Helm 仓库

我们的 charts 原生发布到 ArtifactHub。 $ helm repo add operator https://operator.rustfs.com

步骤 2:安装 Operator 和管理控制台

helm install operator operator/rustfs-operator --version 0.0.5

部署完成后,你将看到 operator 控制器和管理控制台 pods 正常运行: kubectl -n rustfs-system get pods NAME READY STATUS RESTARTS AGE operator-rustfs-operator-978454bf4-zgdp9 1/1 Running 0 3d14h operator-rustfs-operator-console-7cfbf88c84-m7ct2 1/1 Running 0 3d14h

步骤 3:部署声明式多租户集群

只需应用以下自定义资源(CRD)即可自动配置一个具有 16 个存储磁盘的弹性 4 节点租户集群: kubectl apply -f - <

检查租户信息 # kubectl -n tenant-svt get tenant NAME STATE AGE svt-minimal Ready 3d14h

# kubectl -n tenant-svt get pods NAME READY STATUS RESTARTS AGE svt-minimal-dev-pool-0 1/1 Running 0 3d14h svt-minimal-dev-pool-1 1/1 Running 0 3d14h svt-minimal-dev-pool-2 1/1 Running 0 3d14h svt-minimal-dev-pool-3 1/1 Running 0 3d14h

有关完整的 Helm 值映射和高级配置配置文件,请访问我们的 RustFS Kubernetes Operator GitHub 仓库。

下一步:通往正式发布(GA)之路 1.0.0-beta.10 实现的里程碑标志着 RustFS 正在成熟为一个可靠、高性能的分布式存储引擎。在我们朝着 GA 版本迈进的过程中,我们将开发周期重点放在优化 Reed-Solomon 纠删码的 Galois Field 查找矩阵、优化多租户网络策略以及进一步扩展统一分析性 S3 表结构上。

我们是一个开源、社区驱动的项目。如果你有任何功能请求、bug 报告或问题,请加入我们在 GitHub 上不断成长的开发者社区:

核心 RustFS 服务器:github.com/rustfs/rustfs 命令行工具(rc):github.com/rustfs/cli Kubernetes Operator:github.com/rustfs/operator

本篇用到的工具

评论 (0)