vastdata - 博客园

ACOS：Apple 的 EB 级地理分布式对象存储

摘要： ACOS：Apple 的 EB 级地理分布式对象存储原文标题: ACOS: Apple's Geo-Distributed Object Store at Exabyte Scale 会议: FAST '26 作者: Benjamin Baron, Aline Bousquet, Eric Met 阅读全文

posted @ 2026-03-25 10:06 vastdata 阅读(55) 评论(0) 推荐(0)

【论文翻译】Panasas 并行文件系统的可扩展性能（FAST '08）

摘要： Panasas 并行文件系统的可扩展性能 Brent Welch, Marc Unangst, Zainul Abbasi, Garth Gibson, Brian Mueller, Jason Small, Jim Zelenka, Bin Zhou ¹Panasas, Inc. ²Carnegi 阅读全文

posted @ 2026-03-23 13:45 vastdata 阅读(30) 评论(0) 推荐(0)

【论文翻译】F2FS：面向闪存存储的新型文件系统

摘要： F2FS：面向闪存存储的新型文件系统 Changman Lee, Dongho Sim, Joo-Young Hwang, and Sangyeun Cho 软件开发团队，存储事业部，三星电子原文发表于第 13 届 USENIX 文件与存储技术会议（FAST '15），2015 年 2 月 16– 阅读全文

posted @ 2026-03-20 16:25 vastdata 阅读(123) 评论(0) 推荐(0)

GPFS：面向大规模计算集群的共享磁盘文件系统（中文翻译）

摘要： GPFS：面向大规模计算集群的共享磁盘文件系统 Frank Schmuck 与 Roger Haskin IBM Almaden 研究中心，加利福尼亚州圣何塞摘要 GPFS（General Parallel File System，通用并行文件系统）是 IBM 面向集群计算机推出的并行共享磁盘文件阅读全文

posted @ 2026-03-17 13:17 vastdata 阅读(292) 评论(0) 推荐(0)

[翻译] AWS Lambda 中的按需容器加载

摘要： AWS Lambda 中的按需容器加载 Marc Brooker、Mike Danilov、Chris Greenwood、Phil Piwonka Amazon Web Services 摘要 AWS Lambda 是一种无服务器、事件驱动的计算服务，属于通常被称为 Function-as-a-S 阅读全文

posted @ 2026-03-16 20:14 vastdata 阅读(41) 评论(0) 推荐(0)

翻译: TernFS — 一个 EB 级、多地域分布式文件系统

摘要： 2025 年 9 月 XTX 是一家算法交易公司：我们构建统计模型，为全球超过 50,000 种金融工具生成价格预测。我们据此执行交易。随着 XTX 为了构建更优模型而持续加大研发投入，对算力与存储资源的需求也不断攀升。公司最初只有几台台式机和一台 NFS 服务器；10 年后，我们已发展到拥有数万阅读全文

posted @ 2026-03-16 10:38 vastdata 阅读(27) 评论(0) 推荐(0)

MinIO 技术原理深度剖析：从第一性原理拆解分布式对象存储

摘要：一、设计哲学：为什么 MinIO 长成这个样子理解 MinIO 的一切技术决策，需要先理解它的第一性原理——消灭一切不必要的间接层。传统分布式存储系统（HDFS、Ceph、GlusterFS）几乎都依赖一个集中式或半集中式的元数据服务：NameNode、MDS、etcd。这个组件承担了命名空间管阅读全文

posted @ 2026-03-13 16:54 vastdata 阅读(349) 评论(0) 推荐(0)

Google Colossus vs Facebook Tectonic：两大 EB 级分布式文件系统架构深度对比

摘要：本文深入剖析 Google Colossus 和 Facebook（Meta）Tectonic 两大 EB 级分布式文件系统的设计哲学，从架构演进、元数据管理、存储引擎、数据编码到多租户策略进行全方位对比分析。一、背景：为什么需要新一代文件系统？在 EB（Exabyte，百亿亿字节）级数据规模下阅读全文

posted @ 2026-03-13 16:43 vastdata 阅读(166) 评论(0) 推荐(0)

技术架构的轮回：从 Azure Direct Drive 看“云端帝国”的 Shared Nothing 反击战

摘要：在文章创一代与富二代在 Shared Nothing 和 Shared Disk 上的抉择里，我们发现一个规律，分布式系统的江湖里，一直存在着两条截然不同的路线, shared nothing 和 shared disk。开源社区和独角兽们的成名作——ScyllaDB、Cassandra、TiKV 阅读全文

posted @ 2026-03-13 16:38 vastdata 阅读(30) 评论(0) 推荐(0)

创一代与富二代在 Shared Nothing 和 Shared Disk 上的抉择

摘要：在分布式系统的江湖里，一直存在着两条截然不同的路线。如果你去看开源社区和独角兽们的成名作——ScyllaDB、Cassandra、TiKV、Ceph，以及最近大火的 DeepSeek 3FS，它们几乎清一色地选择了 Shared Nothing 架构。每个节点既是计算也是存储，守土有责，互不干涉，阅读全文

posted @ 2026-03-13 16:33 vastdata 阅读(42) 评论(0) 推荐(0)