JuiceFS

摘要： 这是 JuiceFS v1.0 正式发布前的第二个 beta 版本，共有 16 位社区伙伴贡献了 150+ 次提交 🎉。本次更新以 Bug 修复和稳定性提升为主，辅以大量的文档更新和测试用例优化，并带来了以下新功能： 一、新增：BadgerDB 作为元数据引擎 由社区开发者秦牧羊（@diluga） 阅读全文

摘要： 「一切皆文件」是 UNIX 的基本设计哲学。文件按照层级关系组织为树形目录，构成了文件系统 的基本形态。用户使用文件系统来保存数据时，不必关心数据底层的存储方式，便可以按照约定的接口规范进行访问。 概念篇 关于文件系统的接口规范，应用最为广泛的莫过于 POSIX，源于 IEEE 委员会编写的相关标准 阅读全文

摘要： 在我们线上的生产环境中要备份的东西很多，各种服务日志、数据库数据、用户上传数据、代码等等。用 JuiceFS 来备份可以节省你大量时间，我们会围绕这个主题写一系列的教程，整理出一套最佳实践，方便大家。 今天第一篇就写写最常用的 Nginx 日志备份。 如何用 JuiceFS 备份 Nginx 日志 阅读全文

摘要： 家住北京西二旗的小张是一家互联网金融公司的运维工程师，金融行业的数据可是很值钱的，任何的损坏和丢失都不能容忍。 为此，小张选了北京品质最高的机房，买了品质最好的硬件，做了全面的数据备份容灾策略： 每 24 小时做一次全量备份，每 1 小时做一次快照备份，还有每 5 分钟的增量备份。备份的数据存于专门 阅读全文

摘要： 背景 存储是大数据的基石，存储系统的元数据又是它的核心大脑，元数据的性能对整个大数据平台的性能和扩展能力非常关键。本文选取了大数据平台中 3 个典型的存储方案来压测元数据的性能，来个大比拼。 其中 HDFS 是被广为使用的大数据存储方案，已经经过十几年的沉淀和积累，是最合适的参考标杆。 以 Amaz 阅读全文

摘要： 一个高精度AI模型离不开大量的优质数据集，这些数据集往往由标注结果文件和海量的图片组成。在数据量比较大的情况下，模型训练周期也会相应加长。那么有什么加快训练速度的好方法呢？ 壕气的老板第一时间想到的通常是提升算力，增加资源。 如果足够有钱的话，基本不需要再继续看其他解决方案了。 但大多数情况下，面对 阅读全文

摘要： 背景 HDFS 是 Hadoop 生态的默认存储系统，很多数据分析和管理工具都是基于它的 API 设计和实现的。但 HDFS 是为传统机房设计的，在云上维护 HDFS 一点也不轻松，需要投入不少人力进行监控、调优、扩容、故障恢复等一系列事情，而且还费用高昂，成本可能是对象存储是十倍以上。 在存储与计 阅读全文

摘要： 理想汽车是中国新能源汽车制造商，设计、研发、制造和销售豪华智能电动汽车，于 2015 年 7 月创立，总部位于北京，已投产的自有生产基地位于江苏常州，通过产品创新及技术研发，为家庭用户提供安全及便捷的产品及服务。 在中国，理想汽车是成功实现增程式电动汽车商业化的先锋，首款及目前唯一一款商业化的增程式 阅读全文

摘要： 在 JuiceFS 开源一周年之际，我们迎来了首个里程碑版本 JuiceFS v1.0.0 Beta1，并将开源许可从 AGPL v3 修改为 Apache License 2.0。 JuiceFS v1.0.0 Beta1 是一个在生产环境中充分验证迭代的产物，在延续 JuiceFS 一贯开放、安 阅读全文

摘要： 开源一周年 JuiceFS 开始于 2017 年，是一款云原生分布式文件系统，旨在帮助企业解决多云、跨云、混合云环境下所面临的诸多挑战：数据安全和保护、大数据架构升级、海量小文件访问、Kubernetes 标准存储等。 JuiceFS 完全兼容 POSIX、HDFS、S3 访问协议，并提供 Kube 阅读全文