会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
JuiceFS
博客园
首页
新随笔
联系
订阅
管理
上一页
1
···
5
6
7
8
9
10
11
12
13
···
16
下一页
2023年5月26日
文件系统考古:1974-Unix V7 File System
摘要: 有时,进步难以察觉,特别是当你正身处其中时。而对比新旧资料之间的差异,寻找那些推动变革的信息源,我们就可以清晰地看到进步的发生。在Linux(以及大部分Unix系统)中,都可以印证这一点。 Unix V7 是 Unix 操作系统的一个重要的早期版本,于 1979 年发布,是贝尔实验室最后一个广泛分发
阅读全文
posted @ 2023-05-26 15:28 JuiceFS
阅读(304)
评论(0)
推荐(2)
2023年5月10日
从本地到云端:豆瓣统一的数据存储实践
摘要: 豆瓣成立于 2005 年,是中国最早的社交网站之一。在 2009 到 2019 的十年间,豆瓣数据平台经历了几轮变迁,形成了 DPark + Mesos + MooseFS 的架构。 由机房全面上云的过程中,原有这套架构并不能很好的利用云的特性,豆瓣需要做一次全面的重新选型,既要考虑未来十年的发展趋
阅读全文
posted @ 2023-05-10 16:01 JuiceFS
阅读(272)
评论(0)
推荐(0)
2023年5月6日
加速 AI 训练,如何在云上实现灵活的弹性吞吐
摘要: AI 已经成为各行各业软件研发的基础,带来了前所未有的效率和创新。今天,我们将分享苏锐在AWS量化投研行业活动的演讲实录,为大家介绍JuiceFS 在 AI 量化投研领域的应用经验,也希望为其他正在云上构建机器学习平台,面临热点数据吞吐不足的企业提供一些启发。 1. 背景 JuiceFS 最初是为了
阅读全文
posted @ 2023-05-06 14:25 JuiceFS
阅读(130)
评论(0)
推荐(0)
2023年4月26日
如何借助分布式存储 JuiceFS 加速 AI 模型训练
摘要: 传统的机器学习模型,数据集比较小,模型的算法也比较简单,使用单机存储,或者本地硬盘就足够了,像 JuiceFS 这样的分布式存储并不是必需品。 随着近几年深度学习的蓬勃发展,越来越多的团队开始遇到了单机存储的瓶颈,分布式存储在 AI 领域的重要性不断凸显。AI 团队通常会面临以下几种问题: 数据集太
阅读全文
posted @ 2023-04-26 16:25 JuiceFS
阅读(329)
评论(0)
推荐(0)
2023年4月4日
云上大数据存储:探究 JuiceFS 与 HDFS 的异同
摘要: HDFS 作为 Hadoop 提供存储组件,已经成为大数据生态里面数据存储最常用的选择,通常在机房环境部署。 JuiceFS 是一个基于对象存储的分布式文件系统,用户可以在云上快速地搭建按需扩容的弹性文件系统。 如果企业正在考虑在云上构建大数据平台,了解这两种产品的差异和优缺点,可以为企业迁移或切换
阅读全文
posted @ 2023-04-04 08:50 JuiceFS
阅读(516)
评论(0)
推荐(0)
2023年3月17日
存算分离实践:JuiceFS 在中国电信日均 PB 级数据场景的应用
摘要: 01- 大数据运营的挑战 & 升级思考 大数据运营面临的挑战 中国电信大数据集群每日数据量庞大,单个业务单日量级可达到 PB 级别,且存在大量过期数据(冷数据)、冗余数据,存储压力大;每个省公司都有自己的集群,以及多个收集全国各省级业务信息的集团大数据集群,导致数据分散冗余,省集群与集团集群数据无法
阅读全文
posted @ 2023-03-17 10:36 JuiceFS
阅读(466)
评论(0)
推荐(1)
2023年3月9日
浅析三款大规模分布式文件系统架构设计
摘要: 什么是文件系统 当提到文件系统,大部分人都很陌生。但我们每个人几乎每天都会使用到文件系统,比如大家打开 Windows、macOS 或者 Linux,不管是用资源管理器还是 Finder,都是在和文件系统打交道。如果大家有自己动手装过操作系统的话,第一次安装的时候一定会有一个步骤就是要格式化磁盘,格
阅读全文
posted @ 2023-03-09 13:12 JuiceFS
阅读(519)
评论(0)
推荐(0)
2023年3月3日
Sidecar-详解 JuiceFS CSI Driver 新模式
摘要: 近期发布的 JuiceFS CSI Driver v0.18 版本中,我们提供了一种全新的方式访问文件系统,即 JuiceFS 客户端以 Sidecar 方式运行于应用 Pod 中,且客户端与应用同生命周期。 这个全新的功能将帮助用户在 Serverless Kubernetes 环境中使用 Jui
阅读全文
posted @ 2023-03-03 14:11 JuiceFS
阅读(432)
评论(0)
推荐(0)
2023年2月17日
JuiceFS 在火山引擎边缘计算的应用实践
摘要: 火山引擎边缘云是以云计算基础技术和边缘异构算力结合网络为基础,构建在边缘大规模基础设施之上的云计算服务,形成以边缘位置的计算、网络、存储、安全、智能为核心能力的新一代分布式云计算解决方案。 01- 边缘场景存储挑战 边缘存储主要面向适配边缘计算的典型业务场景,如边缘渲染。火山引擎边缘渲染依托底层海量
阅读全文
posted @ 2023-02-17 14:30 JuiceFS
阅读(260)
评论(0)
推荐(0)
2023年2月10日
浅析 SeaweedFS 与 JuiceFS 架构异同
摘要: SeaweedFS 是一款高效的分布式文件存储系统,最早的设计原型参考了 Facebook 的 Haystack,具有快速读写小数据块的能力。本文将通过对比 SeaweedFS 与 JuiceFS 在设计与功能上的差异,以帮助读者进行更适合自己的选择。 SeaweedFS 系统结构 SeaweedF
阅读全文
posted @ 2023-02-10 14:28 JuiceFS
阅读(594)
评论(0)
推荐(0)
上一页
1
···
5
6
7
8
9
10
11
12
13
···
16
下一页
公告