上一页 1 2 3 4 5 6 7 8 ··· 11 下一页
摘要: AI 已经成为各行各业软件研发的基础,带来了前所未有的效率和创新。今天,我们将分享苏锐在AWS量化投研行业活动的演讲实录,为大家介绍JuiceFS 在 AI 量化投研领域的应用经验,也希望为其他正在云上构建机器学习平台,面临热点数据吞吐不足的企业提供一些启发。 1. 背景 JuiceFS 最初是为了 阅读全文
posted @ 2023-05-06 14:26 JuiceFS 阅读(74) 评论(0) 推荐(0) 编辑
摘要: 传统的机器学习模型,数据集比较小,模型的算法也比较简单,使用单机存储,或者本地硬盘就足够了,像 JuiceFS 这样的分布式存储并不是必需品。 随着近几年深度学习的蓬勃发展,越来越多的团队开始遇到了单机存储的瓶颈,分布式存储在 AI 领域的重要性不断凸显。AI 团队通常会面临以下几种问题: 数据集太 阅读全文
posted @ 2023-04-26 16:26 JuiceFS 阅读(175) 评论(0) 推荐(0) 编辑
摘要: HDFS 作为 Hadoop 提供存储组件,已经成为大数据生态里面数据存储最常用的选择,通常在机房环境部署。 JuiceFS 是一个基于对象存储的分布式文件系统,用户可以在云上快速地搭建按需扩容的弹性文件系统。 如果企业正在考虑在云上构建大数据平台,了解这两种产品的差异和优缺点,可以为企业迁移或切换 阅读全文
posted @ 2023-04-04 08:51 JuiceFS 阅读(344) 评论(0) 推荐(0) 编辑
摘要: 01- 大数据运营的挑战 & 升级思考 大数据运营面临的挑战 中国电信大数据集群每日数据量庞大,单个业务单日量级可达到 PB 级别,且存在大量过期数据(冷数据)、冗余数据,存储压力大;每个省公司都有自己的集群,以及多个收集全国各省级业务信息的集团大数据集群,导致数据分散冗余,省集群与集团集群数据无法 阅读全文
posted @ 2023-03-17 10:36 JuiceFS 阅读(217) 评论(0) 推荐(1) 编辑
摘要: 什么是文件系统 当提到文件系统,大部分人都很陌生。但我们每个人几乎每天都会使用到文件系统,比如大家打开 Windows、macOS 或者 Linux,不管是用资源管理器还是 Finder,都是在和文件系统打交道。如果大家有自己动手装过操作系统的话,第一次安装的时候一定会有一个步骤就是要格式化磁盘,格 阅读全文
posted @ 2023-03-09 13:12 JuiceFS 阅读(286) 评论(0) 推荐(0) 编辑
摘要: 近期发布的 JuiceFS CSI Driver v0.18 版本中,我们提供了一种全新的方式访问文件系统,即 JuiceFS 客户端以 Sidecar 方式运行于应用 Pod 中,且客户端与应用同生命周期。 这个全新的功能将帮助用户在 Serverless Kubernetes 环境中使用 Jui 阅读全文
posted @ 2023-03-03 14:11 JuiceFS 阅读(270) 评论(0) 推荐(0) 编辑
摘要: 火山引擎边缘云是以云计算基础技术和边缘异构算力结合网络为基础,构建在边缘大规模基础设施之上的云计算服务,形成以边缘位置的计算、网络、存储、安全、智能为核心能力的新一代分布式云计算解决方案。 01- 边缘场景存储挑战 边缘存储主要面向适配边缘计算的典型业务场景,如边缘渲染。火山引擎边缘渲染依托底层海量 阅读全文
posted @ 2023-02-17 14:30 JuiceFS 阅读(117) 评论(0) 推荐(0) 编辑
摘要: SeaweedFS 是一款高效的分布式文件存储系统,最早的设计原型参考了 Facebook 的 Haystack,具有快速读写小数据块的能力。本文将通过对比 SeaweedFS 与 JuiceFS 在设计与功能上的差异,以帮助读者进行更适合自己的选择。 SeaweedFS 系统结构 SeaweedF 阅读全文
posted @ 2023-02-10 14:28 JuiceFS 阅读(289) 评论(0) 推荐(0) 编辑
摘要: WebDAV 是一种基于 HTTP 的文件共享协议,最初被设计用于多用户文档协作编辑的场景,也被广泛应用在基于互联网的文件存储、数据同步等网盘类应用场景。 手机端和 PC 端有大量的应用内置了对 WebDAV 的支持,比如知名的文献管理工具 Zotero、iPad 上流行的笔记工具 Notabili 阅读全文
posted @ 2023-02-01 15:47 JuiceFS 阅读(307) 评论(0) 推荐(0) 编辑
摘要: 最近火爆全网的 ChatGPT 再次带来一股 AI 热潮。 过去的五年,AI 快速发展并应用到很多领域中。作为一家存储企业,我们也感受到了 AI 行业的活力,和我们交流团队中,AI 企业越来越多,有自动驾驶、蛋白质结构预测、量化投资等不同行业。 AI 场景给数据存储带来新挑战,原有的存储方案并不能完 阅读全文
posted @ 2023-01-13 15:23 JuiceFS 阅读(581) 评论(0) 推荐(0) 编辑
上一页 1 2 3 4 5 6 7 8 ··· 11 下一页