02 2023 档案

开源分布式存储
摘要：开源分布式存储技术分享-施继成 达坦科技 sky computing 和 全球性分布式 左边是raft,右边是最开始的paxos RRT=Round-Trip Time 如果leader和follower放在不同的数据中心，由于需要两个RRT，这个时间就更长了了，latency就更大了（2个RRT在 阅读全文
posted @ 2023-02-11 17:21 韦你而得 阅读(164) 评论(0) 推荐(0)
fuse学习1
摘要：https://mp.weixin.qq.com/s/HvbMxNiVudjNPRgYC8nXyg FUSE 框架就是内核开发者为了日益多样的用户需求开发出来的，使得用户态程序参与到 IO 路径的处理成为可能； FUSE 框架的 3 大组件分别是：内核 fuse 模块，用户态 libfuse 库， 阅读全文
posted @ 2023-02-11 17:13 韦你而得 阅读(249) 评论(0) 推荐(0)
Fuse学习
摘要：https://github.com/juicedata/go-fuse FUSE概述 FUSE（用户态文件系统）是一个实现在用户空间的文件系统框架，通过FUSE内核模块的支持，使用者只需要根据fuse提供的接口实现具体的文件操作就可以实现一个文件系统。 在fuse出现以前，Linux中的文件系统都 阅读全文
posted @ 2023-02-11 17:11 韦你而得 阅读(229) 评论(0) 推荐(0)
filestash初识
摘要：https://github.com/mickael-kerjean/filestash https://www.filestash.app/2018/05/31/release-note-v0.1/ https://www.filestash.app/docs/ 自己本地装好像只支持docker 阅读全文
posted @ 2023-02-11 17:10 韦你而得 阅读(269) 评论(0) 推荐(0)
juicefs
摘要：社区版文档： https://juicefs.com/docs/zh/community/introduction/ macOS 系统​ 由于 macOS 默认不支持 FUSE 接口，需要先安装 macFUSE 实现对 FUSE 的支持。 提示 macFUSE 是一个开源的文件系统增强工具，它让 m 阅读全文
posted @ 2023-02-11 17:08 韦你而得 阅读(354) 评论(0) 推荐(0)
在Windows上如何后台运行JuiceFS
摘要：https://cloud.tencent.com/developer/article/1967583 背景&解决方案 JuiceFS的Badger引擎改造完成以后，需要在Windows下面进行后台运行。因为现有的JuiceFS中还没有在Windows下的后台运行实现，所以需要通过其他途径解决。 现 阅读全文
posted @ 2023-02-11 17:07 韦你而得 阅读(266) 评论(0) 推荐(0)
juicefs源码1
摘要：https://cloud.tencent.com/developer/article/1849514 使用 JuiceFS，文件最终会被拆分成 Chunks、Slices 和 Blocks 存储在对象存储。因此，你会发现在对象存储平台的文件浏览器中找不到存入 JuiceFS 的源文件，存储桶中只有 阅读全文
posted @ 2023-02-11 17:06 韦你而得 阅读(117) 评论(0) 推荐(0)
juicefs debug ls看源码
摘要：断点 挂载后，在桶的根目录执行命令行 ls go-fuse库(server.go)::readRequest->handleRequest(这个时候handler是READDIRPLUS)-> go-fuse库(opcode.go)::doReadDirPlus juicefs代码(fuse.go) 阅读全文
posted @ 2023-02-11 17:04 韦你而得 阅读(148) 评论(0) 推荐(0)
juicefs debug echo看源码
摘要：断点 挂载后，在桶的根目录执行命令行 echo "11111" > /mnt/s3/333.txt go-fuse库(server.go)::readRequest->handleRequest(这个时候handler是CREATE)-> go-fuse库(opcode.go)::doCreate 阅读全文
posted @ 2023-02-11 17:03 韦你而得 阅读(179) 评论(0) 推荐(0)
juicefs debug mount启动看源码
摘要：main.go里面importcmd包和utils包 通过多个init()函数首先注册各种元数据组件 下面以redis为例 func init() { Register("redis", newRedisMeta) Register("rediss", newRedisMeta) Register( 阅读全文
posted @ 2023-02-11 17:01 韦你而得 阅读(85) 评论(0) 推荐(0)
linux安装goofys
摘要：wget https://github.com/kahing/goofys/releases/latest/download/goofys chmod +x goofys mkdir /opt/goofys mkdir ~/.aws vi ~/.aws/credentials [default] a 阅读全文
posted @ 2023-02-11 17:00 韦你而得 阅读(171) 评论(0) 推荐(0)
goofys+NFS练手
摘要：https://blog.csdn.net/weixin_43582081/article/details/123932105 https://blog.csdn.net/liaomingwu/article/details/124313289 安装goofys可以参考<<linux安装goofys 阅读全文
posted @ 2023-02-11 16:58 韦你而得 阅读(76) 评论(0) 推荐(0)
s3fsuse+NFS练手
摘要：Linux7 vim ${HOME}/.aws/credentials [default] aws_access_key_id = oeosadmin aws_secret_access_key = oeosadmin yum install s3fs-fuse mkdir /mnt/s3fs ch 阅读全文
posted @ 2023-02-11 16:57 韦你而得 阅读(54) 评论(0) 推荐(0)