摘要: 我在使用 Structured Streaming 的 ForeachWriter,写 HDFS 文件时,出现了这个异常 这个异常出现的原因是HDFS作为一个分布式文件系统,支持多线程读,但是不支持多线程写入。所以HDFS引入了一个时间类型的锁机制,也就是HDFS的租约机制( lease holde 阅读全文
posted @ 2019-11-07 20:10 旻天Clock 阅读(1996) 评论(1) 推荐(0) 编辑
摘要: 思维导图 预计阅读时间:30min 阅读书籍 《深入理解计算机系统 第五版》 参考视频 【精校中英字幕】2015 CMU 15-213 CSAPP 深入理解计算机系统 课程视频 参考文章 《深入理解计算机系统(2.1) 信息的存储与值的计算》 《深入理解计算机系统(2.2) 布尔代数以及C语言上的位 阅读全文
posted @ 2020-09-14 12:19 旻天Clock 阅读(525) 评论(0) 推荐(0) 编辑
摘要: 由于一些原因,本人将博客迁移到了知乎和微信公众平台。 公众号 “就叫旻天吧” 欢迎关注。 定制化公众号需要后端服务器支持,所以选择了这款体验友好永久免费的阿贝云免费云服务器。现在使用,可通过 https://www.abeiyun.com 申请。 阿贝云使用一周,效果良好,足够满足个人公众号的开发和 阅读全文
posted @ 2020-08-28 10:33 旻天Clock 阅读(184) 评论(0) 推荐(0) 编辑
摘要: 思维导图 预计阅读时间:15min 阅读书籍 《深入理解计算机系统》 参考视频 【精校中英字幕】2015 CMU 15-213 CSAPP 深入理解计算机系统 课程视频 参考文章 《深入理解计算机系统(1.1) 计算机概述》 《深入理解计算机系统(1.2) hello world的程序是如何运行的》 阅读全文
posted @ 2020-08-18 09:42 旻天Clock 阅读(397) 评论(2) 推荐(0) 编辑
摘要: 一、前言 在近期的 K8S 开发调试的过程中,总会想知道 Node 或者 Pod 的更多信息。但 中的 top 操作符,需要 metrics 服务的支持。 同理,DashBoard UI 也需要通过 metrics 获得资源使用状态。 所以,盘他没商量。。。 二、版本介绍 OS_VERSION = 阅读全文
posted @ 2020-04-02 18:31 旻天Clock 阅读(721) 评论(0) 推荐(0) 编辑
摘要: 这篇开始深入了解 Kubernetes 的工作原理和实现方式。 十一. 了解 Kubernetes 机理 11.1 了解架构 Master 控制组件 | 工作节点组件 | 附加组件 : : | : : | : : (Kubelet) | Kubelet | DNS 服务器 API 服务器 | 容器运 阅读全文
posted @ 2020-02-20 23:06 旻天Clock 阅读(1037) 评论(0) 推荐(0) 编辑
摘要: 六. 挂载卷 Volume 通过学习前五章,我们已经可以部署一个安全稳定的临时应用程序了。为什么说是临时的应用程序呢? 众所周知,程序=代码+数据,现在代码已经可以运行并提供服务,同时可以产生或读取数据了,但每次重启服务或者 K8S 帮助我们调度 Pod 导致容器重启以后,之前运行的一些有价值无价值 阅读全文
posted @ 2020-02-12 08:25 旻天Clock 阅读(2537) 评论(0) 推荐(1) 编辑
摘要: 一. K8S 介绍 Kubernetes 是一个自动调度(位置)、配置(资源)、监管和故障处理 的系统。 说到为何推广微服务,就要说说单体应用的危害: 扩容复杂(通常垂直扩容) 环境依赖复杂(动态链接库版本太多) 开发语言不灵活 迁移成本巨大(环境难统一) 原文地址 "https://www.cnb 阅读全文
posted @ 2020-02-08 13:48 旻天Clock 阅读(4251) 评论(0) 推荐(3) 编辑
摘要: 一、环境准备 1.1 安装 Docker ce 一键式下载安装 https://docs.docker.com/docker for mac/install/ 1.2 安装 MiniKube 官网 https://kubernetes.io/docs/tasks/tools/install mini 阅读全文
posted @ 2020-01-14 11:11 旻天Clock 阅读(347) 评论(1) 推荐(1) 编辑
摘要: 介绍 最近经历了一些事情,亲戚、朋友和领导最近都提起来了一个名词 ———— “核心竞争力”。 那么什么是核心竞争力,为何需要培养自己的核心竞争力,又如何培养自己的核心竞争力,我将在下文一一描述。 原文地址 "https://www.cnblogs.com/clockq/p/10542549.html 阅读全文
posted @ 2019-03-16 15:40 旻天Clock 阅读(776) 评论(2) 推荐(0) 编辑