08 2019 档案

使用Makefile构建Docker
摘要：使用Makefile构建Docker ===================== 刚开始学习docker命令的时候，很喜欢一个字一个字敲，因为这样会记住命令。后来熟悉了之后，每次想要做一些操作的时候就不得不 重复的输入以前的命令。当切换一个项目之后，又重复输入类似但又不完全相同的命令，仅仅通过his 阅读全文
posted @ 2019-08-27 08:57 Ryan.Miao 阅读(14071) 评论(0) 推荐(0)
调度系统Airflow1.10.4调研与介绍和docker安装
摘要：Airflow1.10.4介绍与安装 ===================== 现在是9102年，8月中旬。airflow当前版本是1.10.4. 随着公司调度任务增大，原有的，基于crontab和mysql的任务调度方案已经不太合适了，需要寻找一个可以支持分布式扩容的调度系统解决方案。 最初瞄准 阅读全文
posted @ 2019-08-26 08:46 Ryan.Miao 阅读(4006) 评论(0) 推荐(1)
vim基础命令，查找和替换
摘要：vim 基本命令查找和替换 ================== vim简单的命令用着还好。比如插入，删除，查询。但替换就用的比较少。所以，还是需要用的时候拿出来对照者看。 使用vim编辑文件： 进入之后的界面叫做命令模式界面。可以修改文件编辑的时候叫做插入模式。 (命令模式)冒号+指令 在vim命 阅读全文
posted @ 2019-08-23 19:36 Ryan.Miao 阅读(16222) 评论(1) 推荐(2)
定时清理docker私服镜像
摘要：定时清理docker私服镜像 =================== 使用CI构建docker镜像进行发布极大促进了大家的版本发布效率，于是镜像仓库也就急速膨胀。为了缓解磁盘压力，我们需要设置一些清理策略。 对于不同docker镜像的清理策略应该是不同的。比如，默认保留最近5个版本的镜像，对于工具类 阅读全文
posted @ 2019-08-22 11:31 Ryan.Miao 阅读(2710) 评论(0) 推荐(1)
如何使用Python连接ldap
摘要：如何使用Python连接ldap ==================== 好多使用ldap认证的软件都是Python的，比如superset和airflow， 好吧，他们都是airbnb家的。在配置ldap的时候可能会出现认证失败，你不知道是因为什么导致配置失败的。所以，就要 跟踪源码，看看内部怎 阅读全文
posted @ 2019-08-20 09:27 Ryan.Miao 阅读(6264) 评论(0) 推荐(0)
openldap介绍和使用
摘要：openldap介绍和使用 ================ 为什么会有本文？ 早期，公司是没有统一认证这个东西的，所以各自玩各自的。于是， confluence一个用户体系，gitlab一个用户体系，Jenkins一个用户体系等等， 开发中要用到的开源软件数不胜数，每个软件都要认证， 必须想办法统 阅读全文
posted @ 2019-08-16 09:16 Ryan.Miao 阅读(17924) 评论(3) 推荐(9)
给debian的docker容器添加crontab定时任务
摘要：现在大部分的docke镜像是基于debian Docker容器是不支持后台服务的，像systemctl service crontab这些后台运行的服务是不能通过 类似这种方案实现的，你必须写自己的entrypoint脚本来启动。本文记录了基于Debian的docker容器设置定时任务的方式。 案例 阅读全文
posted @ 2019-08-15 20:59 Ryan.Miao 阅读(4812) 评论(1) 推荐(0)
docker挂载volume的用户权限问题,理解docker容器的uid
摘要：docker挂载volume的用户权限问题,理解docker容器的uid 在刚开始使用docker volume挂载数据卷的时候，经常出现没有权限的问题。 这里通过遇到的问题来理解docker容器用户uid的使用，以及了解容器内外uid的映射关系。 遇到的问题 本地有一个node的项目需要编译，采用 阅读全文
posted @ 2019-08-02 14:36 Ryan.Miao 阅读(52066) 评论(2) 推荐(3)