百里登风

导航

上一页 1 ··· 9 10 11 12 13 14 15 16 17 ··· 35 下一页

2019年11月21日

airflow删除dag不在页面显示

摘要: 当我们需要把dag删除的时候,遇到了删除了相应的dag文件,但页面还是显示 这个时候需要重启airflow 的webserver 阅读全文

posted @ 2019-11-21 10:40 百里登峰 阅读(814) 评论(0) 推荐(0) 编辑

2019年11月10日

26.Spark创建RDD集合

摘要: 打开eclipse创建maven项目 pom.xml文件 创建一个WordCountLocal.java文件 运行一下 集群执行wordcount程序 创建一个WordCountCluster.java文件 // 如果要在spark集群上运行,需要修改的,只有两个地方 // 第一,将SparkCon 阅读全文

posted @ 2019-11-10 15:47 百里登峰 阅读(690) 评论(0) 推荐(0) 编辑

2019年11月9日

25.Spark下载源码和安装和使用

摘要: 安装scala 上传安装包 解压 配置scala相关的环境变量 验证scala安装是否成功 把scala分发给node2 node3 node4 分别给node2 node3 node4配置scala的环境变量,并使其生效 spark安装包下载地址:https://archive.apache.or 阅读全文

posted @ 2019-11-09 18:00 百里登峰 阅读(1093) 评论(0) 推荐(0) 编辑

2019年10月20日

24.Azkaban调度脚本的编写

摘要: 启动azkaban 在启动了server和excutor之后,在浏览器打开azkaban,会发现不能打开,日志报这个错误 其实这个问题不难解决,在打开的时候建议用谷歌浏览器:地址是 https://192.168.86.131:8443/(https://你的ip:8433) 注意了,之前一直不能打 阅读全文

posted @ 2019-10-20 17:58 百里登峰 阅读(529) 评论(0) 推荐(0) 编辑

2019年10月18日

Docker 安装 Apache

摘要: 查找Docker Hub上的httpd镜像 拉取官方的镜像 使用apache镜像 创建目录apache,用于存放后面的相关东西 www目录将映射为apache容器配置的应用程序目录 logs目录将映射为apache容器的日志目录 conf目录里的配置文件将映射为apache容器的配置文件 运行容器 阅读全文

posted @ 2019-10-18 16:36 百里登峰 阅读(1716) 评论(0) 推荐(0) 编辑

Docker 安装 MongoDB

摘要: 查找Docker Hub上的mongo镜像 拉取官方的镜像,标签为3.2 等待下载完成后,我们就可以在本地镜像列表里查到REPOSITORY为mongo,标签为3.2的镜像 使用mongo镜像 创建目录mongo,用于存放后面的相关东西 db目录将映射为mongo容器配置的/data/db目录,作为 阅读全文

posted @ 2019-10-18 15:56 百里登峰 阅读(460) 评论(0) 推荐(0) 编辑

Docker 安装 Redis

摘要: 查找Docker Hub上的redis镜像 拉取官方的镜像,标签为3.2 等待下载完成后,我们就可以在本地镜像列表里查到REPOSITORY为redis,标签为3.2的镜像。 使用redis镜像 创建目录redis,用于存放后面的相关东西 data目录将映射为redis容器配置的/data目录,作为 阅读全文

posted @ 2019-10-18 14:58 百里登峰 阅读(232) 评论(0) 推荐(0) 编辑

Docker 安装 Python

摘要: 查找Docker Hub上的python镜像 拉取官方的镜像,标签为3.5 使用python镜像 创建目录python,用于存放后面的相关东西 myapp目录将映射为python容器配置的应用目录 在~/python/myapp目录下创建一个 helloworld.py 文件,代码如下: 运行容器 阅读全文

posted @ 2019-10-18 14:35 百里登峰 阅读(654) 评论(0) 推荐(0) 编辑

Docker 安装 Tomcat

摘要: 查找Docker Hub上的tomcat镜像 取官方的镜像 使用tomcat镜像 创建目录tomcat,用于存放后面的相关东西。 webapps目录将映射为tomcat容器配置的应用程序目录 logs目录将映射为tomcat容器的日志目录 conf目录里的配置文件将映射为tomcat容器的配置文件 阅读全文

posted @ 2019-10-18 13:57 百里登峰 阅读(351) 评论(0) 推荐(0) 编辑

Docker 安装 MySQL

摘要: 查找Docker Hub上的mysql镜像 拉取官方的镜像,标签为5.6 使用mysql镜像 创建目录mysql,用于存放后面的相关东西。 data目录将映射为mysql容器配置的数据文件存放路径 logs目录将映射为mysql容器的日志目录 conf目录里的配置文件将映射为mysql容器的配置文件 阅读全文

posted @ 2019-10-18 11:56 百里登峰 阅读(191) 评论(0) 推荐(0) 编辑

上一页 1 ··· 9 10 11 12 13 14 15 16 17 ··· 35 下一页