2019年6月11日
摘要:1、创建脚本文件 内容如下: 2、给脚本文件授权 3、执行脚本 阅读全文
posted @ 2019-06-11 10:47 末 阅读(1502) 评论(0) 推荐(1) 编辑
  2019年5月10日
摘要:1、在官网拉取镜像 2、根据镜像启动zookeeper容器 3、启动zookeeper集群命令行 然后就可以使用了。 阅读全文
posted @ 2019-05-10 11:05 末 阅读(890) 评论(1) 推荐(1) 编辑
  2019年4月8日
摘要:报错如下: 一直是不能创建bean的样子,经过检查发现mybatis的映射xml文件居然没有找到,发现classes目录果然没有*.xml,在pom文件中加入了如下代码,问题成功解决。 阅读全文
posted @ 2019-04-08 11:09 末 阅读(1447) 评论(1) 推荐(0) 编辑
  2019年2月15日
摘要:1、创建Dockerfile文件,内容如下 2、在Dockerfile所在目录下构建镜像 3、启动主节点 4、启动从节点 5、浏览器访问 6、启动spark-shell客户端 其中 99306051a9d4 是 spark-master 的容器ID 7、spark-shell测试 阅读全文
posted @ 2019-02-15 15:09 末 阅读(3867) 评论(1) 推荐(1) 编辑
摘要:一、yum卸载、安装 1、卸载老版本的 docker 及其相关依赖 2、安装 yum-utils,它提供了 yum-config-manager,可用来管理yum源 3、添加yum源 4、更新yum索引 5、安装 docker-ce 6、启动 docker 7、验证是否安装成功 8、安装指定版本的D 阅读全文
posted @ 2019-02-15 14:29 末 阅读(254) 评论(0) 推荐(0) 编辑
  2019年2月13日
摘要:第一步:安装samba服务 yum install samba 第二步:启动samba服务 systemctl start smb 查看samba的状态 systemctl status smb 看到Active就说明在运行中了 第三步:关闭防火墙 systemctl stop firewalld. 阅读全文
posted @ 2019-02-13 15:03 末 阅读(7566) 评论(0) 推荐(0) 编辑
  2019年1月20日
摘要:一、mysql作为数据源 mysql数据: 二、Spark写出数据格式 三、Json作为数据源 四、Csv作为数据源 阅读全文
posted @ 2019-01-20 23:32 末 阅读(557) 评论(0) 推荐(0) 编辑
摘要:一、SparkSQL介绍 二、DataFrame介绍 三、SQL风格 1、SqlTest1 2、user.txt 3、结果 四、toDF使用 五、DSL风格 结果: 六、WordCount 1、SqlWordCount 2、words.txt 3、结果 七、Join操作 1、JoinDemo 2、结 阅读全文
posted @ 2019-01-20 23:03 末 阅读(286) 评论(0) 推荐(0) 编辑
  2019年1月19日
摘要:一、自定义排序规则-封装类 结果: 二、 二、自定义排序规则-模式匹配 结果: 三、 三、自定义排序规则-隐式转换 结果: 阅读全文
posted @ 2019-01-19 23:54 末 阅读(1045) 评论(0) 推荐(0) 编辑
摘要:一、Cache缓存操作 二、Checpoint机制 阅读全文
posted @ 2019-01-19 23:42 末 阅读(251) 评论(0) 推荐(0) 编辑