摘要: MySQL 启动日志出现:World-writable config file '/etc/my.cnf.d/my.cnf' is ignored. 使用过程中没有用到自己的配置文件 show master status; 显示都是null 解决:自己写的配置文件权限太大 应该是赋予了777权限 将 阅读全文
posted @ 2021-08-23 15:12 —清风碎心— 阅读(158) 评论(0) 推荐(0) 编辑
摘要: Docker搭建MySQL服务 (读写分离之主库搭建) 提示:前要开启docker 不知道移步docker分类入门 拉取镜像docker pull percona:5.7.23 (percona:5.7.23)Orcal 发布的mysql版本 理解为mysql的一个分支就好了 检查镜像 docker 阅读全文
posted @ 2021-08-18 23:10 —清风碎心— 阅读(61) 评论(0) 推荐(0) 编辑
摘要: Docker安装 安装设置镜像源的依赖包 yum install -y yum-utils device-mapper-persistent-data lvm2 设置阿里云镜像源 yum-config-manager --add-repo https://mirrors.aliyun.com/doc 阅读全文
posted @ 2021-08-13 18:06 —清风碎心— 阅读(34) 评论(0) 推荐(0) 编辑
摘要: HBase Shell操作 基本操作 进入HBase客户端 bin/hbase shell 查看帮助 help 查看当前数据库中有哪些表 list 表的操作 创建表 create 'student','info' 格式 create '表名','列族' 插入数据到表 #格式 请求方式 '表名','行 阅读全文
posted @ 2021-08-12 10:13 —清风碎心— 阅读(33) 评论(0) 推荐(0) 编辑
摘要: HBase 简介理解 HBase是一个NoSQL数据库,一般我们用它来存储海量的数据(它基于HDFS分布式文件系统构建) HBase的一行记录由一个RowKey和一个或多个的列以及它的值所组成(先有列族后有列,列可以随意添加) HBase的增删改记录都有「版本」,默认以时间戳的方式实现 RowKey 阅读全文
posted @ 2021-08-11 17:21 —清风碎心— 阅读(60) 评论(0) 推荐(0) 编辑
摘要: Kafka 简介 下载地址:http://kafka.apache.org/downloads.html Kafka 是一个分布式基于发布/订阅模式的消息队列,主要用于大数据实时处理领域 Kafka 基础架构 Producer :消息生产者,就是向 kafka broker 发消息的客户端 Cons 阅读全文
posted @ 2021-08-06 16:15 —清风碎心— 阅读(23) 评论(0) 推荐(0) 编辑
摘要: Flume安装部署 地址 官网地址 文档查看地址 下载地址 解压安装 下载apache-flume-1.7.0-bin.tar.gz 上传到 /opt/software 目录 解压到 /opt/module/flume flume整体部署配置 将 flume/conf 下的 flume-env.sh 阅读全文
posted @ 2021-08-05 10:53 —清风碎心— 阅读(77) 评论(0) 推荐(0) 编辑
摘要: 运行日志信息配置 Hive的log默认位置为 /tmp/当前用户名/hive.log 修改Hive的log存放日志到/opt/modoule/hive/logs 修改 /opt/module/hive/conf/hive-log4j2.properties.template 为 hive-log4j 阅读全文
posted @ 2021-08-03 14:54 —清风碎心— 阅读(466) 评论(0) 推荐(0) 编辑
摘要: 错误信息: 修改hadoop 配置文件 etc/hadoop/core-site.xml,加入如下配置项 <!-- 表示设置 hadoop 的代理用户--> <property> <!--表示代理用户的组所属--> <name>hadoop.proxyuser.root.groups</name> 阅读全文
posted @ 2021-08-02 17:38 —清风碎心— 阅读(880) 评论(0) 推荐(0) 编辑
摘要: Hive 安装(第一种) Hive 官网地址 文档查看地址 下载地址 安装部署 上传、解压、改名 到opt/module/hive 添加环境变量 vim /etc/profile.d/my_env.sh 添加内容 #HIVE_HOME export HIVE_HOME=/opt/module/hiv 阅读全文
posted @ 2021-08-02 16:43 —清风碎心— 阅读(567) 评论(0) 推荐(0) 编辑