楔子

摘要： 1）下载https://www.apache.org/dyn/closer.lua/zookeeper/ 我这边下载的是apache-zookeeper-3.6.2-bin.tar.gz 上传至服务器，解压更名为zookeeper 2）在zookeeeper目录下创建data目录 cd data e 阅读全文

摘要： Hadoop集群安装参考： https://www.cnblogs.com/kopao/p/14312108.html Hive安装 一、从https://mirror.bit.edu.cn/apache/hive/下载hive，并上传到服务器上 我这里用的是 apache-hive-3.1.2-b 阅读全文

摘要： 1）WebUI上只显示了一个datanode 排查原因了下： 3台机器上 /home/hadoop/software/hadoop/dfs/data/current/VERSION都是一样的 解决办法 删除 /home/hadoop/software/hadoop/dfs/data下的数据 重启集群 阅读全文

摘要： 一、 集群规划 hostname ip hdfs yarn hadoop01 192.168.31.5 namenode、datanode nodemanager hadoop02 192.168.31.6 datanode resourcemanager、nodemanager hadoop03 阅读全文

摘要： 方法一：使用yum安装 1）使用yum -y list java*查看可以安装哪些版本 2）安装指定版本的jdk yum install -y java-1.8.0-openjdk-devel.x86_64 3) 查看安装结果 java -version 4) 查看jdk安装路径 which jav 阅读全文

摘要： 1）设置网络连接为桥接模式，如下图 2）查看本地IP相关信息 ipconfig 3)配置linux上机器ip cd /etc/sysconfig/network-scripts vi ifcfg-eno16777736 根据window上的IP、网关设置 设置完成后，保存，重启网络：service 阅读全文

摘要： 原始数据如下： 转换后效果： 实现方式： -- 原数据 SELECT '[{"slot_seq":"1","status":"0","battery_sn":"K212EV14C3"},{"slot_seq":"10","status":"0","battery_sn":"K482GE13RT"}, 阅读全文

摘要： ClickHouse 20.8将新增 MaterializeMySQL引擎 ,可通过binlog日志实时物化mysql数据，极大提升了数仓的查询性能和数据同步的时效性；原有mysql中承担的数据分析工作 可交由clickhouse去做，这么做可显著降低线上mysql的负载，从此OLTP与OLAP业务 阅读全文

摘要： hive --hiveconf hive.root.logger=DEBUG,console 阅读全文

摘要： ClickHouse的介绍这里不做描述，网上很多，可以参考书籍《ClickHouse原理解析与应用实践》 1）使用client链接server：clickhouse-client clickhouser -- help 查看命令帮助 客户端常用参数 -- host ,-h 说明：服务端的host名称 阅读全文