摘要: 启动 be的时候出现job aborted; 查看日志 be.WARNNING,发现有下面的bug, W0708 01:33:16.123397 9919 cidr.cpp:75] wrong CIDR IP value. network= F0708 01:33:16.123462 9919 ba 阅读全文
posted @ 2023-07-08 17:50 递茶大户 阅读(1249) 评论(0) 推荐(0) 编辑
摘要: Docker-compose部署kafka 1. 配置docker-compose.yml version: '3' services: zookeeper: image: wurstmeister/zookeeper ports: - "2181:2181" kafka: image: wurst 阅读全文
posted @ 2022-08-25 16:32 递茶大户 阅读(313) 评论(0) 推荐(0) 编辑
摘要: Ubuntu下使用国内源安装Docker 1. 卸载已经存在的docker sudo apt remove docker-desktop 2. 清理残余文件 rm -r $HOME/.docker/desktop sudo rm /usr/local/bin/com.docker.cli sudo 阅读全文
posted @ 2022-08-25 16:31 递茶大户 阅读(547) 评论(0) 推荐(0) 编辑
摘要: BUG如下: PS D:\Projects\flink_bytedance\word-count-master> go get github.com/segmentio/kafka-go go: github.com/Shopify/sarama@v1.35.0: Get "https://prox 阅读全文
posted @ 2022-08-12 11:08 递茶大户 阅读(108) 评论(0) 推荐(0) 编辑
摘要: kafka单机环境搭建及其基本使用 1. 环境搭建 1.1 解压下载的kafka压缩包 [root@sam01 sam]# tar -zxvf kafka_2.11-0.11.0.0.tgz -C /usr/local 1.2 将解压到的kafka文件夹进行改名 [root@sam01 sam]#m 阅读全文
posted @ 2022-08-06 21:14 递茶大户 阅读(369) 评论(0) 推荐(0) 编辑
摘要: 1. 问题描述 1.1 在Linux安装完mysql后,尝试用命令systemctl start mysqld出现错误,Job for mysqld.service failed because the control process exited with error code. See "sys 阅读全文
posted @ 2022-05-19 21:31 递茶大户 阅读(291) 评论(0) 推荐(0) 编辑
摘要: 启动Hive之前要先启动hdfs与yarn 阅读全文
posted @ 2022-05-10 20:59 递茶大户 阅读(227) 评论(0) 推荐(0) 编辑
摘要: 1. 环境:mysql 8.0.28、mysql驱动5.1.17 2. BUG描述:使用spark连接mysql出现错误 2.1 spark连接mysql语句 //TODO 创建SparkSQL的运行环境 val sparkConf = new SparkConf().setMaster("loca 阅读全文
posted @ 2022-05-09 11:17 递茶大户 阅读(128) 评论(0) 推荐(0) 编辑
摘要: 1. 环境:maven 3.6.3、spark-core_2.12-3.2.1、Java1.8 2. 问题描述 2.1 设置了log4j.properties,目的是将只将运行结果和ERROR的信息打印在控制台,但不起作用 2.2 log4j.properties log4j.rootCategor 阅读全文
posted @ 2022-04-24 15:00 递茶大户 阅读(1546) 评论(0) 推荐(0) 编辑
摘要: 出现以下错误提示 Exception in thread "main" java.io.NotSerializableException: com.sam.bigdata.spark.core.test.Task at java.io.ObjectOutputStream.writeObject0( 阅读全文
posted @ 2022-04-05 14:16 递茶大户 阅读(45) 评论(0) 推荐(0) 编辑