上一页 1 ··· 16 17 18 19 20 21 22 23 24 ··· 31 下一页
摘要: 问题1:Failed to commit txn 4102465(Flink sink SR) 查看flink日志报错如下: 2021-09-12 09:22:04,652 ERROR com.dorisdb.connector.flink.manager.DorisStreamLoadVisito 阅读全文
posted @ 2021-09-13 11:22 民宿 阅读(4308) 评论(1) 推荐(1)
摘要: 使用命令find / -name libmysqlclient.so*查询libmysqlclient.so,发现确实缺少libmysqlclient.so.18 1、到mysql官网(https://downloads.mysql.com/archives/community/)下载安装包 [ro 阅读全文
posted @ 2021-09-13 09:51 民宿 阅读(438) 评论(0) 推荐(0)
摘要: 通过命令du -h --max-depth=1 *,可以查看当前目录下各文件、文件夹的大小。 通过命令du -h --max-depth=1 ,可以查看当前目录下各文件夹的大小。 查询当前目录总大小可以使用du -sh,其中s代表统计汇总的意思,即只输出一个总和大小。 如果只想查看指定目录的总大小, 阅读全文
posted @ 2021-09-06 13:07 民宿 阅读(231) 评论(0) 推荐(0)
摘要: 如果对MySQL熟悉的话,或许你应该听说过InnoDB和MyISAM存储引擎。不同的存储引擎提供不同的存储机制、索引方式、锁定水平等功能,也可以称之为表类型。ClickHouse提供了丰富的表引擎,这些不同的表引擎也代表着不同的表类型。比如数据表拥有何种特性、数据以何种形式被存储以及如何被加载。本文 阅读全文
posted @ 2021-08-26 12:03 民宿 阅读(2397) 评论(0) 推荐(1)
摘要: 目录 /var/log/cloudera-scm-installer : 安装日志目录。 /var/log/* : 相关日志文件(相关服务的及CM的)。 /usr/share/cmf/ : 程序安装目录。 /usr/lib64/cmf/ : Agent程序代码。 /var/lib/cloudera- 阅读全文
posted @ 2021-08-26 09:58 民宿 阅读(281) 评论(0) 推荐(0)
摘要: 由于同步一些表报错,所以导致checkpoint不生效,本次错误是代码问题。 多线程sink多张表,如果一个失败,其他成功,checkpoint无法生效。 阅读全文
posted @ 2021-08-25 17:40 民宿 阅读(351) 评论(0) 推荐(0)
摘要: 概述Maxwell 针对与MySQL做实时数据同步的一个开源中间件,监控MySQL binlog日志并记录每行的操作记录(insert,update,delete)。它设计的初衷是实时采集Mysql数据到Kafka,它是Kafka的Producer。 支持全表load数据 支持自动断点还原 支持按照 阅读全文
posted @ 2021-08-24 17:03 民宿 阅读(1058) 评论(0) 推荐(0)
摘要: 一、Kafka压力测试 创建一个只有1个分区的topic,测试这个topic的producer吞吐量和consumer吞吐量,假设他们的值分别是Tp和Tc,单位可以是MB/s,然后假设总的目标吞吐量是Tt,那么分区数=Tt/max(Tp,Tc) 1)Kafka压测 用Kafka官方自带的脚本,对Ka 阅读全文
posted @ 2021-08-24 10:54 民宿 阅读(2646) 评论(0) 推荐(0)
摘要: kafka的两个配置listeners和advertised.listeners listeners kafka监听的网卡的ip,假设你机器上有两张网卡,内网192.168.0.213和外网101.89.163.1 如下配置 listeners=PLAINTEXT://192.168.0.213:9 阅读全文
posted @ 2021-08-24 10:42 民宿 阅读(5560) 评论(0) 推荐(1)
摘要: 问题现象impala将数据写入kudu中入到如下的报错信息: Error in Kudu table 'impala::br_dw_dev.tbl_sys_article': Invalid argument: value too large for column 'content' (69942 阅读全文
posted @ 2021-08-19 09:42 民宿 阅读(585) 评论(0) 推荐(0)
上一页 1 ··· 16 17 18 19 20 21 22 23 24 ··· 31 下一页