XxIJob入门-示例
摘要：
一、部署 xxlJob (一) 下载地址， git clone 到本地。 http://gitee.com/xuxueli0323/xxl-job https://github.com/xuxueli/xxl-job (二) 插入 xxl_job 的sql脚本： 在项目的 /xxl-job/doc/ 阅读全文
posted @ 2023-12-26 00:43 乐之者v 阅读(251) 评论(0) 推荐(0)
kafka入门(四)：kafka生产者发送消息
摘要：
构建消息 构建消息，即创建 ProduceRecord 对象。 (1) kafka发送消息，最常见的构造方法是： public ProducerRecord(String topic,V value) topic 表示主题， value 表示值。 (2) kafka发送消息指定key，Produce 阅读全文
posted @ 2023-12-17 22:51 乐之者v 阅读(326) 评论(0) 推荐(0)
kafka rebalance(再均衡)导致的消息积压分析
摘要：
起因： 某天，项目组收到大量的kafka消息积压告警。查看了kafka日志后，发现 kafka不断地 rebalance(再均衡)。 Rebalance (再均衡)： 分区的所有权从一个消费者转移到另一个消费者，这样的行为被称为Rebalance (再均衡). 在再均衡期间，消费者无法消费消息，造成 阅读全文
posted @ 2023-12-11 23:08 乐之者v 阅读(655) 评论(0) 推荐(0)
kafka入门(二)：消费者
摘要：
消费者 (Consumer ) 消费者 订阅 Kafka 中的主题 (Topic) ，并 拉取消息， 消费消息，提交位移(offset)。 消费者 订阅 Topic > 拉取消息 > 消费消息 > 提交位移 消费者群组（ Consumer Group） 每一个消费者都有一个对应的 消费者群组。 一个 阅读全文
posted @ 2023-12-10 23:03 乐之者v 阅读(39) 评论(0) 推荐(0)
DataGrip 导出数据
摘要：
第一种、Execute To File 选中 sql 语句，右键，选择 Execute To File 。 Executor 格式， 可以选择 导出 Insert Sql， 也可以选择导出 Excel 。 第二种： Export Data 查询出 sql 语句的结果， 然后右键表格，选择 Expor 阅读全文
posted @ 2023-12-08 22:33 乐之者v 阅读(1808) 评论(0) 推荐(1)
kafka入门(三)：kafka多线程消费
摘要：
kafka消费积压 如果生产者发送消息的速度过快，或者是消费者处理消息的速度太慢，那么就会有越来越多的消息无法及时消费，也就是消费积压。 消费积压时， (1) 可以增加Topic的分区数，并且增加消费组的消费者数量，让消费者数等于分区数。 (2) 还可以使用多线程消费，提高消费速度。 kafka多线 阅读全文
posted @ 2023-12-05 23:21 乐之者v 阅读(410) 评论(0) 推荐(0)
kafka入门(五)： 位移提交
摘要：
位移提交： Kafka的每条消息都有唯一的 offset， 用来表示消息在分区中对应的位置。有的也称之为 "偏移量"。 消费者每次在 poll() 拉取消息，它要返回的是还没有消费过的消息集， 因此，需要记录上一次消费时的消费位移，并且持久化。 消费者在消费完消息之后，需要执行消费位移的提交。 自动 阅读全文
posted @ 2023-11-25 21:17 乐之者v 阅读(172) 评论(0) 推荐(0)
kafka入门(一)：kafka消息发送与消费
摘要：
kafka的基础概念 Producer (消息生产者) 向主题发布消息的客户端应用程序称为生产者(Producer)，生产者用于持续不断的向某个主题发送消息。 Consumer (消息消费者) 订阅主题消息的客户端程序称为消费者(Consumer)，消费者用于处理生产者产生的消息。 Consumer 阅读全文
posted @ 2023-11-18 22:27 乐之者v 阅读(120) 评论(0) 推荐(0)
IDEA屏蔽日志/过滤日志
摘要：
IDEA屏蔽日志/过滤日志 一、安装插件 Grep Console 二、设置关键词，过滤日志 关键词的前后加上 .* 符号，类似： .*关键词.* 设置后 ，点击 Apply 即可过滤日志。 阅读全文
posted @ 2023-11-18 21:16 乐之者v 阅读(1810) 评论(0) 推荐(0)
浙公网安备 33010602011771号