2025年11月24日
摘要: 1.概述 Keepalived 是一个轻量级的高可用(High Availability, HA)解决方案,主要用于 Linux 系统。它通过实现 VRRP(Virtual Router Redundancy Protocol,虚拟路由冗余协议) 来提供服务的持续性和故障自动切换能力,从而避免单点故 阅读全文
posted @ 2025-11-24 16:41 自由港 阅读(7) 评论(0) 推荐(0)
  2025年11月22日
摘要: 1.概述 我们在部署 tendis 集群的时候,我们需要准备 6台机器,3主三从,当然 我们可以将他们部署同一台机器上,只要端口不一样就可以。 我们准备 6个文件夹 端口分别从 7001到 7006 2. 构建过程 2.1.准备6个文件夹 tendis1 tendis2 tendis3 tendis 阅读全文
posted @ 2025-11-22 15:51 自由港 阅读(8) 评论(0) 推荐(0)
  2025年11月21日
摘要: 我在编写一个 main 方法测试 ,某个方法时,会导致整个项目 install,需要等很久 ,解决办法 右键main 方法的运行箭头 点击 将 do not build before run 勾选上,这样再去运行 main 就不会触发 整个项目 install 了。 阅读全文
posted @ 2025-11-21 11:12 自由港 阅读(5) 评论(0) 推荐(0)
  2025年11月17日
摘要: 1.概述 classloader 的作用是加载字节码到jvm,有些情况下,我们比如使用插件模式,可能需要自定义从外部加载插件到jvm。这里还有一个需要注意的是java的双亲委派机制。 2.实现过程 2.1.定义自定义classloader package com.example.demo.loade 阅读全文
posted @ 2025-11-17 08:52 自由港 阅读(3) 评论(0) 推荐(0)
  2025年11月15日
摘要: 首先切换到 hadoop 用户下 su - hadoop 创建数据库 create database jpaas; 需要切换到有权限的用户下创建,比如我们现在使用 hadoop用户。 # 显示数据库 SHOW CREATE DATABASE jpaas; OK CREATE DATABASE `jp 阅读全文
posted @ 2025-11-15 11:29 自由港 阅读(2) 评论(0) 推荐(0)
  2025年11月13日
摘要: 1.概述 在使用源码构建后,我们需要将系统部署到服务器,本文就讲一下部署的过程。 部署前确认 已经安装好了 jdk. 安装了nginx 安装了 seatunnel 2.2.11 2.部署过程 2.1 构建项目 在项目的根目录下执行 build code. 构建完成后,我们可以看到 2.2将构建后的产 阅读全文
posted @ 2025-11-13 18:13 自由港 阅读(18) 评论(0) 推荐(0)
摘要: 1.概述 我们做好 setunnel web 配置后,我们就可以做开发数据同步了。 我们本次做一个最简单的数据同步,在两个数据库之间做数据同步 数据库为demo1 ,demo2 ,都有一张相同的表 demo1。 2.配置步骤 2.1 登录 首先访问 http://localhost:5173/ 默认 阅读全文
posted @ 2025-11-13 17:33 自由港 阅读(12) 评论(0) 推荐(0)
摘要: 1.概述 seatunnel 是一个实现数据库同步的执行引擎,但是他需要用户自己编写 同步定义文件。如果是一次执行需要使用命令执行同步,如果是集群部署,需要用户提交同步定义文件. seatunnel web 的作用: 通过在线设计同步文件 将设计提交到 seatunnel 执行 2.开发模式运行se 阅读全文
posted @ 2025-11-13 15:21 自由港 阅读(27) 评论(0) 推荐(0)
  2025年11月12日
摘要: 1. 概述 seatunnel 是一个数据同步平台,他可以在多种数据源之间实现数据同步,可以实现批处理同步,或者流处理同步,支持 flink,spark计算引擎。当前的版本是 2.3.12 2.部署安装 https://seatunnel.apache.org/zh-CN/download 下载最新 阅读全文
posted @ 2025-11-12 16:15 自由港 阅读(27) 评论(0) 推荐(0)
  2025年11月9日
摘要: 1.概述 Apache Avro 是一种 开源的、语言无关的、基于行的(row-based)数据序列化格式,由 Hadoop 项目开发,广泛用于大数据生态系统(如 Kafka、Spark、Flink、Hive 等)中,用于高效存储和传输结构化数据。 avro 是使用二进制存储 需要一个schema数 阅读全文
posted @ 2025-11-09 15:42 自由港 阅读(12) 评论(0) 推荐(0)