随笔分类 -  其它

Debezium Incremental分析
摘要：简介 Incremental snapshotting提供了任意时间点可触发的快照同步、可中断恢复的快照、与流模式并行的快照，也提供了捕获新表快照的能力。 Debezium官方对增量快照设计解释 Netflix DBLog论文 配置使用 正常开启Source端抽取，只开启流模式，没有进行历史数据同步 阅读全文
posted @ 2022-03-28 17:17 meetzy 阅读(892) 评论(0) 推荐(0)
JAVA之读取SPSS(.sav)文件问题分享
摘要：起因 最近在看SPSS数据库怎么通过Java程序读取相关内容，然后发现大家都是通过使用一个叫做spss-reader的工具包，Maven的依赖如下: <dependency> <groupId>com.bedatadriven.spss</groupId> <artifactId>spss-read 阅读全文
posted @ 2022-02-21 14:48 meetzy 阅读(1090) 评论(2) 推荐(0)
Debezium Mysql to Postgres测试
摘要：简介 使用Benchmarksql-mysql来测试基于Debezium Mysql Connector跟Confluent Jdbc SinkConnector的数据同步链路 源端数据库为Mysql5.7 目标端数据库为Postgres13.5 准备环境 使用docker-compose vers 阅读全文
posted @ 2022-01-10 21:43 meetzy 阅读(448) 评论(7) 推荐(1)
Debezium Oracle 基于Logminer测试
摘要：准备docker镜像 只测试Source端数据抽取 使用oracle官方镜像 启动docker容器 docker run -d --name oracle12c-test container-registry.oracle.com/database/enterprise:12.2.0.1 如果本地没 阅读全文
posted @ 2022-01-10 21:31 meetzy 阅读(1817) 评论(3) 推荐(1)
Postgresql之备份软件
摘要：wal-g ./wal-g backup-push /home/highgo/pgdata/pg_wal/ --config=/home/highgo/wal-g/walg.json { "AWS_ACCESS_KEY_ID":"AKIAIOSFODNN7EXAMPLE", "AWS_SECRET_ 阅读全文
posted @ 2021-08-07 12:23 meetzy 阅读(133) 评论(0) 推荐(0)
Pgpoll之学习总结
摘要：简介 连接池 pgpool-II 保持已经连接到 PostgreSQL 服务器的连接，并在使用相同参数（例如：用户名，数据库，协议版本）连接进来时重用它们。它减少了连接开销，并增加了系统的总体吞吐量。 复制 pgpool-II 可以管理多个 PostgreSQL 服务器。激活复制功能并使在2台或者更 阅读全文
posted @ 2021-08-07 12:21 meetzy 阅读(279) 评论(0) 推荐(0)
Spring Security Oauth停止维护之迁移
摘要：去年 Spring Security OAuth 停止维护，所以之前的JAVA项目需要迁移到Spring Security下。 官方迁移指南 OAuth Server 可以使用第三方如Okta，目前Spring也在开发spring-authorization-server 主要注意事项 @Enabl 阅读全文
posted @ 2021-06-28 09:36 meetzy 阅读(1638) 评论(0) 推荐(1)
Mac上使用Charles对安卓10的APP进行抓包
摘要：简介 本文仅学习使用，由于安卓7以后对证书权限的收紧，我们没法直接对app进行https抓包，需要进行安装证书。由于安装系统的根证书需要root权限，所以本文采用虚拟xposed的方式。 准备 使用两个APP： 1. https://github.com/android-hacker/Virtual 阅读全文
posted @ 2021-03-12 21:00 meetzy 阅读(1526) 评论(0) 推荐(0)
HAProxy之体验总结
摘要：简介 HaProxy作为四层优秀的负载均衡服务 可以热更新有关配置 实现配置更新 TCP不中断 Haproxy转发性能稍高(zero copy的转发流程) 支持session保持，Cookie引导，可通过url检测后端服务器健康状态。 Haproxy 是单进程多线程模式，此模型支持非常大的并发连接数 阅读全文
posted @ 2021-01-10 12:17 meetzy 阅读(263) 评论(0) 推荐(0)
Win下安装RabbitMQ的cookie问题
摘要：之前在win上安装rabbit没有任何问题，但是这一次呢，遇到了一个错误，如下： 然后，网上找到的大部分解决方法是： 需要将windows目录下的erlang.cookie覆盖到用户下erlang.cookie，或者说让两者保持相同的内容，不过我没有在我的window目录下找到erlang.cook 阅读全文
posted @ 2018-05-23 17:51 meetzy 阅读(2394) 评论(1) 推荐(0)
Nginx简单的请求分发跟负载均衡
摘要：1.安装不同域名来进行分发 //两个server同时监听80端口，按照请求的域名进行分发，实例配置如下： server { listen 80; server_name a.test.com; location / { proxy_pass http://localhost:8080; proxy_ 阅读全文
posted @ 2018-03-14 10:15 meetzy 阅读(7468) 评论(2) 推荐(0)