摘要: DRBD + keepalived实现文件实时同步和双机热备 安装DRBD 系统初始化设置 注意: 需要有数据盘或者多的分区 yum update -y 关闭防火墙 systemctl stop firewalld systemctl disable firewalld 修改host文件 vim / 阅读全文
posted @ 2024-04-09 16:42 蒲公英PGY 阅读(67) 评论(0) 推荐(0) 编辑
摘要: DataSophon更换zookeeper版本 平台默认集成的zookeeper版本为:zookeeper-3.5.10.tar.gz 更换为:zookeeper-3.8.0.tar.gz 下载地址:https://archive.apache.org/dist/zookeeper/zookeepe 阅读全文
posted @ 2023-12-22 14:27 蒲公英PGY 阅读(61) 评论(0) 推荐(0) 编辑
摘要: DataSophon集成StarRocks分析数据库 StarRocks官方文档: StarRocks | StarRocks StarRocks下载地址: Download StarRocks Free | StarRocks 选择自己要安装的版本下载,StarRocks-3.2.1.tar.gz 阅读全文
posted @ 2023-12-22 14:09 蒲公英PGY 阅读(359) 评论(0) 推荐(0) 编辑
摘要: postgresql数据库清理 大量update或者delete后 磁盘空间会猛增。原理是postgresql并没有真正的删除 只是将删除数据的状态置为已删除,该空间不能记录被从新使用。若是删除的记录位于表的末端,其所占用的空间将会被物理释放并归还操做系统。若是不是末端数据,该命令会将指定表或索引中 阅读全文
posted @ 2023-11-22 15:35 蒲公英PGY 阅读(808) 评论(0) 推荐(0) 编辑
摘要: python 递归上传文件到阿里云oss import os import oss2 import json # 阿里云 OSS 访问信息 access_key_id = 'xxxxxxxxx' access_key_secret = 'xxxxxxxxxxxxx' endpoint = 'xxxx 阅读全文
posted @ 2023-11-10 10:12 蒲公英PGY 阅读(65) 评论(0) 推荐(0) 编辑
摘要: postgresql批量修改表的owner postgresql中,对表的权限控制比较严格,很多事情只有owner才有权限去做。所以我们尽量用onwer账户去操作。 但是有的时候我们需求去批量修改owner,比如导入的表结构。但是官方并没有提供比较好的命令。 我们可以用拼接sql的方式去完成这个命令 阅读全文
posted @ 2023-11-08 17:05 蒲公英PGY 阅读(138) 评论(0) 推荐(0) 编辑
摘要: 有时因为网络原因,比如公司 NAT,或其它啥的,需要使用代理。Docker 的代理配置,略显复杂,因为有三种场景。但基本原理都是一致的,都是利用 Linux 的 http_proxy 等环境变量。 Dockerd 代理 在执行docker pull时,是由守护进程dockerd来执行。因此,代理需要 阅读全文
posted @ 2023-10-26 17:31 蒲公英PGY 阅读(1377) 评论(0) 推荐(0) 编辑
摘要: StarRocks + prometheus+grafana 监控 StarRocks提供两种监控报警的方案,第一种是使用内置的StarRocks Manager,其自带的Agent从各个Host采集监控信息上报到Center Service然后做可视化展示,也提供了邮件和Webhook的方式发送报 阅读全文
posted @ 2023-10-08 15:01 蒲公英PGY 阅读(252) 评论(0) 推荐(0) 编辑
摘要: ambari集成starrocks 创建服务目录 cd /var/lib/ambari-server/resources/stacks/HDP/3.1/services/ mkdir SERVERNAME # 服务名称目录必须大写 整体目录结构 . ├── configuration │ └── s 阅读全文
posted @ 2023-09-26 15:32 蒲公英PGY 阅读(102) 评论(0) 推荐(0) 编辑
摘要: 分片上传和断点续传是常见于文件上传至云存储服务的操作,其中OSS (Object Storage Service) 是阿里云提供的云存储服务。Python 可以用来实现分片上传和断点续传到阿里云 OSS。下面是一个简单的示例,演示了如何使用 Python 和阿里云 OSS SDK 进行分片上传和断点 阅读全文
posted @ 2023-09-14 14:31 蒲公英PGY 阅读(168) 评论(0) 推荐(0) 编辑