随笔分类 -  系统运维linux

摘要:🔧 达梦数据库高可用集群部署方案 (CentOS 8, 6节点) 📝 方案概述 本方案旨在在6台同网段CentOS 8服务器上部署达梦DM8数据库集群,结合MPP架构提升并行处理性能,并通过DataWatch机制确保数据高可用性。集群规划为两个MPP分组,每组包含一个主库和一个备库,同时配置两个 阅读全文
posted @ 2025-09-03 12:01 Johny_Zhao 阅读(89) 评论(0) 推荐(0)
摘要:第一部分:Conda 的核心概念与操作运维管理 首先,要明确一个核心概念:Conda 是一个开源的包管理工具和环境管理工具。 包管理:它可以安装、更新、删除软件包(不仅限于 Python,还包括 R、C/C++ 库等)。 环境管理:它可以创建独立的虚拟环境,允许你在同一台机器上管理不同项目、不同版本 阅读全文
posted @ 2025-08-27 13:10 Johny_Zhao 阅读(828) 评论(1) 推荐(0)
摘要:在 Linux 系统中,rm 命令的误操作(尤其是 rm -rf / 或 rm -rf /*)是导致数据灾难的常见原因。以下针对不同场景,提供多种防护方案、具体实现步骤及案例: 一、核心防护策略 策略 适用场景 优点 缺点 别名覆盖 rm 个人/开发环境 简单快捷,即时生效 Root 用户可能绕过 阅读全文
posted @ 2025-08-23 18:20 Johny_Zhao 阅读(90) 评论(0) 推荐(0)
摘要:LLaMA-Factory 是一个强大且高效的大语言模型(LLM)微调框架,支持多种微调方法(如 LoRA、QLoRA)、完整的训练流程(SFT、RM、PPO、DPO)以及丰富的模型和数据集支持,能帮助你在消费级显卡上高效微调大型语言模型。 这份指南将带你从零开始,完成基于 Docker 的环境搭建 阅读全文
posted @ 2025-08-20 00:25 Johny_Zhao 阅读(853) 评论(0) 推荐(0)
摘要:方案架构 源服务器:部署 Sersync(监控文件变化) + Rsync(推送数据) 目标服务器:部署 Rsync Daemon(接收数据) 同步逻辑:源服务器文件变动 → Sersync 实时触发 → Rsync 增量同步至目标服务器 详细实施步骤 一、目标服务器配置(数据接收端) 安装 Rsyn 阅读全文
posted @ 2025-08-10 14:52 Johny_Zhao 阅读(557) 评论(0) 推荐(0)
摘要:SeaTunnel(原Waterdrop)是一款高性能、易扩展的分布式数据集成平台,支持实时和批量数据处理。以下为 SeaTunnel v3.x 的安装及测试全流程指南: 一、安装准备 1. 环境要求 Java:JDK 17+(必须) 可选引擎(至少选一种): Spark:3.3.x(推荐) Fli 阅读全文
posted @ 2025-08-07 18:51 Johny_Zhao 阅读(250) 评论(0) 推荐(0)
摘要:阿里云平台健康检查综合巡检清单 1. 管理节点检查 * 节点运行状态: * 检查管理节点(如部署了管控组件的ECS实例)是否处于 Running 状态。 * 通过阿里云控制台、OpenAPI 或 CLI 确认状态。 * 检查系统负载(CPU、内存)是否在合理范围,无持续高负载。 * 服务运行状态: 阅读全文
posted @ 2025-08-03 21:59 Johny_Zhao 阅读(109) 评论(0) 推荐(0)
摘要:以下是 CentOS 8 系统部署 Spug 自动化运维平台的完整流程,提供三种主流安装方式(推荐使用 Docker 方式): 🐳 一、Docker 安装(推荐) 1. 安装 Docker bash # 卸载旧版本 sudo yum remove docker docker-common dock 阅读全文
posted @ 2025-08-01 16:21 Johny_Zhao 阅读(89) 评论(0) 推荐(0)
摘要:以下是CentOS Stream 9上部署FTP应用服务的两种方法详解,包括操作步骤、注意事项及生产环境应用对比: 一、原生安装 vsftpd 服务 原理:直接通过系统包管理器安装vsftpd,配置系统级服务。 操作步骤: 安装与启动 bash sudo dnf install vsftpd -y 阅读全文
posted @ 2025-07-28 21:12 Johny_Zhao 阅读(80) 评论(0) 推荐(0)
摘要:以下是基于 CentOS 8 搭建高可用 Hadoop 集群的完整操作流程及命令,涵盖 6 台主机的规划、部署步骤和高可用(HA)配置。结合 Hadoop 3.x 官方文档和最佳实践整理: 先决条件 硬件规划 6 台 CentOS 8 主机(物理机或虚拟机),每台建议配置: 4GB+ 内存,50GB 阅读全文
posted @ 2025-07-27 10:32 Johny_Zhao 阅读(85) 评论(0) 推荐(0)
摘要:环境说明 主机 IP主机名节点角色数据目录Kubernetes 节点标签 192.168.10.100 zk1 Master /opt/zookeeper/data zk-cluster=true 192.168.10.101 zk2 Worker /opt/zookeeper/data zk-cl 阅读全文
posted @ 2025-07-08 02:00 Johny_Zhao 阅读(69) 评论(0) 推荐(0)
摘要:一、环境准备 bash # 更新系统 sudo apt update && sudo apt upgrade -y # 安装 Docker sudo apt install -y docker.io docker-compose sudo systemctl enable --now docker 阅读全文
posted @ 2025-07-06 09:45 Johny_Zhao 阅读(684) 评论(0) 推荐(0)
摘要:一、系统环境准备 bash # 更新系统 sudo apt update && sudo apt upgrade -y sudo apt install -y git python3-pip python3-venv nginx ufw certbot # 安装PostgreSQL数据库 sudo 阅读全文
posted @ 2025-07-05 21:49 Johny_Zhao 阅读(200) 评论(0) 推荐(0)
摘要:一、环境规划总表 1. 节点规划与资源配置 节点类型 主机名 IP地址 VIP 角色 CPU/内存 存储 操作系统 LDAP节点 ldap01 10.0.0.11 10.0.0.10 OpenLDAP主节点 4C/8G 100GB SSD Ubuntu 22.04 ldap02 10.0.0.12 阅读全文
posted @ 2025-06-18 09:30 Johny_Zhao 阅读(157) 评论(0) 推荐(0)
摘要:下面是在 CentOS Stream 8 上部署高可用 Kuboard 管理平台的详细方案,包含多副本、持久化存储和定期备份配置。 一、架构设计 高可用架构图 图表 节点规划 主机名 IP 地址 角色 资源配置 lb1 192.168.1.10 HAProxy + Keepalived 2C/4G 阅读全文
posted @ 2025-06-16 16:15 Johny_Zhao 阅读(113) 评论(0) 推荐(0)
摘要:以下是将Grafana监控指标、日志与链路追踪数据采集到GreptimeDB的完整实践指南,涵盖部署、运维、安全及扩展的全流程: 一、整体架构 图表 二、数据采集配置 1. 指标采集(Prometheus → GreptimeDB) 步骤: 修改Prometheus配置 yaml remote_wr 阅读全文
posted @ 2025-06-13 09:46 Johny_Zhao 阅读(143) 评论(0) 推荐(0)
摘要:一、靶场架构深度设计 1. 云原生靶场架构 图表 2. 混合现实靶场组件 层级 技术栈 实现细节 物理层 硬件在环 PLC设备、智能电表、IP摄像头通过OPC-UA/Modbus接入 虚拟层 超融合架构 VMware ESXi + NSX网络虚拟化 + vSAN存储 容器层 K8s编排 Calico 阅读全文
posted @ 2025-06-12 11:10 Johny_Zhao 阅读(219) 评论(0) 推荐(0)
摘要:系统架构全景图 图表 一、系统平台优化(CentOS Stream 8) 1. 系统基础配置 bash # 1. 系统更新与加固 sudo dnf update -y sudo dnf install epel-release -y sudo dnf install fail2ban firewal 阅读全文
posted @ 2025-06-11 09:52 Johny_Zhao 阅读(145) 评论(0) 推荐(0)
摘要:以下是融合整理的Docker镜像加速终极解决方案,结合基础配置与深度技术方案,形成分层递进的完整体系: 一、分层加速架构 图表 二、全链路解决方案 1. 基础层:公共镜像源(5分钟快速配置) json // /etc/docker/daemon.json { "registry-mirrors": 阅读全文
posted @ 2025-06-09 16:47 Johny_Zhao 阅读(390) 评论(0) 推荐(0)
摘要:秒杀场景是电商系统中最具挑战性的场景之一,其核心痛点在于超高并发请求(百万级甚至千万级QPS) 与 有限库存 之间的矛盾,以及由此引发的 系统崩溃、超卖、不公平 等问题。阿里通过一套精密的架构和算法组合拳来解决这些问题,Inventory Hint 是其中关键的一环。 核心目标 稳定性: 在极端流量 阅读全文
posted @ 2025-06-06 17:44 Johny_Zhao 阅读(284) 评论(0) 推荐(0)