随笔分类 - 系统运维linux
摘要:🔧 达梦数据库高可用集群部署方案 (CentOS 8, 6节点) 📝 方案概述 本方案旨在在6台同网段CentOS 8服务器上部署达梦DM8数据库集群,结合MPP架构提升并行处理性能,并通过DataWatch机制确保数据高可用性。集群规划为两个MPP分组,每组包含一个主库和一个备库,同时配置两个
阅读全文
摘要:第一部分:Conda 的核心概念与操作运维管理 首先,要明确一个核心概念:Conda 是一个开源的包管理工具和环境管理工具。 包管理:它可以安装、更新、删除软件包(不仅限于 Python,还包括 R、C/C++ 库等)。 环境管理:它可以创建独立的虚拟环境,允许你在同一台机器上管理不同项目、不同版本
阅读全文
摘要:在 Linux 系统中,rm 命令的误操作(尤其是 rm -rf / 或 rm -rf /*)是导致数据灾难的常见原因。以下针对不同场景,提供多种防护方案、具体实现步骤及案例: 一、核心防护策略 策略 适用场景 优点 缺点 别名覆盖 rm 个人/开发环境 简单快捷,即时生效 Root 用户可能绕过
阅读全文
摘要:LLaMA-Factory 是一个强大且高效的大语言模型(LLM)微调框架,支持多种微调方法(如 LoRA、QLoRA)、完整的训练流程(SFT、RM、PPO、DPO)以及丰富的模型和数据集支持,能帮助你在消费级显卡上高效微调大型语言模型。 这份指南将带你从零开始,完成基于 Docker 的环境搭建
阅读全文
摘要:方案架构 源服务器:部署 Sersync(监控文件变化) + Rsync(推送数据) 目标服务器:部署 Rsync Daemon(接收数据) 同步逻辑:源服务器文件变动 → Sersync 实时触发 → Rsync 增量同步至目标服务器 详细实施步骤 一、目标服务器配置(数据接收端) 安装 Rsyn
阅读全文
摘要:SeaTunnel(原Waterdrop)是一款高性能、易扩展的分布式数据集成平台,支持实时和批量数据处理。以下为 SeaTunnel v3.x 的安装及测试全流程指南: 一、安装准备 1. 环境要求 Java:JDK 17+(必须) 可选引擎(至少选一种): Spark:3.3.x(推荐) Fli
阅读全文
摘要:阿里云平台健康检查综合巡检清单 1. 管理节点检查 * 节点运行状态: * 检查管理节点(如部署了管控组件的ECS实例)是否处于 Running 状态。 * 通过阿里云控制台、OpenAPI 或 CLI 确认状态。 * 检查系统负载(CPU、内存)是否在合理范围,无持续高负载。 * 服务运行状态:
阅读全文
摘要:以下是 CentOS 8 系统部署 Spug 自动化运维平台的完整流程,提供三种主流安装方式(推荐使用 Docker 方式): 🐳 一、Docker 安装(推荐) 1. 安装 Docker bash # 卸载旧版本 sudo yum remove docker docker-common dock
阅读全文
摘要:以下是CentOS Stream 9上部署FTP应用服务的两种方法详解,包括操作步骤、注意事项及生产环境应用对比: 一、原生安装 vsftpd 服务 原理:直接通过系统包管理器安装vsftpd,配置系统级服务。 操作步骤: 安装与启动 bash sudo dnf install vsftpd -y
阅读全文
摘要:以下是基于 CentOS 8 搭建高可用 Hadoop 集群的完整操作流程及命令,涵盖 6 台主机的规划、部署步骤和高可用(HA)配置。结合 Hadoop 3.x 官方文档和最佳实践整理: 先决条件 硬件规划 6 台 CentOS 8 主机(物理机或虚拟机),每台建议配置: 4GB+ 内存,50GB
阅读全文
摘要:环境说明 主机 IP主机名节点角色数据目录Kubernetes 节点标签 192.168.10.100 zk1 Master /opt/zookeeper/data zk-cluster=true 192.168.10.101 zk2 Worker /opt/zookeeper/data zk-cl
阅读全文
摘要:一、环境准备 bash # 更新系统 sudo apt update && sudo apt upgrade -y # 安装 Docker sudo apt install -y docker.io docker-compose sudo systemctl enable --now docker
阅读全文
摘要:一、系统环境准备 bash # 更新系统 sudo apt update && sudo apt upgrade -y sudo apt install -y git python3-pip python3-venv nginx ufw certbot # 安装PostgreSQL数据库 sudo
阅读全文
摘要:一、环境规划总表 1. 节点规划与资源配置 节点类型 主机名 IP地址 VIP 角色 CPU/内存 存储 操作系统 LDAP节点 ldap01 10.0.0.11 10.0.0.10 OpenLDAP主节点 4C/8G 100GB SSD Ubuntu 22.04 ldap02 10.0.0.12
阅读全文
摘要:下面是在 CentOS Stream 8 上部署高可用 Kuboard 管理平台的详细方案,包含多副本、持久化存储和定期备份配置。 一、架构设计 高可用架构图 图表 节点规划 主机名 IP 地址 角色 资源配置 lb1 192.168.1.10 HAProxy + Keepalived 2C/4G
阅读全文
摘要:以下是将Grafana监控指标、日志与链路追踪数据采集到GreptimeDB的完整实践指南,涵盖部署、运维、安全及扩展的全流程: 一、整体架构 图表 二、数据采集配置 1. 指标采集(Prometheus → GreptimeDB) 步骤: 修改Prometheus配置 yaml remote_wr
阅读全文
摘要:一、靶场架构深度设计 1. 云原生靶场架构 图表 2. 混合现实靶场组件 层级 技术栈 实现细节 物理层 硬件在环 PLC设备、智能电表、IP摄像头通过OPC-UA/Modbus接入 虚拟层 超融合架构 VMware ESXi + NSX网络虚拟化 + vSAN存储 容器层 K8s编排 Calico
阅读全文
摘要:系统架构全景图 图表 一、系统平台优化(CentOS Stream 8) 1. 系统基础配置 bash # 1. 系统更新与加固 sudo dnf update -y sudo dnf install epel-release -y sudo dnf install fail2ban firewal
阅读全文
摘要:以下是融合整理的Docker镜像加速终极解决方案,结合基础配置与深度技术方案,形成分层递进的完整体系: 一、分层加速架构 图表 二、全链路解决方案 1. 基础层:公共镜像源(5分钟快速配置) json // /etc/docker/daemon.json { "registry-mirrors":
阅读全文
摘要:秒杀场景是电商系统中最具挑战性的场景之一,其核心痛点在于超高并发请求(百万级甚至千万级QPS) 与 有限库存 之间的矛盾,以及由此引发的 系统崩溃、超卖、不公平 等问题。阿里通过一套精密的架构和算法组合拳来解决这些问题,Inventory Hint 是其中关键的一环。 核心目标 稳定性: 在极端流量
阅读全文