广告 · 推广

Prometheus Targets、ServiceMonitor 与 Kubernetes 告警规则实战

一、为什么需要这次实验? 本篇解决监控平台的下一层问题:指标是否真的被发现并采集?报警表达式何时生效?告警最终是否抵达 Alertmanager? 实验目标: 区分 Service、ServiceMonitor、Target、PrometheusRule、Alertmanager 的职责; 在 demo 命名空间部署独立的可控 /metrics 测试端点(不修改正在使用的 nginx-demo); 在 monitoring 命名空间通过 ServiceMonitor 跨命名空间发现测试服务; 验证 Targets UP、自定义指标、PrometheusRule 的 Pending → Firing → Resolved; 了解告警规则与 Alertmanager 路由、通知之间的区别; 保存可复现的验收命令、截图及清理方式。 状态说明:以下是已编写并完成本地 YAML/脚本检查的可执行实验方案,不是对当前集群实时完成情况的断言。项目中的 #05 应在实际验证后再将 draft 改为 false。 二、当前实验环境 项目 环境信息 Kubernetes v1.28.15 管理节点 h11(192.168.6.11) 应用节点 h12,nativeopslab.io/role=app 可观测性节点 h15,nativeopslab.io/role=observability 监控命名空间 monitoring 已有 Demo demo/nginx-demo,已有 2 个运行副本(此前验收) 新建实验服务 demo/nativeopslab-metrics-demo,HTTP 9105 Prometheus / Grafana / Alertmanager 核心组件在 h15,已有 PVC Bound Helm Release monitoring(按此前部署记录) Chart 版本 此系列文档以 kube-prometheus-stack 65.8.1 为配置参考;以现场 helm list -n monitoring 为准 本篇不执行 Helm 升级,不改变 OpenEBS PVC,不删除已经运行的监控 Pod。 ...

2026-10-27 · 5 分钟 · 913 字 · 博主

Linux 性能排障实战:CPU、Load Average 与磁盘 I/O 的关系

一、为什么 CPU 不高,服务器仍可能很慢? 运维中经常遇到三种看似矛盾的现象: 一个进程显示 CPU 100%,但服务器整体 CPU 使用率并不高。 Load Average 很高,而 top 中的 CPU 空闲比例仍然很大。 CPU 不忙,应用响应却很慢,磁盘延迟、等待队列或其他依赖可能成为瓶颈。 这些现象并不矛盾,因为 CPU 使用率、Load Average 和磁盘 I/O 延迟测量的是不同事情。 本文沿用 NativeOpsLab 的三组实验: 实验 研究问题 核心工具 Day 8 / #001 单核 100%,是否等于整机 CPU 满载? stress-ng、mpstat、pidstat Day 9 / #002 Load 高但 CPU 不高,为什么? uptime、vmstat、mpstat、ps Day 10 / #003 CPU 不忙,如何判断是否是磁盘 I/O 问题? fio、iostat、vmstat、pidstat 最终目标不是背几个命令,而是能通过指标判断:任务究竟在执行、排队,还是等待其他资源。 二、实验环境和安全边界 本系列使用 NativeOpsLab 的集群外实验机 h16(Rocky Linux 9),不在 Kubernetes 控制面 h11,也不在承载服务的 h12~h15 上制造压力。 ...

2026-10-16 · 5 分钟 · 980 字 · 博主

Linux 防御 DDoS 实战:用 IPTables 给服务器装上交通警察

如果把服务器比作高速公路,正常用户就是有序通行的汽车;DDoS 攻击则像大量车辆同时涌向收费站,把道路、收费窗口甚至整座城市的入口堵住。 这时,IPTables 就像服务器上的交通警察:可以识别异常状态、限制部分来源的通行速度,并对可疑连接采取丢弃措施。 但交警也有能力边界:如果城市外的高速入口已经被堵死,收费站再严格也无法恢复上游道路的通行能力。这就是主机防火墙和 CDN / 云端 DDoS 清洗之间的区别。 这篇文章以 Linux 服务器为例,介绍 IPTables 的防护思路、可在实验机验证的规则,以及上线前必须考虑的误伤、IPv6、持久化和回滚问题。 实验与生产边界:以下 IPTables 配置仅供独立测试环境演练。不要直接复制到正在运行 firewalld、nftables 或 Kubernetes 网络组件的生产宿主机。规则顺序、现有防火墙策略和管理入口不同,都可能导致业务中断。 一、先搞清楚:我们在防哪种 DDoS? 攻击类型 常见现象 主机侧能做什么 更合适的防护层 SYN Flood 大量 TCP 建连请求,连接状态异常 针对 SYN 报文限速、观察内核统计 L3/L4 边缘清洗与主机协同 UDP Flood UDP 报文激增,带宽或处理能力被占满 关闭非必要端口、按业务限速 上游运营商、云端清洗 HTTP CC 大量看似正常的 HTTP 请求,接口耗时上升 监控连接与流量,但不能精确识别 URL 请求 Nginx、WAF、CDN、应用层限流 连接耗尽 某些来源建立大量并发连接 connlimit、连接数监控 代理层和主机层联合控制 关键区别:IPTables 主要看到 IP、端口、TCP 标志与连接状态;真正的 HTTP 请求路径、Cookie、用户行为通常应在 Nginx 或 WAF 层判断。 二、动手之前:先确认系统现状 以 Rocky Linux 9 / RHEL 9 系列为例,建议先检查系统实际使用哪套防火墙: ...

2026-10-14 · 3 分钟 · 624 字 · 博主

Windows / Linux 定时任务实战:每天自动重启服务和系统

做运维时,经常遇到这样的需求: 每天凌晨自动重启 Tomcat、Nginx 等服务 定时重启测试机或实验环境 使用脚本执行定期维护任务 不同操作系统如何统一管理计划任务? 其实,Windows 和 Linux 都有自带的任务调度工具,不需要额外安装软件。 01. Windows:任务计划程序 Windows 可以通过 Task Scheduler(任务计划程序)实现。 ① 每天凌晨 2 点重启 Tomcat 服务 创建 restart_service.bat: @echo off net stop Tomcat net start Tomcat 注意:Tomcat 必须替换为实际的 Windows 服务名称。 打开任务计划程序: 创建任务 → 触发器 → 每天 02:00 → 操作 → 启动程序 选择刚创建的批处理文件,并设置具有服务管理权限的账户,必要时勾选“使用最高权限运行”。 ② 每天凌晨 3 点重启 Windows 同样创建计划任务: 程序:shutdown.exe 参数:/r /t 0 其中: /r:重启计算机 /t 0:不等待,立即执行 保存后,Windows 就会按照计划执行重启。 02. Linux:使用 Crontab 在 Rocky Linux、Ubuntu 等 Linux 发行版中,可以通过 Cron 管理定时任务。 ...

2026-10-12 · 2 分钟 · 223 字 · 博主

基于 Kubernetes 的 DevOps / GitOps 高可用微服务平台

1. 项目摘要 本项目围绕一套真实可运行的 Kubernetes 实验平台,逐步完成容器网络、裸金属 LoadBalancer、Gateway API、持久化存储、数据库与缓存高可用、Prometheus生态、VictoriaMetrics、自定义业务指标 HPA、GitLab/Jenkins/Harbor/ArgoCD、DEV/TEST/PROD 多环境、BuildOnce Promote Many、Canary 渐进式发布、Prometheus Gate、自动回滚、故障演练与高可用封板。 项目的重点不是“安装了多少组件”,而是把源码、制品、声明式配置、业务流量、监控指标、恢复机制和权限边界串成一条可以解释和验证的生产闭环。 Developer / Git Push ↓ GitLab ↓ Jenkins CI Test / BuildKit / Image ↓ Harbor (immutable Git SHA) ↓ GitOps Repository ↓ ArgoCD ↓ DEV → TEST → TEST Approved → PROD Canary ↓ 5 → 10 → 30 → 50 → 100 ↓ Prometheus Gate ↙ ↘ Rollback Stable Promotion 核心方法论 BuildOnce, Promote Many;Git is Desired State;Jenkins 做 CI/编排,ArgoCD 做 CD;Readiness 与业务质量分层判断;先止血再排障;HA不等于 Backup/DR。 ...

2026-08-27 · 14 分钟 · 2965 字 · 博主
MiYaIP 纯净真实住宅 IP 微软积分商城 - 搜索赚积分兑换礼品 捐助帮助贫困儿童
MiYaIP 纯净真实住宅 IP 微软积分商城 - 搜索赚积分兑换礼品 捐助帮助贫困儿童
MiYaIP 纯净真实住宅 IP