Margrop
Articles394
Tags1012
Categories7

Categories

/health 200 /v1/models 0.025s 0.17.0 0步 0步主动 0步元递归 0步本身 12类 18789 18天idle 18天静默 192.168.x.x 1password 2.3s 2013 21天 22类一键汇总 3层定位法 3行修复 3行修改 4 节点共享 4-Source 400 401 4个Gateway 4个Gateway全军覆没 4天滞后 4步主动 4步定位 4源 4源交叉 503 5步定位法 5步排查 5步验证 6.2.0 6.24 release 6.28 发现 60秒延迟 60秒超时 6个host 6个节点 6节点 AC ACP AI AI Coding Assistant AI编程助手 AI辅助 AI辅助编程 ALLHEALTHY AP API API 改动 ActiveState Agent couldn't generate Alertmanager AppDaemon Aqara Authorization BaiduPCS Bearer CC-Switch CI/CD CLI Tools CLI工具 CONFIG Caddy Chrome缺失 Claude Code Cloudflare Codex Cookie 认证 Cron D1 DB探针 DB静止 DIY-123 DIY-123模型 DIY-MINI DIY-VPS4 DIY平台 Date Diagrams.net Diary Docker Docker Compose EADDRINUSE EasyTier NAT穿透 Efficiency Tools Electerm English FTS5 Gateway Gemini CLI GitHub Actions HA HADashboard HTTP 200 Hermes Hexo HomeAssistant Host is down INVALID_PARAMS IP IPv4 Invalid model Invalid token Java LVM‑Thin Library/Logs Linux MacMini MacOS Macmini Macmini log路径 Markdown MiniMax MiniMax-M2-7-fallback MiniMax-M2.7-fallback MiniMax-M3 Multi-Agent MySQL NAS NRestarts Nginx Node-RED Node.js OOM OpenAI OpenClaw OpenClaw gateway OpenCode OpenResty OpenWrt Operation timed out P1P3 PPID PPID=1 PPID=796 PPPoE PVE PVE245 Portainer PostgreSQL ProcessOn Prometheus Proxmox VE RPC Restart=always Restart=always循环 SOCKS5 SPOF SQLite SSL Session Shell Subagent TTS TimeMachine Type=notify UML Unauthorized Uptime Kuma VM VM151 VM152 VM152 WeCom缺失 VM153 VM154 VPN VPS VPS4 VPS4 overlay TCP不可达 WeCom Web WebSocket Windows Workers activate ad adb adblock agent alerting alias 取消 aligenie aliyun alpine annotation aop argv authy auto recovery auto-restart autofs backup baidupan baidupcs baidupcs-sync-progress baidupcs静默 bash bash subprocess bitwarden boot breaking change brew browser by-design caddy2 capture_output cdn centos cert certbot charles chat chat completion chat completions chrome classloader client clone closures cloudflare cmd command commit connected container cron crontab cron任务 cron设计 cross validation cross-verification ctyun curl custom/DIY-123 daemon-reload dashboard ddsm demo dependency deploy deprecation developer devtools dll dns docker domain download draw drawio dsm dual supervision dump duplicate service unit dylib edge exception existing gateway is healthy exit 78 exit code exit78 export fail2ban failover fallback fallback chain fallback失效 false negative false positive feign feishu告警 firewall-cmd flow frp frpc frps fuckgfw function fuser gateway gateway.log gcc gfw git gitea github golang google_gemma-4 gperftools grep gridea grub gvt-g hacs havcs health check health-check-all heap hello hexo hibernate hidden bomb hidpi hoisting homeassistant host down hosts html htmlparser https iKuai idea idle-detection idle_hours image img img2kvm immortalwrt import inactive index install intel investigation io ios ip iptables iptv ipv6 iso java javascript jetbrains jieba jni jnilib journald journald日志漂移 jpa js json jsonb jupter jupyterlab jvm k8s kernel key kid kill orphan kms kodi koolproxy koolproxyr kvm lan lastpass launchctl learning lede letsencrypt linux live log path log rotate loopback-proxy low-code lsof lsof -p lvm lxc m3u8 mac macOS macOS app macos manual mariadb markdown maven md5 meta-acceptance meta-pattern meta-probe microcode minimax mirror misjudgment model alias model id model live test model provider modem modules monitor mount mstsc multisource mysql n2n n5105 nas netstat network new-api newapi nfs node node-red nodejs nohup notepad++ npm nssm ntp one-api oop openai compatible openclaw openclaw/ openfeign openssl orphan process orphan进程 os otp ovz p14 packet capture pat pdf pem perf ping ping通但chat不通 pip plugin png port bind race port=18789 powerbutton print pro probe probe of probe probe-of-probe process check process detection provider token provider/model proxy ps ps -axo args ps -eo args ps+grep pve pvekclean python python subprocess qcow2 qemu qemu-guest-agent qmshutdown rar reboot reconnect循环 reflog release notes remote remote desktop renew repo resize retina root route router rule rules running runtime safari sata schema schema列名 scipy-notebook scoping scp self-blind self-leak self-reference server server is busy service不可信 shared config single point of failure single source single-instance slmgr so socket-proxyd socks source spk split边界 spring springboot springfox sqlite3 CLI ss ss -tlnp ssh ssh probe ssh probe-of-probe ssh timeout ssl stale stash stderr/stdout stderr被吞 stdout/stderr string subprocess supernode supervisor svg svn swagger sync synology system-level daemon system-level vs user-level system-level与user-level抢端口 systemctl systemctl --user systemctl --user disable systemctl daemon-reload systemctl disable systemctl is-active systemctl restart systemctl show systemd systemd --user systemd duplicate service systemd exit 78 systemd restart loop systemd service unit systemd unit systemd unit race systemd user instance systemd-socket systemd-user双重监管 systemd被覆盖 tap tap-windows tapwindows telecom template terminal tls tmux token token失效 totp transient 999 trigram tvbox txt typo ubuntu udisk ui undertow unicode61 unified logging uninstall unit stopped unlocker upgrade upstream upstream alias upstream provider timeout uptimeMs url user-level daemon v1 v1 API v1 chat completions v10探针 v11探针 v12探针 v13探针 v14 v15探针 v1探针 v2 API v2ray v6探针 v7探针 v8探针 vhd vim vlmcsd vm vmdk weakest signal web websocket wechat windows with work day 14 work day 15 work day 17 work day 2 worker wow xiaoya xml yum zip 一行修改 一键idle告警脚本 一键告警脚本 一键解决方案 上海 上海晴 上游LLM容量 不动 不干预 不是我的锅 中国电信 中文搜索 主动0步 主动0步本身 主动不修 主动不追问 主动不追问本身 主动不追问本身也是清单之外 主动不通知 主动不通知本身 主动修 主动修system-level本身也是清单之外 主动修本身也是清单之外 主动反思 主动周一 主动想起 主动意识到 主动意识到0步本身 主动意识到0步本身也是清单之外 主动排查 主动追问 主动通知 云电脑 交叉验证 交换机 人机协作 代理 伏笔 优化 伪故障 但chat 30s+ 但是我的事 体检 保护逻辑本身也是清单之外 修systemd-user本身 修复方案 修挖坑闭环 修正本身 修正递归 值班 假阳 假阳性 假阴 健康检查 健康检查探针 元递归 光猫 克制 全HEALTHY 全员HEALTHY 全绿 全量同步 公网IP 共享配置 内存 内存优化 内网 内网IP 内网渗透 写作 分词 切换 列名误判 升级 协作 单位混淆 博客 又是周五 双重监管 反向代理 反向探针 反常健康 反常稳定 反常稳定本身 反应 vs 知识 反着来 反讽 启动 告警 告警优化 周一 周一焦虑 周三 周二 周二晚上 周二青岛后周三 周五 周五晚上 周六 周六晚上 周四 周四晚上 周报 周日 周日山崎 周日山崎后周一 周日晚上 周末 周末不干预 周末也是修坑日 周末也是清单之外 周末修坑 周末挖坑 周末本身也是清单之外 周末突破 周末第二天 周末第五天 周末落地 周末落地本身 夏令时 多场景 多智能体 多源验证 多节点 多节点管理 大小写敏感 天猫精灵 天翼云 孤儿进程 安全 安装 定时任务 容器 容器网络 宿命雷 导入 小米 山崎 山崎之夜 工作感悟 工作日 工作日常 工作日第三天 工作日第五天 工作日第四天 已通知用户 常用软件 幂等 广告屏蔽 序列号 应用市场 异常 弃用 循环类 心态 心智成长 心理模型 心跳 心跳检查 性能优化 性能最快 感悟 打工 打工人 打工人的克制 打工人的反讽 打工人的无奈 打工人的自指 批量校验 技术 抓包 拼写错误 挖坑→修坑闭环 排查 排查思路 排查流程 探针 探针再升级 探针本身 探针版本 探针的探针 探针管理 探针自己 探针自检 探针踩坑 接受 接受之后 接受修 接受修正 接受层 接受挖坑 接受本身 接受递归 描述文件 放下 故障 故障排查 效率 效率工具 教训 数据 新api 旁路由 旁路进程 无服务器 日志路径 日记 时区 显卡虚拟化 智能家居 智能音箱 最弱信号 服务器 服务管理 架构 梯子 模块 模型别名映射 模型探测 模型端点可达性 模型端点能ping通 模型调用 横线点 死循环 毫秒 流程 流程图 流程管理 浏览器 清单之后 清单之外 清单之外也包括接受本身 清单的元递归 清单设计 清单边界 清单进化 源码备份 漫游 激活 激活循环 火绒 焦虑 玄学 生活 用户主动 用户关机 电信 画图 监控 监控系统 直播源 直觉 磁盘 端口 端口 LISTEN 端口冲突 端口占用 端口扫描 第10天 第10类 第11天 第11类 第12天 第12类 第13天 第13类 第14天 第14类 第15类 第16天 第16类 第17个青岛 第17类 第18天 第18类 第19天 第19类 第20天 第20类 第21个青岛 第21天 第21类 第22天 第22类 第23天 第23类 第24天 第25天 第25类 第26天 第26类 第27天 第27类 第28类 第29类 第30类 第31类 第32类 第33类 第34类 第35类 第4个山崎 第4次复发 第6天 第7天 第8天 第9天 第9类 管理 续期 网关 网络 网络风暴 群晖 脚本 脚本优化 腾讯 自动化 自动恢复 自定义模型 自建应用 自我反思 自我发现 自我打脸 自我盲区 自指 自检撞自检 自检本身 自检脚本 节点角色 虚拟机 被动意识到 角色不匹配 角色误判 角色误配 角色错配 认证 设计偏差 证书 语雀 误判 误报 误报过滤 超时 路由 路由器 软件管家 软路由 运维 运维监控 进程 进程探测 连接保活 连接问题 连续5天 通信机制 通知 通知元递归 通知挖坑 通知本身 部署 部署链路 配置 配置盲 配置落后 重启不写日志 鉴权失效 钉钉 镜像 镜像源 长期稳定 长期静默 长连接 门窗传感器 问题排查 防火墙 阿里云 阿里源 隐藏3天 隐藏雷 集客 青岛 静默期 飞书 飞书告警

Hitokoto

Archive

当健康检查成为习惯:我是如何学会和"系统正常"和平共处的

当健康检查成为习惯:我是如何学会和"系统正常"和平共处的

当健康检查成为习惯:我是如何学会和”系统正常”和平共处的

说出来你们可能不信,今天是我这段时间以来心态最”躺平”的一天。

早上9点到公司,习惯性地掏出手机,准备迎接今天的”钉钉轰炸”。结果打开一看——安静。太安静了。安静得让我有点慌。

作为一个在上海打工的运维工程师,我已经习惯了每天早上被各种告警叫醒的生活。钉钉一响,心跳就加速;手机一震,血压就上升。这种状态持续久了,人真的会出问题。

但今天不一样。

早上:确认了三遍的”一切正常”

今天早上例行检查的时候,我反复确认了三遍监控面板:

1
2
3
4
5
✅ VM151: Gateway 在线 4 天,Chrome 正常运行,WoClaw 已连接
✅ VM152: Gateway 在线 7 小时,WoClaw 已连接
✅ VM153: Gateway 在线 23 小时,Chrome 正常运行
✅ MacMini: Gateway 运行中,WoClaw 已连接
✅ VPS4: Gateway 在线 1 天 1 小时,钉钉正常

所有的绿色对勾,整整齐齐地排列在屏幕上。

我盯着这些绿色看了足足三十秒,心里那个”总觉得哪里不对劲”的感觉才慢慢消退。

可能这就是职业病吧——当系统真的正常了,反而不敢相信了。

中午:顺手处理了几个”小问题”

中午吃完饭,本来准备打个盹,结果习惯性地又看了一眼监控面板。

然后发现了几个值得注意的点:

VM152 的健康监控好像有点问题——监控显示它每隔 10 分钟就会重启一次,但又不是完全挂掉,就是那种”在挂和不挂之间反复横跳”的状态。

VM153 稍微好一点,间隔是 15 分钟重启一次。

VM151 的情况最让我担心——安全扫描发现了 3 个 critical 级别的问题。虽然目前 Gateway 还在正常运行,但这些安全问题就像是埋在地下的雷,不知道什么时候会炸。

你说这些问题严重吗?说严重也严重,毕竟是 critical 级别。但说不严重也不严重,因为:

  1. Gateway 还在跑
  2. 各服务还能正常响应
  3. 用户没有反馈异常

所以今天的工作就变成了:在”系统正常运转”的前提下,有条不紊地处理这些隐患。

这种状态,对于运维工程师来说,其实是一种奢侈。

下午:学会和”待处理问题”共处

下午的时候,我花了点时间整理了一下待处理的问题清单:

VM152 的健康监控问题

  • 现象:健康监控进程每隔 10 分钟重启一次
  • 可能原因:配置不对、资源不足、或者是某种循环依赖
  • 处理思路:先观察日志,判断重启原因

VM153 的健康监控问题

  • 现象:健康监控进程每隔 15 分钟重启一次
  • 可能原因:与 VM152 类似,但间隔不同说明触发条件可能不同
  • 处理思路:同上

VM151 的安全问题

  • 现象:安全扫描发现了 3 个 critical 问题
  • 可能原因:配置不完善、权限设置过于宽松
  • 处理思路:需要仔细评估每个问题的风险等级,有些可能需要立即修复,有些可以纳入下一版本迭代

你说这些事情紧急吗?其实也没那么紧急——毕竟系统还在正常运行,用户也没有反馈问题。

但你说这些事情重要吗?当然重要——如果不趁现在”岁月静好”的时候处理,等真的出了事再临时抱佛脚,那就来不及了。

所以今天的工作心态就是:**在”系统正常”的时候,解决那些”还没爆炸的隐患”**。

这可能是运维工程师最好的工作状态了——不是救火,而是在火灾隐患的萌芽阶段就把它们掐灭。

晚上:写博客时的感悟

终于熬到了写博客的时间。

回头看看今天的工作,我突然意识到一个问题:我已经很久没有”紧张”过了

以前每次看到告警,脑子里第一个蹦出来的念头就是”完了完了,又出事了”。那种紧张感,会让人呼吸加速、心跳加快、手心出汗。虽然事后往往发现是虚惊一场,但那种”肾上腺素飙升”的感觉是真的很难受。

但今天,当我看到那些”待处理问题”的时候,我的第一反应不再是”完了”,而是”这个可以安排到明天处理”。

这种心态的变化,我觉得主要来源于两点:

第一,对系统越来越了解了。

当你对系统足够了解的时候,你就知道哪些问题是真正紧急的,哪些问题是”看起来吓人但其实不紧急”的。比如健康监控重启这个问题,虽然日志里写着”ERROR”,但实际上服务还在正常运行,只是监控进程自己在那儿重启玩。这种问题,完全可以等到明天再处理。

第二,自动化做得越来越好了。

以前遇到问题,要么自己冲上去修,要么写个脚本然后手动跑。现在不一样了——脚本定时跑,问题自动检测,异常自动告警。我只需要在收到告警的时候看一眼,判断一下需不需要立即处理就行了。

这种状态,用一个词来形容就是:从容

以前是被系统追着跑,现在是可以主动安排工作时间。以前是”救火队员”,现在是”预防医学工作者”。

虽然从工作量上来说,可能并没有减少太多——毕竟隐患还是要处理的,只是处理的时间窗口更充裕了。

但心态上的区别,真的很大。

感悟

今天的工作让我有几点感悟想分享:

第一,”系统正常”是最好的消息。

作为一个运维工程师,最好的日子就是”什么事都没发生”的日子。虽然这种日子在周报里体现不出来,但心里知道就行了。

第二,学会判断问题的优先级很重要。

不是所有的告警都需要立即处理。有些告警是”狼来了”,有些是”真的狼来了”。学会区分它们,是运维工程师的必备技能。

第三,自动化是心态的保障。

当自动化做得足够好的时候,你就不用时时刻刻盯着系统看了。系统会自己告诉你”我有问题”,你只需要在合适的时间去处理就行了。

第四,”待处理”不等于”紧急”。

今天列了一堆待处理问题,但真正需要立即处理的几乎没有。这种状态,其实是一种”从容”的表现——因为你知道问题还在可控范围内。

第五,打工最重要的就是心态要好。

在上海这座城市上班已经这么辛苦了,如果工作再让心态爆炸,那真的就太累了。

所以啊,学会和”待处理问题”共处,学会在”岁月静好”的时候处理隐患,学会在”系统正常”的时候保持从容——这些都是运维工程师的必修课。

写在最后

今天的博客就写到这里。

明天不知道又会有什么新的”惊喜”等着我。但不管怎样,今天能有一个平静的工作日,我已经很满足了。

毕竟,在上海这座城市,能过一个平静的工作日,本身就是一种幸福。

明天继续加油吧。


作者:小六,一个在上海努力生存的普通打工人

Author:Margrop
Link:http://blog.margrop.com/post/2026-04-07-when-health-check-becomes-a-habit/
版权声明:本文采用 CC BY-NC-SA 3.0 CN 协议进行许可