概述

一套跑在 K8s 上的 MES 系统里，辅助服务 Pod mes-app-assist 频繁重启：kubectl describe pod 显示容器因 Liveness 存活探针连续失败，被 kubelet 强行终止（退出码 137 / SIGKILL）。

• 故障现象：Pod 反复重启，退出码 137 初看像 OOMKilled，但事件日志明确写着 Liveness probe failed；
• 根因：外部接入层 Nginx 所在宿主机的文件描述符上限（nofile）过低——worker 进程软限制仅 1024。并发连接持续累积后，Nginx 报 24: Too many open files，既无法建立到后端 NodePort 的 socket 连接，连返回错误页 50x.html 的文件句柄都拿不到，经它转发的请求只能以 HTTP 500 或超时收场；
• 误杀机制：该 Pod 的 Liveness 探针被配置成跨节点探测外部 Nginx 反代地址——外部网关句柄耗尽，被 kubelet 误判为容器死亡，实际健康的后端容器被误杀重启。外部故障沿着探针链路反向传导进了 K8s 内部。

阅读全文

有东西被加密了, 请输入密码查看.

阅读全文

有东西被加密了, 请输入密码查看.

阅读全文

数据库备份这件事有个残酷的悖论：平时它毫无产出，关键时刻它是唯一救命的——所以它的质量不能靠”平时看起来在跑”来保证，只能靠恢复演练来证明。本篇拆一套真实在跑的 MySQL 物理备份一键化方案：CentOS 7 离线环境、XtraBackup 加压缩、七天全量加每日增量链、保留九十天，外加一个恢复演练脚本和一段”增量链四连自愈”的修复实录。

这个方案的脚本量不大（一个安装入口、一个备份脚本、一个恢复脚本），但注释里沉淀的四次修复记录，几乎覆盖了增量备份运维的全部经典坑。上一篇运维篇·上讲集群与监控，本篇讲数据的最后防线。

阅读全文

系列二十五篇本已完结，但运维线一直是个缺口——前面讲过的”K8s 部署痕迹”（云主线的 pod 配置、物联篇的 0 号节点）都只是切片。这两篇增补把切片拼成整图：本篇讲一套生产 K8s 部署清单——CentOS 7 自建集群上跑全套 MES 微服务，外加完全自建的 Prometheus 告警监控栈；下一篇讲 MySQL 的物理备份一键化与恢复演练。

先修正一个容易望文生义的误解：这个项目叫 install-k8s，但里面没有一行安装脚本——它是部署清单（manifests）仓库，K8s 集群本身装好后，”把 MES 搬上去”的全部知识都沉淀在这三十八个 YAML 里。这个定位本身就值得说：集群是易耗品，清单才是资产——装集群一天的活，调清单调了一年。

阅读全文

系列最后一篇。前二十六篇是弹药库，这一篇是出膛前的最后一道组装工序：一张二十七问的高频清单（每问标注答案锚点）、三棵追问树（展示面试官怎么从一个问题追到第五层）、几条应答的元规则、以及最容易被浪费的面试最后五分钟——反问环节。

盘点篇给了按提问路径组织的索引，话术篇给了开场与应答的骨架；本篇补的是实战的最后一层——**追问的纵深预演**。面试的分水岭不在第一问答得多好，在第三层追问答不答得住；而第三层的问题是可以预先推演的。

阅读全文

“介绍下你的项目”——这道题答不好，通常不是没做过，是没组织过。做过的东西在脑子里是网状的（盘点篇的索引就是那张网），而面试开口只有线性的几十秒；不预先组织，开口就是”我们用了 Spring Cloud，然后有个工单模块，然后……”——信息全是碎片，面试官听不出形状。

本篇把全系列压缩成嘴上的功夫：30 秒电梯版（两套，按岗位换）、3 分钟结构化版（逐段给话术和每段的目的）、单项目深挖版（面试官说”挑一个讲深点”时的备选）、五个高频追问的应答骨架。所有话术都从前面各篇的真实素材压缩而来——话术不能编，编出来的经不起追问；话术只是把做过的事排成讲得出来的顺序。

阅读全文

系列写到这里，机制、交付、端侧、工具链与运维已经二十四篇，本篇是检索层：把散在二十四篇里的考点按”面试官的提问路径”重排成索引，补上一直欠着的导出与归档拼图，最后画出”一个底座、多种交付、多端工具链”的项目经历地图。面试备战材料写完不难，难的是面试前 30 分钟能不能翻到要复习的那一段——本篇就是为那 30 分钟设计的。

阅读全文

上一篇插件篇讲了给自研框架补 IDE 断链的插件怎么长出来，本篇讲它的下半场——三件把”内部小工具”推向”团队基础设施”的事：一次”打开文件即卡加 Full GC”的性能事故及其沉淀的性能铁律、插件平台从 1.x 到 2.x 的整体迁移、以及在此基础上长出的MES 代码生成器。中间还穿插一次真实的密钥泄漏事故复盘。

内部工具的下半场都长这样：功能不再是问题，性能、可维护性和安全性才是。这三件事的共同教训一句话预告：工具代码和业务代码遵循完全相同的工程纪律，但工具的错误成本发生在所有人每天的编辑器里——它出问题时，受害者是全部用户，且每天受害。

阅读全文

自研框架有一个很少被提起的隐性成本：它会让 IDE 失明。框架用字符串约定连接世界——Feign 接口里的 URL 和 Controller 方法之间、页面里的多语言 key 和资源文件之间、Mapper 接口和 XML 之间——约定对框架是优雅，对 IDE 是普通字符串：Ctrl+点击无效、改名不联动、引用查找失明。团队每天为这些断链付的时间税，累积起来是天文数字，但因为它是一次一分钟，从来没人立项去修。

我修了：给自研框架写了一个 IDEA 插件，把这些断链全部接通——框架篇讲过的那套”约定优于配置”，在这里补上了它的 IDE 侧半环。本篇讲断链清单怎么盘点、PSI（IDEA 的代码模型）怎么用、两个最有含金量的实现（多语言 key 折叠成中文、URL 引用导航），以及四十四个版本迭代的插件是怎么发布和维护的。工具链线的第一篇（PowerShell 引擎）管进程，这一篇管开发者的编辑器。

阅读全文