日志占满磁盘一般发生在晚上，表现为服务写入失败、数据库不能启动，但是监控只报告了一个使用率数字。
管理是从分割开始的。按照日期或者文件大小来切割日志文件，防止单个文件太大影响搜索；切换之后马上压缩历史文件，文本日志的压缩率一般可以达到十倍左右。
归档和清理要有明确的规则。本地保留最近两周用于排障，更早的压缩包转存到对象存储或者独立的磁盘上，保留周期根据业务和合规的要求来定；删除操作由定时任务来完成，并且记录下每次清理的文件数量和释放的空间。
同时控制日志的生成。降低不必要的调试级别，过滤掉重复的健康检查信息，把高频错误进行汇总统计，在源头上减少体积。访问明细只有在排查问题时才打开，平时只保存聚合的结果。
跨机器管理需要一个统一的入口。多台节点各自进行切割和清理，容易出现规则不一致的情况，某台忘记配置的话就会先爆盘。把切割策略写入部署模板中，新机器上线即生效；清理脚本统一版本，执行结果汇总到一个地方，发现失败的节点可以马上补跑。
磁盘水位设置两级告警，七成预警、八成紧急，留出处置时间比事后清理更有效。