最初认为 oom（内存溢出）只是一个常见的问题，不会造成太大影响，因为 kubernetes（k8s）集群会自动调度。但实际上，它引发的连锁反应是相当可怕的。

问题描述：当一台机器发生 OOM 时，对应的 Pod 会被调度到其他节点上，导致这些节点也出现 OOM。然后，节点开始疯狂输出日志信息，导致 Master 节点的磁盘空间不足，进而开始清理和驱逐 Pod。被驱逐的 Pod 再次被调度到其他节点上，引发连锁反应，最终导致大量服务不可用。

Pod 出现告警信息 The node had condition: [DiskPressure].

总的来说，一个应用的 OOM 导致 Pod 不断被调度，日志信息疯狂输出，最终导致磁盘空间不足。

解决方案：

1. 设置合适的内存请求和限制：限制单个应用的内存使用是非常必要的，避免出现意外情况。

resources:
  requests:
    cpu: 100m
    memory: 128Mi
  limits:
    cpu: 200m
    memory: 256Mi

2. 修复应用 bug：导致问题的主要原因是代码中的 bug，必须修复。

3. 升级 ECS 的内存：当前集群中的内存不足以满足应用需求，容易引发问题。

4. 定时清理 Master 和 Worker 上的系统日志：之前没有清理过 k8s 的日志文件，长期堆积也是导致此次问题的原因之一。因此，需要编写脚本定时清理日志。

5. 添加磁盘监控：由于没有高存储类型的应用，以前没有考虑到磁盘问题，因此需要添加磁盘监控。

# linux  # 存储类  # 堆  # kubernetes  # bug  # 连锁反应  # 磁盘空间  # 一台  # 太大  # 考虑到  # 原因之一  # 主要原因  # 只是一个  # 不可用  # 最初 

相关栏目： 【 网站优化151355 】 【 网络推广146373 】 【 网络技术251813 】 【 AI营销90571 】

相关推荐： Laravel如何使用Gate和Policy进行权限控制_Laravel权限判定与策略规则配置  如何在企业微信快速生成手机电脑官网？  微信公众帐号开发教程之图文消息全攻略  JavaScript实现Fly Bird小游戏  HTML5段落标签p和br怎么选_文本排版常用标签对比【解答】  Laravel如何操作JSON类型的数据库字段？（Eloquent示例）  Laravel如何监控和管理失败的队列任务_Laravel失败任务处理与监控  Laravel如何处理JSON字段_Eloquent原生JSON字段类型操作教程  Laravel模型关联查询教程_Laravel Eloquent一对多关联写法  Laravel如何配置和使用缓存？（Redis代码示例）  如何在新浪SAE免费搭建个人博客？  详解jQuery停止动画——stop()方法的使用  Laravel定时任务怎么设置_Laravel Crontab调度器配置  html5源代码发行怎么设置权限_访问权限控制方法与实践【指南】  高性能网站服务器配置指南：安全稳定与高效建站核心方案  Laravel怎么在Controller之外的地方验证数据  三星网站视频制作教程下载,三星w23网页如何全屏？  如何制作新型网站程序文件,新型止水鱼鳞网要拆除吗？  如何在阿里云虚拟服务器快速搭建网站？  百度浏览器网页无法复制文字怎么办 百度浏览器复制修复  Laravel怎么自定义错误页面_Laravel修改404和500页面模板  nodejs redis 发布订阅机制封装实现方法及实例代码  如何在IIS中新建站点并解决端口绑定冲突？  如何挑选高效建站主机与优质域名？  教你用AI润色文章，让你的文字表达更专业  详解CentOS6.5 安装 MySQL5.1.71的方法  魔毅自助建站系统：模板定制与SEO优化一键生成指南  Laravel模型事件有哪些_Laravel Model Event生命周期详解  大同网页,大同瑞慈医院官网？  ChatGPT 4.0官网入口地址 ChatGPT在线体验官网  如何在阿里云通过域名搭建网站？  PHP 500报错的快速解决方法  微信小程序 wx.uploadFile无法上传解决办法  LinuxCD持续部署教程_自动发布与回滚机制  如何在IIS管理器中快速创建并配置网站？  JS碰撞运动实现方法详解  深圳网站制作设计招聘,关于服装设计的流行趋势，哪里的资料比较全面？  谷歌浏览器如何更改浏览器主题 Google Chrome主题设置教程  制作电商网页,电商供应链怎么做？  Laravel如何配置.env文件管理环境变量_Laravel环境变量使用与安全管理  Laravel如何实现登录错误次数限制_Laravel自带LoginThrottles限流配置【方法】  Laravel如何使用Spatie Media Library_Laravel图片上传管理与缩略图生成【步骤】  详解MySQL数据库的安装与密码配置  网站设计制作书签怎么做,怎样将网页添加到书签/主页书签/桌面？  PHP怎么接收前端传的文件路径_处理文件路径参数接收方法【汇总】  Laravel如何获取当前用户信息_Laravel Auth门面获取用户ID  如何在万网ECS上快速搭建专属网站？  Laravel中间件起什么作用_Laravel Middleware请求生命周期与自定义详解  如何快速完成中国万网建站详细流程？  Python高阶函数应用_函数作为参数说明【指导】