某天，报警系统提示某台机器上部署的一个服务突然无法访问。第一反应是登录机器查看日志，因为服务可能因内存溢出（oom）而崩溃。在机器的日志中发现了如下信息：

nio handle failed java.lang.OutOfMemoryError: Direct buffer memory at org.eclipse.jetty.io.nio.xxxxat org.eclipse.jetty.io.nio.xxxx at org.eclipse.jetty.io.nio.xxxx

这些日志表明确实发生了OOM，并且问题出在Direct buffer memory（直接内存或堆外内存）上。日志中还显示了一大堆与Jetty相关的调用栈。仅凭这些日志，我们可以分析OOM的原因。

Direct buffer memory是指JVM堆内存之外的一块内存空间，不是由JVM直接管理，但Java代码可以通过NIO使用这些内存。这些内存由操作系统直接管理。Jetty作为一个JVM进程，运行我们编写的系统流程：

这次的OOM是由Jetty在使用堆外内存时引起的。我们可以推测，Jetty可能一直在使用堆外内存，而当堆外内存空间不足时，无法再分配更多的堆外内存，从而导致OOM。

Jetty不停使用堆外内存：

解决OOM的底层技术：Jetty是用Java编写的，那么它是如何通过Java代码申请堆外内存的？这些堆外内存空间又如何释放呢？这涉及到Java的NIO底层。

JVM的性能优化相对来说较为容易，但解决OOM问题，尤其是那些不是简单地由代码中不断创建对象引起的问题，需要扎实的技术。

堆外内存是如何申请和释放的？在Java代码中，要申请使用一块堆外内存空间，可以使用DirectByteBuffer类。通过这个类构建一个DirectByteBuffer对象，这个对象本身位于JVM堆内存中，但在构建这个对象的同时，会在堆外内存中划出一块与之关联的内存空间。

因此，分配堆外内存的基本思路就是这样的。

当你的DirectByteBuffer对象无人引用，成为垃圾后，就会在某次Young GC（YGC）或Full GC时被回收。只要回收一个DirectByteBuffer对象，就会释放其关联的堆外内存：

那么为什么还会出现堆外内存溢出？如果创建了很多DirectByteBuffer对象，占用了大量的堆外内存，而这些DirectByteBuffer对象又没有被GC线程回收，那么这些内存就不会被释放。当堆外内存都被大量的DirectByteBuffer对象占用时，再想使用额外的堆外内存就会导致OOM！

在高并发的情况下，创建过多的DirectByteBuffer对象，占用大量的堆外内存，再继续使用堆外内存时，就会OOM。但显然，该系统不是这种情况。

通过jstat观察线上系统的运行情况，结合日志查看一些请求的处理耗时，分析过往的GC日志，以及查看系统各个接口的调用耗时，我们得出了以下分析思路：

首先，查看接口调用耗时，系统的并发量不高，但每个请求的处理时间较长，平均每个请求需要1秒。

然后，通过jstat发现，随着系统的不断调用，会持续创建各种对象，包括Jetty本身不断创建DirectByteBuffer对象来申请堆外内存空间，直到Eden区满，就会触发YGC：

但在进行GC的一瞬间，可能有的请求还没有处理完，此时就有不少DirectByteBuffer对象处于存活状态，还没有被回收。当然，之前一些请求可能已经处理完毕，它们对应的DirectByteBuffer对象就可以被回收了。

此时，肯定会有一些DirectByteBuffer对象以及一些其他对象处于存活状态，需要转移到Survivor区。记得该系统上线时，内存分配极不合理，只给了年轻代一两百兆，而老年代却分配了七八百兆，导致年轻代中的Survivor区只有10兆。因此，往往在YGC后，一些存活的对象（包括了一些DirectByteBuffer）会超过10兆，无法放入Survivor区，直接进入Old区：

这样反复执行这个过程，导致一些DirectByteBuffer对象慢慢进入Old区，老年代中的DirectByteBuffer对象越来越多，而且这些DirectByteBuffer都关联了大量的堆外内存：

这些老年代中的DirectByteBuffer实际上很多都是可以回收的状态了，但因为老年代一直没有塞满，所以没有触发Full GC，也就自然不会回收老年代中的这些DirectByteBuffer。当然，老年代中这些没有被回收的DirectByteBuffer就一直关联占据了大量的堆外内存空间！

直到最后，当你想要继续使用堆外内存时，所有堆外内存都被老年代中大量的DirectByteBuffer给占用了，虽然它们可以被回收，但是因为始终没有触发老年代的Full GC，所以堆外内存也始终无法被回收掉。最终导致OOM！

有人可能会问，Java NIO怎么看起来这么笨拙？Java NIO难道没有考虑过会发生这种情况吗？

Java NIO确实考虑到了！它知道可能很多DirectByteBuffer对象可能没人用了，但因为未触发GC就导致它们一直占据堆外内存。Java NIO做了如下处理：每次分配新的堆外内存时，都会调用System.gc()，提醒JVM主动执行GC，去回收掉一些垃圾没人引用的DirectByteBuffer对象，释放堆外内存空间。

只要能触发GC去回收掉一些没人引用的DirectByteBuffer，就会释放一些堆外内存，自然就可以分配更多对象到堆外内存。但因为我们在JVM设置了：

-XX:+DisableExplicitGC

导致System.gc()不生效，因此导致OOM。

最终的优化方案如下：

1. 合理分配内存，给年轻代更多内存，让Survivor区域有更大的空间。
2. 移除-XX:+DisableExplicitGC这个限制，让System.gc()生效。

优化后，DirectByteBuffer一般就不会不断进入老年代了。只要它停留在年轻代，随着Young GC就会正常回收释放堆外内存。

只要移除-XX:+DisableExplicitGC限制，Java NIO发现堆外内存不足了，自然会通过System.gc()提醒JVM去主动垃圾回收，回收掉一些DirectByteBuffer，进而释放堆外内存。

# linux  # 操作系统  # ai  # 为什么  # Java  # jvm  # jetty  # nio  # 接口  # 栈  # 堆  # 线程  # 并发  # 对象  # 性能优化  # 就会  # 没人  # 用了  # 还没有  # 是由  # 但在  # 会在  # 我们可以  # 这种情况  # 移除 

相关栏目： 【 网站优化151355 】 【 网络推广146373 】 【 网络技术251813 】 【 AI营销90571 】

相关推荐： 厦门模型网站设计制作公司,厦门航空飞机模型掉色怎么办？  如何快速查询网站的真实建站时间？  Laravel如何生成PDF或Excel文件_Laravel文档导出工具与使用教程  如何在企业微信快速生成手机电脑官网？  在线制作视频的网站有哪些,电脑如何制作视频短片？  高端云建站费用究竟需要多少预算？  如何在Windows环境下新建FTP站点并设置权限？  详解Android中Activity的四大启动模式实验简述  Laravel如何实现多语言支持_Laravel本地化与国际化(i18n)配置教程  打开php文件提示内存不足_怎么调整php内存限制【解决方案】  laravel怎么通过契约（Contracts）编程_laravel契约（Contracts）编程方法  如何快速搭建高效香港服务器网站？  javascript基于原型链的继承及call和apply函数用法分析  Laravel如何优化应用性能？（缓存和优化命令）  微博html5版本怎么弄发超话_超话进入入口及发帖格式要求【教程】  Laravel的Blade指令怎么自定义_创建你自己的Laravel Blade Directives  宙斯浏览器视频悬浮窗怎么开启 边看视频边操作其他应用教程  如何撰写建站申请书？关键要点有哪些？  如何快速搭建支持数据库操作的智能建站平台？  Laravel全局作用域是什么_Laravel Eloquent Global Scopes应用指南  Laravel怎么清理缓存_Laravel optimize clear命令详解  Laravel如何构建RESTful API_Laravel标准化API接口开发指南  Laravel如何记录日志_Laravel Logging系统配置与自定义日志通道  如何在Ubuntu系统下快速搭建WordPress个人网站？  Win10如何卸载预装Edge扩展_Win10卸载Edge扩展教程【方法】  详解Oracle修改字段类型方法总结  Laravel如何使用Collections进行数据处理？（实用方法示例）  如何在Windows 2008云服务器安全搭建网站？  如何打造高效商业网站？建站目的决定转化率  Laravel如何使用Spatie Media Library_Laravel图片上传管理与缩略图生成【步骤】  Laravel如何使用集合（Collections）进行数据处理_Laravel Collection常用方法与技巧  Laravel如何生成API文档？（Swagger/OpenAPI教程）  Laravel如何使用Gate和Policy进行权限控制_Laravel权限判定与策略规则配置  java中使用zxing批量生成二维码立牌  JavaScript如何实现倒计时_时间函数如何精确控制  简单实现Android验证码  JavaScript如何实现错误处理_try...catch如何捕获异常？  如何有效防御Web建站篡改攻击？  Laravel的契約(Contracts)是什么_深入理解Laravel Contracts与依赖倒置  googleplay官方入口在哪里_Google Play官方商店快速入口指南  网站图片在线制作软件,怎么在图片上做链接？  如何在建站宝盒中设置产品搜索功能？  SQL查询语句优化的实用方法总结  电视网站制作tvbox接口,云海电视怎样自定义添加电视源？  Laravel如何实现事件和监听器？（Event & Listener实战）  如何在阿里云完成域名注册与建站？  Laravel Seeder怎么填充数据_Laravel数据库填充器的使用方法与技巧  Laravel如何实现全文搜索_Laravel Scout集成Algolia或Meilisearch教程  公司网站制作价格怎么算,公司办个官网需要多少钱？  laravel怎么为应用开启和关闭维护模式_laravel应用维护模式开启与关闭方法