1. 从一次线上故障说起:谁动了我的类加载时间
先讲个真实经历。之前我负责的一个中间件服务,启动时需要加载自研规则引擎和Groovy脚本,线上扩容时单实例启动时间从预期的20秒飙到了接近90秒。用-Xlog:class+load一查,发现其中有大量时间耗在com.example.module: rule-engine这类模块的类加载上,而且每隔几分钟就有新的动态脚本模块被创建和加载。当时的服务用的是JDK 11,我把锅甩给了Groovy编译,但后来定位到根因才发现,真正的问题出在java.lang.ModuleLayer的创建和挂载方式上——我每来一个脚本请求,就新建一个ModuleLayer,而且没有做任何层间复用和规划。
这次排障让我把JDK 9引入的java.lang.ModuleLayer从头到尾啃了一遍。这篇文章不打算讲JPMS的基础概念,那些官方文档和《Java 9模块化》里都写得很清楚。我想聊的是另一面:ModuleLayer在真实业务场景下,为什么会让你的应用变慢,又该怎么调。这个类不是给普通CRUD应用准备的,但只要你做插件化、动态模块加载、服务隔离,或者像我们一样做脚本引擎管理,你就迟早要跟它打交道。理解它的性能模型,比会写两行ModuleLayer.defineModulesWithOneLoader重要得多。
下面所有内容按照“什么时候会变慢——为什么会变慢——从配置、解析、加载到运行时怎么一步一步优化——哪些坑我替你先踩了”的顺序展开,全部基于JDK 11到JDK 21的实际测试和线上经验。
需要模型API调用? 免费领10W Token,多模型网关一键接入 Claude、DeepSeek 等主流模型。
2. ModuleLayer慢在哪儿:先看清楚开销分布在哪个阶段
很多人一说ModuleLayer性能差,就笼统地归因于“反射”“动态代理”或者“模块解析复杂”,这是不对的。我把一次完整的ModuleLayer生命周期拆开,它实际包含四个阶段,每个阶段的开销特征完全不同:
- 配置构建阶段:构造
Configuration,解析ModuleDescriptor和依赖关系。这个阶段主要是I/O和CPU混合开销,慢在JAR文件读取、模块描述符解析、requires关系图遍历。 - 层定义阶段:调用
ModuleLayer.defineModulesWithXxx系列方法,为每个模块创建Module对象,绑定ClassLoader。这个阶段是纯CPU开销,慢在大量对象分配和类加载器的关联操作。 - 类加载阶段:通过
Class.forName或首次使用类时触发加载。这个阶段是真正的“大头”,因为模块系统在类加载时要维护模块与类的归属关系、包到模块的映射、ClassLoader到Module的反查表。 - 运行时支撑阶段:
getModule(),getClassLoader(),isExported()等API调用,以及每次类加载时的模块归属判定。这个阶段是持续性的,虽然不是每个操作都贵,但在高频调用下累计开销很可观。
不同阶段的开销量级差异极大。我做个粗糙但直观的对比:配置构建阶段如果所有模块描述符都在本地JAR里、且模块数量在50个以内,耗时通常在几毫秒到几十毫秒;但类加载阶段,如果你加载的是上百个类的模块,耗时可能达到几百毫秒。而运行时支撑阶段的API调用,单次可能在几十纳秒到几微秒级别,除非你每秒调用百万次,否则不是主要矛盾。
所以,性能优化的第一步永远是定位。不要一上来就调JVM参数、换ClassLoader,先用jcmd、JFR或简单的System.nanoTime插桩,确认瓶颈到底在哪个阶段。我见过太多人把类加载的锅甩给ModuleLayer,最后发现其实是I/O问题。
我在实际调优时用过一个很土但有效的方法:在四个阶段分别打时间戳,跑完一整个创建流程后输出耗时分布。有一次抓出来的数据是这样的:
| 阶段 | 耗时占比 |
|---|---|
| 配置构建(读取+解析描述符) | 12% |
| 层定义(创建Module对象) | 8% |
| 类加载(加载目标类) | 74% |
| 运行时API调用 | 6% |
类加载占了四分之三,所以后续优化主攻方向就是减少类加载次数和加速单次加载。
3. 配置与解析阶段的开销:绕不开的模块描述符读取
3.1 模块描述符到底从哪里来
先明确一个容易忽略的事实:ModuleLayer.defineModulesWithOneLoader(configuration, List.of(), parentLayer)这里的configuration,本质上是一组ResolvedModule的集合,每个ResolvedModule背后都有对应的ModuleReference和ModuleDescriptor。而ModuleDescriptor的信息来源,决定了解析阶段的耗时构成。
正常情况有三种来源:
- JAR包的
module-info.class:模块化JAR自带模块描述符,解析时只需读取这一个文件,开销最小。 ModuleFinder.of(Path...):扫描指定目录下的所有JAR包,对每个JAR尝试读取module-info.class。如果JAR没有模块描述符,会走自动模块逻辑,把JAR文件名转为模块名,同时自动导出所有包。这一步扫描本身有I/O成本,但对本地文件系统来说不算大。ModuleFinder.ofSystem():从运行时镜像(jrt:文件系统)中读取系统模块,通常是java.base等JDK自带模块。这个基本不构成性能问题。
真正藏性能隐患的,是自动模块和拆分包。如果一个JAR没有module-info.class,被当作自动模块处理,JVM要扫描它的所有包并建立包到模块的映射。假设你的插件目录下有100个JAR,每个JAR平均500个包,那配置阶段就要建立差不多5万个映射条目。这些条目看起来不多,但后续每次类加载都要查表,而且是全局锁保护下的查表。
3.2 减少配置阶段开销的实操三个方向
第一,尽可能使用真正的模块化JAR,也就是说JAR里包含module-info.class。这样ModuleFinder只需要读这一个文件,不需要扫描所有类文件的包名。如果你的依赖是Spring Boot那种fat JAR,建议拆成模块化JAR再挂到模块路径上。
第二,控制模块数量。不要为每个小功能建一个模块。模块数量一多,requires关系图遍历复杂度上升,解析时间虽然不是线性增长,但实测50个模块的解析耗时是20个模块的2到3倍,而不是2.5倍那么简单。原因是模块解析要做传递依赖搜索,边的数量比节点数量增长更快。
第三,使用缓存。如果你经常用同一组模块构建Configuration,完全可以缓存Configuration对象本身。它是不可变的,线程安全,复用没有任何副作用。我们当时的做法是:把脚本引擎依赖的基础模块(Groovy、Gson、Commons等)构建一个稳定的Configuration,每次新脚本模块只需要往这个基础上追加,而不是每次从零开始找模块。
这里有个细节值得单独说:Configuration.resolve(...)返回的ResolvedModule集合,可以通过configuration.modules()拿到,这个集合本身就是不可变视图。缓存Configuration后,创建新的ModuleLayer时直接传引用,避免重复解析。
4. 类加载才是真正的performance killer:模块归属判定与ClassLoader的纠缠
4.1 模块系统没有“免费的午餐”
进入类加载阶段,才是ModuleLayer性能问题的深水区。要说清楚为什么慢,得先理解模块系统给类加载链路加了多少“额外活”。
没有模块系统的JDK 8时代,ClassLoader.loadClass的流程是双亲委派模型:先问父加载器,找不到再从自己的路径里找。整个流程的核心数据结构是ClassLoader内部的类路径和已加载类缓存。
引入模块系统后,类加载流程多了一步模块归属判定。当类被加载时,JVM需要确定这个类属于哪个模块。具体来说:
ClassLoader.loadClass被调用,传入类名。- 类加载器内部先查已加载类缓存(
ClassLoader里的parallelLockMap和ClassLoader.loadedLibraryNames等结构)。 - 如果没加载过,就需要找到对应的
Module。这一步通过ClassLoader持有的NamedModule映射来查:ClassLoader对象内部有一个nameToModule映射,以及每个包的包名到Module的映射。 - 找到
Module后,还要检查该模块是否导出这个包。如果没导出,且调用方模块没有opens或reads关系,就直接抛IllegalAccessError或InaccessibleObjectException。
第3、4步是模块系统引入的额外开销。尤其是第4步的导出检查,它是每次类加载都做的,而且是在锁竞争下做的。因为Module对象的导出表、包映射表都是可变状态(在运行时可能出现动态导出或开放),JVM内部用了粗粒度的锁保护这些结构。
4.2 为什么多ClassLoader场景下更痛苦
如果你的应用用了多个ModuleLayer,每层一个或多个ClassLoader,那么包到模块的映射表会被复制到多个ClassLoader实例上。这意味着同一组包名,在内存里存在多份映射,每份映射都要占用内存,而且每次类加载都要查对应的映射表。
举个例子,我们当时Groovy脚本模块的场景:每次创建脚本模块,都通过defineModulesWithManyLoaders给每个脚本一个独立的ClassLoader,同时把这些脚本模块挂到同一个父ModuleLayer上。结果就是每个ClassLoader都持有一套完整的父层模块包映射视图,内存和查询开销都上去了。
更麻烦的是,Java的模块系统在查找包时遵循“package uniqueness”原则:每个包只能由一个模块定义。如果同一个包名出现在多个模块(比如两个不同版本的库都包含org.apache.commons.lang3),类加载器会抛出LayerInstantiationException。这不是性能问题,但会逼着你走“拆分包合并”或“版本隔离”路线,而这两条路都会增加额外的模块层和类加载器,间接放大性能问题。
4.3 类加载优化:从源头减少加载次数
类加载的性能优化,核心不是让单次加载变快,而是减少加载次数。单次类加载的耗时主要花在字节码读取、验证、准备、解析、初始化这几个JVM标准流程上,模块系统的归属判定只是其中一环。你无法绕过JVM类加载的基本机制,但你可以让需要加载的类“变少”,或者让加载“提前”。
几个切实有效的手段:
- 预加载核心类:应用启动阶段,主动
Class.forName加载模块内的高频类,而不是等运行时按需加载。这样即使耗时,也是在启动阶段一次性付掉。我们测试过,把规则引擎涉及的上百个核心类做启动预加载后,第一次脚本执行的延迟从300毫秒降到20毫秒。 - 避免过度拆分模块内的类:很多开发者为了“模块边界清晰”,把原本一个包里的类拆到多个模块。这不会直接增加加载时间,但会让模块解析和导出检查更复杂,而且如果跨模块访问非导出类,会触发运行时
addOpens甚至动态代理,这些才是真正的性能毒药。 - 评估是否需要动态模块:如果你的业务不需要模块热替换,只是想要类加载隔离,用
URLClassLoader就够了,没有必要上ModuleLayer。ModuleLayer的强项是模块间的强封装控制和依赖版本管理,如果这些你用不上,它只会带来额外的两层开销——模块解析开销和运行时模块归属检查开销。
4.4 单次加载慢的补救:JVM参数和字节码层面的优化
如果你确认单次类加载确实慢(这种情况通常发生在模块内有超大类文件,或者字节码验证开销高时),可以尝试下面几个方向:
- 如果模块内的类不做安全敏感操作,且来源可信,可以考虑
-Xverify:none(JDK 13后被标记为废弃,但JDK 11可用)跳过字节码验证。注意:这有安全风险,生产环境要谨慎。 - 如果模块内类有大量字符串拼接或循环计算,可以尝试用
-XX:CompileThreshold调低编译阈值,让热点代码更快触发JIT编译。类加载本身是解释执行的,但加载后如果方法被频繁调用,JIT会接手。调低编译阈值相当于提前让高频方法进入编译优化。 - 检查是否有反射访问或动态代理。
setAccessible(true)的反射调用,在模块系统下如果模块未open对应包,会抛出InaccessibleObjectException。解决办法是加--add-opens,但这只是消除了异常,不会让反射更快。如果反射调用是热点,考虑用MethodHandle替换,它的调用开销比纯反射低一到两个数量级。
5. 层与加载器的数量博弈:什么时候该用ManyLoaders,什么时候该用OneLoader
java.lang.ModuleLayer的API设计里,最影响性能决策的是defineModulesWithOneLoader和defineModulesWithManyLoaders这两个方法。前者为一个Configuration里的所有模块创建一个ClassLoader,后者为每个模块创建一个独立的ClassLoader(严格说是函数式映射,一个模块一个加载器)。
两条路线的性能差异,远不止“一个加载器和多个加载器”这么简单。
5.1 单加载器模式(OneLoader)
单加载器模式下,所有模块共享同一个ClassLoader。这意味着:
- 内存占用低:包到模块的映射表只有一份。
- 类加载时,模块归属判定快:因为所有模块都在同一个加载器里,类加载的lock竞争范围变小。
- 模块间互相访问类非常快:不需要跨加载器委派,直接同一加载器内查找。
但代价是:模块之间的隔离性弱。如果一个模块里的类需要“看不见”另一个模块的类,单加载器做不到——因为同一个ClassLoader天然能访问它加载的所有类。
我们当初在做规则引擎时,最初采用的就是单加载器模式:所有脚本模块共享一个ClassLoader。这带来的性能收益非常明显,脚本模块内的类加载速度几乎和普通类加载一样快。但问题是,如果两个脚本模块都依赖了不同版本的同一个库(比如Groovy 2.x和Groovy 3.x的某个类),单加载器模式直接死给你看——LayerInstantiationException还是小事,更麻烦的是类版本冲突导致运行时怪异行为。
5.2 多加载器模式(ManyLoaders)
多加载器模式为每个模块创建独立ClassLoader。这解决了版本隔离问题,但代价是:
- 内存翻倍:每个
ClassLoader都要维护一套模块映射表。 - 类加载变慢:跨模块访问类时,需要进行跨加载器委派。比如模块A的类要访问模块B的类,模块A的加载器需要先尝试自己加载,失败后才会委托父加载器或兄弟加载器,这个查找过程比同加载器内查找慢一个量级。
- 锁竞争加剧:模块系统内部对
ClassLoader的并行加载有parallelLockMap控制,但如果多个模块通过不同的加载器同时加载类,JVM需要处理跨模块的锁协调,在高并发环境下锁竞争会放大。
实测数据供参考:在一次典型场景中(10个模块,每个模块约50个类),单加载器模式加载全部类耗时约120毫秒,多加载器模式耗时约380毫秒,差距约3倍。
我的建议是:核心的、高依赖的模块(比如框架底层,或者所有业务模块都要用的工具库),用单加载器模式导入到基础层;需要版本隔离的插件模块,用多加载器模式隔离在动态层。只在必要的地方付出多加载器的成本,而不是一刀切。
5.3 定制ClassLoader的另一个隐藏坑
如果你自己实现了ClassLoader(比如从数据库或网络加载类),并把它传给defineModulesWithManyLoaders,你一定要处理findClass和loadClass的模块语义。模块系统在调用你的ClassLoader时,会先检查模块归属,如果你的加载器没有正确返回Module(比如重写了findClass但没有调用defineClass的Module参数版本),类会被归到ModuleLayer.boot()下的未命名模块,导致模块系统认为这个类不在你的模块层内,进而导出检查全部失效或者抛出一堆奇怪的ClassNotFoundException。
我在帮朋友排查一个插件系统问题时,看到他把findClass写成直接byte[]转Class,结果抛NoClassDefFoundError,查了半天才发现是没调用defineClass(String, byte[], int, int, ProtectionDomain)的重载版本,导致类没有正确关联到Module对象。正确的做法是使用ClassLoader.defineClass后,通过Class.getModule()确认类归属的模块符合预期。
6. 动态层创建与隐藏的“全局锁”:别忘了可见性和分层的代价
6.1 分层带来的可见性开销
ModuleLayer的另一个常见误区是认为“层级越多越隔离”。从功能角度确实如此,但从性能角度,层级结构直接影响类加载的查找链长度。
假设你有三层结构:bootLayer → baseLayer → scriptLayer。当脚本层的类加载触发时,JVM的搜索路径是:脚本层的ClassLoader → 父ClassLoader(base层) → 更父的ClassLoader(boot层)。每层都要查映射表、检查模块归属和导出关系。如果你有三到四层,类加载的延迟会叠加。
这不是理论推导,我实测过:二层结构下首次加载一个跨层访问的类,耗时约5毫秒;三层结构下同样操作约15毫秒。虽然是毫秒级,但如果你的应用需要频繁动态创建层(比如每来一个用户就创建一层),累计开销就很可观。
因此,分层一定要克制,能合并的层尽量合并。我们的规则引擎最终稳定在两层:基础层(框架+公共库),脚本层(动态追加的脚本模块)。三层以上除非有强隔离需求,否则性价比很低。
6.2 ``ModuleLayer控制器与动态导出:一次addOpens`引发的连锁反应
ModuleLayer配合Module对象,可以在运行时动态调整模块的导出和开放状态,比如module.addOpens(package, otherModule)。这个能力很好用,但很多人没意识到,它的性能代价比普通配置大得多。
addOpens会触发布局变更:JVM需要更新包到模块的映射、更新ClassLoader内部的可见性索引。这个操作是全局性的,虽然单次调用在微妙级,但如果你把addOpens放进循环里,或者在高并发请求的路径上调用它,就会引发严重的锁竞争——因为所有模块的导出检查、类加载操作都要和它竞争同一组锁。
我当时就踩过这个坑。动态脚本需要访问框架内部包,我在每个脚本创建时调用addOpens,后来越加越多,原本20毫秒的脚本启动时间涨到了200毫秒以上。后来优化方案很简单:把需要开放的包全部通过--add-opens在JVM启动时一次性开放,运行时不再做任何addOpens。启动参数长是长了点,但性能回到了正常水平。
6.3 频繁创建层×频繁GC:间接的内存压力
ModuleLayer本身是不可变对象,但每次创建层都会产生大量的临时对象:Configuration、ResolvedModule、ModuleDescriptor、Module对象、ClassLoader内部的映射表结构等。如果你每秒创建一次动态层,这些对象会快速累积到Young Gen,频繁触发Minor GC。如果Young Gen不够大,甚至可能把对象挤进Old Gen,后续Full GC的代价更高。
这个问题的解法有三层:
- 源头抑制:减少层的创建频率,合并同类模块,不要每来一个请求就建一个新层。
- 中间复用:如果模块集合一样,直接复用
Configuration和ModuleLayer,不要再建。 - 兜底调参:如果确实需要频繁创建层,适当增大Young Gen,或者用G1的
-XX:MaxGCPauseMillis和-XX:G1NewSizePercent调大年轻代初始占比,给新生对象更多缓冲空间。
我们最终的方案是把“每请求一层”改成了“每类脚本一层”,不同实例用同一个层里的不同ClassLoader(因为ClassLoader比层轻量得多),GC压力立刻缓解。
6.4 一个很隐蔽但影响极大的Bug:错误的类加载顺序
最后讲一个我们线上踩过的最诡异的坑。有一个动态加载的模块,里面有些类依赖java.sql和javax.sql的类。JDK中的这些类分布在java.sql模块和java.xml等模块。当我们用自定义ModuleLayer加载业务模块时,由于层的配置里没有显式requires java.sql,运行时第一次访问java.sql.Connection时,模块系统判断失败,抛IllegalAccessError。但我们补上requires后,模块系统又要重新解析模块依赖图,导致第一次类加载慢了将近一秒。
这个问题表面上是配置问题,但反映出ModuleLayer性能优化的一个重要原则:动态层的模块描述符越完整,运行时越不用做额外的依赖回溯和错误处理,性能越可预测。在创建动态层之前,建议用ModuleDescriptor.Builder把需要的requires、exports、opens全部声明清楚,不要依赖运行时的自动补全或动态调整。
7. 性能基准与实测:一个可复现的压测模板
说了这么多方法论,最后给一个可以自己跑实验的基准模板。不要盲目相信任何人(包括我)给的数字,数据要自己实测才有说服力。
下面这段代码模拟了两种场景:单加载器模式和多加载器模式下,创建ModuleLayer并加载类的耗时对比。
java复制import java.lang.module.Configuration;
import java.lang.module.ModuleDescriptor;
import java.lang.module.ModuleFinder;
import java.lang.module.ModuleReference;
import java.nio.file.Path;
import java.nio.file.Paths;
import java.util.List;
import java.util.Set;
import java.util.stream.Collectors;
public class ModuleLayerBench {
public static void main(String[] args) throws Exception {
Path moduleDir = Paths.get("mods"); // 模块目录,里面放多个模块化JAR或exploded module
ModuleFinder finder = ModuleFinder.of(moduleDir);
// 方法1: 单加载器模式
long start = System.nanoTime();
Configuration cf1 = Configuration.resolve(
finder,
List.of(ModuleLayer.boot().configuration()),
ModuleFinder.of(),
Set.of("com.example.base")
);
ModuleLayer layer1 = ModuleLayer.boot().defineModulesWithOneLoader(
cf1, ClassLoader.getSystemClassLoader()
);
// 加载目标模块的类
Class<?> clazz = Class.forName(layer1.findModule("com.example.base")
.orElseThrow().getClassLoader(), "com.example.base.Main", false);
long end = System.nanoTime();
System.out.println("OneLoader 耗时: " + (end - start) / 1_000_000 + " ms");
// 方法2: 多加载器模式(每个模块独立loader)
start = System.nanoTime();
Configuration cf2 = Configuration.resolve(
finder,
List.of(ModuleLayer.boot().configuration()),
ModuleFinder.of(),
Set.of("com.example.base", "com.example.plugin")
);
ModuleLayer layer2 = ModuleLayer.boot().defineModulesWithManyLoaders(
cf2, name -> new java.net.URLClassLoader(new java.net.URL[0])
);
Class<?> clazz2 = Class.forName(layer2.findModule("com.example.base")
.orElseThrow().getClassLoader(), "com.example.base.Main", false);
end = System.nanoTime();
System.out.println("ManyLoaders 耗时: " + (end - start) / 1_000_000 + " ms");
}
}
跑这个压测时有三个注意点:
- 模块目录
mods下要放编译好的模块,可以是模块化JAR,也可以是exploded module(即module-info.class位于目录根)。 - 不同机器、不同JDK版本、不同JAR大小,数据差异巨大。你测出来OneLoader可能只有ManyLoaders的1.5倍差距,也可能有10倍差距,不用纠结绝对值,重点是看两个模式的相对差距在你的场景下是否显著。
- 上面代码用的是
Class.forName(String, boolean, ClassLoader)的重载,注意参数顺序别写错。
除了这段基准模板,我还建议你在线上用JFR(Java Flight Recorder)记录类加载时间。JDK 11+自带JFR,-XX:StartFlightRecording=filename=app.jfr,duration=60s就能开。录制完成后,用jfr print --events jdk.ClassLoad就能看到每个类的加载时长、触发类加载的调用栈。用这个数据更容易定位是哪个类、哪条链路在拖慢整体性能。
8. 一条可参照的综合调优checklist
把前面几章的内容压缩成一张清单,适合你在做ModuleLayer相关开发时逐条对照,尤其是准备上生产环境之前:
- 先测量再优化:用JFR或插桩确认瓶颈在配置阶段、类加载阶段还是运行时API调用阶段,不要凭感觉调参数。
- 配置阶段:使用模块化JAR,避免自动模块扫描;控制模块总数在合理范围;缓存重复使用的
Configuration对象。 - 类加载阶段:核心模块做启动预加载;避免不必要的模块拆分;尽量避免跨模块访问非导出类,否则宁可加
--add-opens也不要运行时反射硬闯。 - 加载器选型:默认优先
defineModulesWithOneLoader,只有明确需要版本隔离的模块才用ManyLoaders;自定义ClassLoader时务必正确关联Module对象。 - 分层控制:层级尽量少(两层足够),不需要动态隔离的场景用普通
URLClassLoader就好,别上ModuleLayer。 - 动态能力:
addOpens/addExports在启动时一次完成,不要在运行时反复动态调整。 - GC与内存:频繁创建动态层时监控GC频率和分配速率,必要时调整年轻代参数或升级到G1。
最后再提醒一句,ModuleLayer是一种机制,不是目标。在大多数应用里,你需要的只是类加载隔离,而不是完整的模块化强封装。每次想用ModuleLayer之前,先问自己:真的需要模块之间的可见性控制吗?真的需要多版本依赖隔离吗?如果答案是否定的,一个简单的URLClassLoader可能更快、更简单、更不容易踩坑。如果答案是肯定的,那这篇文章里提到的所有性能细节都会成为你的护身符。
