首页 > 代码库 > 并行类加载与OSGI类加载
并行类加载与OSGI类加载
这回来分析一下OSGI的类加载机制。
先说一下OSGI能解决什么问题吧。
记得在上家公司的时候，经常参与上线。上线一般都是增加了一些功能或者修改了一些功能，然后将所有的代码重新部署。过程中要将之前的服务关掉，而且不能让客户访问。虽然每回的夜宵都不错，但还是感觉这个过程很麻烦，很别扭。
为什么明明只修改了一部分代码，却都要重新来一遍。
OSGI架构里面，很重要的一个理念就是分模块(bundle)。如果你只是修改了一个模块，就可以只热替换这个模块，不影响其它模块。想想就很有吸引力。要实现这种功能，类加载的委派模型必须大改。像AppClassLoader --》ExtClassLoader --》BootstrapClassLoader这种固定的树形结构，明显不能扩展，不能实现需求。
OSGI的规范要求每个模块都有自己的类加载器，而模块之间的依赖关系，就形成了各个类加载器之间的委派关系。这种委派关系是动态的，是自由恋爱，而不是指腹为婚。。。。。。
当然，委派是要依据规则的。这也好理解啊，谈婚论嫁时，女方的家长肯定会问，有房吗、有车吗、有几块腹肌啊。哎，又扯远了。
当一个模块(bundle)的类加载器遇到需要加载某个类或查找某个资源的请求时，规则步骤如下：
1）如果在以java.*开头的package中，那么这个请求需要委派给父类加载器
2）如果在父类委派清单所列明的package中，还是委派给父类加载器
3）如果在import-package标记描述的package中，委派给导出这个包的bundle的类加载器
4）如果在require-bundle导入的一个或多个bundle的包中，就好安装require-bundle指定的bundle清单顺序逐一委派给对应bundle的类加载器
5 ）搜索bundle内部的classpath
6）搜索每个附加的fragment bundle的classpath
7）如果在某个bundle已经声明导出的package中，或者包含在已经声明导入（import-package或require-bundle）的package中，搜索终止
8）如果在某个使用dynamicimport-package声明导入的package中，尝试在运行时动态导入这个package
9）如果可以确定找到一个合适的完成动态导入的bundle，委派给该bundle的类加载器
上面这部分完全照抄周志明的著作《深入理解OSGI》。规则里面的父类加载器、bundle等概念，读者都可以从书中找到完整的讲解，我这里就不展开了。
根据这个规则，所有的bundle之间的类加载形成了错综复杂的网状结构，不再是一沉不变的单一的树状结构。
但是网状结构，会有一个致命的问题。在jdk1.6包括之前，ClassLoader的类加载方法是synchronized。
protected synchronized Class<?> loadClass(String name, boolean resolve)
我们想象一个场景：bundle A 和 bundle B 互相引用了对方的package。这样在A加载B的包时，A在自己的类加载器的loadClass方法中，会最终调用到B的类加载器的loadClass方法。也就是说，A首先锁住自己的类加载器，然后再去申请B的类加载器的锁；当B加载A的包时，正好相反。这样，在多线程下，就会产生死锁。你当然可以让所有的类加载过程在单线程里按串行的方式完成，安全是安全，但是效率太低。
由此，引出了本文的另一个主题---并行类加载。
synchronized方法锁住的是当前的对象，在这种情况下，调用loadClass方法去加载一个类的时候，锁住的是当前的类加载器，也就不能再用这个类加载器去加载别的类。效率太低，而且容易出现死锁。
于是设计jdk的大牛，对这种模式进行了改进。大牛就是大牛！！！
看看jdk1.6之后的loadClass方法：
protected Class<?> loadClass(String name, boolean resolve) throws ClassNotFoundException { synchronized (getClassLoadingLock(name)) { // First, check if the class has already been loaded Class<?> c = findLoadedClass(name); if (c == null) { long t0 = System.nanoTime(); try { if (parent != null) { c = parent.loadClass(name, false); } else { c = findBootstrapClassOrNull(name); } } catch (ClassNotFoundException e) { // ClassNotFoundException thrown if class not found // from the non-null parent class loader } if (c == null) { // If still not found, then invoke findClass in order // to find the class. long t1 = System.nanoTime(); c = findClass(name); // this is the defining class loader; record the stats sun.misc.PerfCounter.getParentDelegationTime().addTime(t1 - t0); sun.misc.PerfCounter.getFindClassTime().addElapsedTimeFrom(t1); sun.misc.PerfCounter.getFindClasses().increment(); } } if (resolve) { resolveClass(c); } return c; } }
synchronized移到了方法内的代码块中，也就是说不再是简单的锁定当前类加载器，而是锁定一个生成的对象。
那么这个充当锁的对象是如何生成的？
protected Object getClassLoadingLock(String className) { Object lock = this; if (parallelLockMap != null) { Object newLock = new Object(); lock = parallelLockMap.putIfAbsent(className, newLock); if (lock == null) { lock = newLock; } } return lock; }
parallelLockMap是一个ConcurrentHashMap，putIfAbsent(K, V)方法查看K和V是否已经对应，是的话返回V，否则就将K，V对应起来，返回null。
第一个if判断里面的逻辑，一目了然：对每个className关联一个锁，并将这个锁返回。也就是说，将锁的粒度缩小了。只要类名不同，加载的时候就是完全并行的。这与ConcurrentHashMap实现里面的分段锁，目的是一样的。
我这里有2个问题希望读者思考一下：
1）为什么不直接用className这个字符串充当锁对象
2）为什么不是直接new一个Object对象返回，而是用一个map将className和锁对象缓存起来
上面的方法中还别有洞天，为什么要判断parallelLockMap是否为空，为什么还有可能返回this，返回this的话不就是又将当前类加载器锁住了吗。这里返回this，是为了向后兼容，因为以前的版本不支持并行。有疑问就看源码，
// Maps class name to the corresponding lock object when the current // class loader is parallel capable. // Note: VM also uses this field to decide if the current class loader // is parallel capable and the appropriate lock object for class loading. private final ConcurrentHashMap<String, Object> parallelLockMap; private ClassLoader(Void unused, ClassLoader parent) { this.parent = parent; if (ParallelLoaders.isRegistered(this.getClass())) { parallelLockMap = new ConcurrentHashMap<>(); package2certs = new ConcurrentHashMap<>(); domains = Collections.synchronizedSet(new HashSet<ProtectionDomain>()); assertionLock = new Object(); } else { // no finer-grained lock; lock on the classloader instance parallelLockMap = null; package2certs = new Hashtable<>(); domains = new HashSet<>(); assertionLock = this; } }
可见，对于parallelLockMap的处理一开始就分成了2种逻辑：如果将当前类加载器注册为并行类加载器，就为其赋值；否则就一直为null。
ParallelLoaders是ClassLoader的内部类
/** * Encapsulates the set of parallel capable loader types. */ private static class ParallelLoaders { private ParallelLoaders() {} // the set of parallel capable loader types private static final Set<Class<? extends ClassLoader>> loaderTypes = Collections.newSetFromMap( new WeakHashMap<Class<? extends ClassLoader>, Boolean>()); static { synchronized (loaderTypes) { loaderTypes.add(ClassLoader.class); } } /** * Registers the given class loader type as parallel capabale. * Returns {@code true} is successfully registered; {@code false} if * loader‘s super class is not registered. */ static boolean register(Class<? extends ClassLoader> c) { synchronized (loaderTypes) { if (loaderTypes.contains(c.getSuperclass())) { // register the class loader as parallel capable // if and only if all of its super classes are. // Note: given current classloading sequence, if // the immediate super class is parallel capable, // all the super classes higher up must be too. loaderTypes.add(c); return true; } else { return false; } } } /** * Returns {@code true} if the given class loader type is * registered as parallel capable. */ static boolean isRegistered(Class<? extends ClassLoader> c) { synchronized (loaderTypes) { return loaderTypes.contains(c); } } }
原来，一个类加载器想要成为一个并行类加载器，是需要自己注册的，看看注册方法
@CallerSensitive protected static boolean registerAsParallelCapable() { Class<? extends ClassLoader> callerClass = Reflection.getCallerClass().asSubclass(ClassLoader.class); return ParallelLoaders.register(callerClass); }
最终还是调用了内部类的注册方法。源码在上面，可以看到，一个类加载器要想注册，它的父类必须已经注册了，也就是说从继承路径上的所有父类都必须是并行类加载器。而且一开始，就把ClassLoader这个类注册进去了。
最后，来看看并行类加载在Tomcat上的应用。原本WebappClassLoader没有注册，只能串行加载类。后来，是阿里意识到了这个问题，解决方案被Tomcat采纳。
static { // Register this base class loader as parallel capable on Java 7+ JREs Method getClassLoadingLockMethod = null; try { if (JreCompat.isJre7Available()) { final Method registerParallel = ClassLoader.class.getDeclaredMethod("registerAsParallelCapable"); AccessController.doPrivileged(new PrivilegedAction<Void>() { @Override public Void run() { registerParallel.setAccessible(true); return null; } }); registerParallel.invoke(null); getClassLoadingLockMethod = ClassLoader.class.getDeclaredMethod("getClassLoadingLock", String.class); } } catch (Exception e) { // ignore }
这段代码出现在WebappClassLoader类的父类WebappClassLoaderBase里，通过反射调用了ClassLoader类的注册方法。
类的加载能够并行后，我们启动应用的时候，肯定会更快。
并行类加载与OSGI类加载