SPI 在 Java 中的实现与应用 | 京东物流技术团队
![SPI在Java中的实现与应用 | 京东物流技术团队](https://static001.geekbang.org/infoq/ad/ad4b52060f9203c7610337da541552f8.png)
1 SPI 的概念
API
API 在我们日常开发工作中是比较直观可以看到的,比如在 Spring 项目中,我们通常习惯在写 service 层代码前,添加一个接口层,对于 service 的调用一般也都是基于接口操作,通过依赖注入,可以使用接口实现类的实例。
简单形容就是这样的:
![](https://static001.geekbang.org/infoq/33/335fb8148b4052f136fff770e557996d.png)
图 1:API
如上图所示,服务调用方无需关心接口的定义与实现,只进行调用即可,接口、实现类都是由服务提供方提供。服务提供方提供的接口与其实现方法就可称为 API,API 中所定义的接口无论是在概念上还是具体实现,都更接近服务提供方(实现方),通常接口与实现类在同一包中;
SPI
如果我们将接口的定义放在调用方,服务的调用方定义一个接口规范,可以由不同的服务提供者实现。并且,调用方能够通过某种机制来发现服务提供方,通过调用接口使用服务提供方提供的功能,这就是 SPI 的思想。
SPI 的全称是 Service Provider Interface,字面意思就是服务提供者的接口,是由服务提供者定义的接口。
![](https://static001.geekbang.org/infoq/6a/6acb785eecbd455316f1fc4c918ce7dd.png)
图 2:SPI
服务提供方按接口规范实现服务,服务调用方通过某种机制为这个接口寻找到这个服务, SPI 的特点很明显:接口的定义(调用方提供)与具体实现是隔离的(服务提供方提供),使用接口的实现类需要依赖某种服务发现机制。
通过对比,我们可以看出接口在 API 与 SPI 中的含义还是有很大的不同,总的来说,API 中的接口是更像是服务提供者给调用者的一个功能列表,而 SPI 中更多强调的是,服务调用者对服务实现的一种约束。
2 为什么要使用 SPI
**面向接口编程:**面向对象的设计与编程中,我们经常强调“依赖抽象而不是具体”,这样做就是为了实现高内聚、低耦合,提供代码灵活性和可维护性等等。
**提供标准标准但没有具体实现的业务场景:**SPI 机制的使用场景就是没有统一实现标准的业务场景。一般就是,服务调用方有定义好的标准接口,但是没有统一的实现,需要服务提供方提供其具体实现。
**解耦:**SPI 机制优势就是低耦合。将接口的定义以及具体实现分离,可以实现运行时根据业务实际场景启用或者替换具体实现类。
3 Java 中如何使用 SPI
![](https://static001.geekbang.org/infoq/7a/7a42229db382e2b7b65af078aae2146e.jpeg?x-oss-process=image%2Fresize%2Cp_80%2Fauto-orient%2C1)
接口定义、服务实现这些我们都轻车熟路,调用方直接依赖接口不依赖具体实现,这是依赖倒置原则,我们在 Spring 项目中使用 API 时,会使用 Spring 的依赖注入(DI)来实现“服务发现”,同样地,SPI 的重点也是如何让调用方发现接口的具体实现,也就是上文提到的某种服务发现机制。
SPI 的服务发现机制是由 ServiceLoader 提供,ServiceLoader 是 Java 在 JDK 6 中引进的新特性,它主要是用来发现并加载一系列的 service provider。当服务的提供者,提供了服务接口的一种实现之后,只需要在 jar 包的 META-INF/services/目录里同时创建一个以服务接口命名的文件,该文件的内容就是实现该服务接口的具体实现类。而当外部程序装配这个模块的时候,就能通过该 jar 包 META-INF/services/里的配置文件找到具体的实现类名,并加载实现类,完成依赖的注入,这就是 Java SPI 的服务发现机制。
下面就结合一个示例来具体讲讲。若有这样一个需求,需要使用一个接口来完成内容查找服务,接口的具体实现交给其他服务提供方,实现可能是基于文件系统的查找,也可能是基于数据库的查找。
(1)定义接口
作为服务调用方,需要先定义一套接口规范,用来规范之后的服务提供方按规范来实现接口。这样,不管是谁提供的实现方法,调用方都可以按相同的方式来调用接口。
创建一个项目 search-standard,提供一个查找服务标准接口,先定义调用方的内容查找方法:
这个接口就是给服务提供方来实现的,将它打包发布 mvn clean install,确保 maven 仓库中有该 jar 包,之后提供者在项目中就可以引入这个 jar 包了。
(2)服务实现
制定并发布完标准接口后,我们假设第一个服务提供方提供了一种文件查找的实现。新建项目 search-file,并引入刚才发布的标准接口 jar 包:
实现定义好的接口:
并在项目的 resources 的目录下,创建 META-INF/services 目录,然后以前面定义的接口名 com.gwz.spi.learn.Search 创建文件,并在文件中写入实现类的全限定名。
![](https://static001.geekbang.org/infoq/71/71ffb58cb4256b1b1b801e63779ace97.png)
一个服务方的简单实现就完成了,用 maven 打成 jar 包,发布到 maven 之后就可以提供给调用方使用了。
接着,按上述实现方式,再创建一个项目 search-database 使用数据库的实现接口:
同样,打包发布后就可以提供给调用方使用了。
(3)服务发现
接下来关键的一步就是服务发现,服务发现需要依赖 ServiceLoader 的使用。创建一个新项目 search-sever,引入上面打好的两个提供方的 jar 包。
虽然每个服务提供者对于接口都有不同的实现,但是作为调用者来说,它并不需要关心具体的实现类,我们要做的是通过接口来调用服务提供者实现的方法。
下面,就是关键的服务发现环节,使用 ServiceLoader 来加载具体的实现类,调用方只需调用对应接口方法即可。
测试结果:
![](https://static001.geekbang.org/infoq/27/27d8f3e6b48f7bffc2062d0a0b3fa338.png)
可以看到,通过定义的 Search 发现了两个实现类。整段代码中没有出现过具体的服务实现类,操作都是通过接口调用。
4 Java SPI 原理
了解了 SPI 的工作流程,我们应该有以下疑问:
为什么要在服务提供方的 META-INF/services/目录里同时创建一个以服务接口命名的文件?放在其他目录里面不行吗,文件名我随意命名不可以吗?
为什么文件的内容需要是实现该服务接口的具体实现类?
ServiceLoader 是如何发现接口的服务类的?
接下来我们看一下 ServiceLoader 的源码就可以解答了。
上述例子中,通过 ServiceLoader.load(Search.class) 来加载 Search 接口的实现类,我们知道 Java 加载类都离不开类加载器,查看 ServiceLoader.load()方法的源码就会发现,SPI 加载类使用的是线程上下文加载器,可通过 java.lang.Thread#setContextClassLoader 方法进行设置,若未设置则会从父线程中继承,在应用程序全局都未设置的情况下,默认是应用程序类加载器,线程上下文加载器加载所需的 SPI 代码,实际上是父类加载器请求子类加载器来完成加载类的动作,打破了双亲委派模型的层次结构。
![](https://static001.geekbang.org/infoq/b2/b2ae4bfd889d66a824f58c50402a149d.png)
![](https://static001.geekbang.org/infoq/e4/e42a01dff0f2992f3c23389942d3e2a9.png)
load 方法实际上构造了一个 ServiceLoader 实例对象,该对象保持了一个加载 SPI 类代码的线程上下文加载器的引用 loader、一个所需要加载实现类的接口类型的引用 service、一个已经成功服务提供者(接口的具体实现类)的缓存 providers。
![](https://static001.geekbang.org/infoq/0e/0eb663b4534823abfbde402115d53cb7.jpeg?x-oss-process=image%2Fresize%2Cp_80%2Fauto-orient%2C1)
上述例子中我们使用了 foreach 遍历调用接口方法,本质上是通过调用迭代器 Iterable 的 next()方法来获取的具体实现类,因为 ServiceLoader 实现了 Iterable 这一接口,而整个服务发现的核心,就在它的 iterator()方法中。
![](https://static001.geekbang.org/infoq/e1/e137a4a76f90b21355f5e620c4aa0231.png)
这里面有两个关键的东西,一是 providers,在迭代器中会先从服务类缓存中查找服务类,若查不到就用 lookupIterator 查找。接着往下看 LazyIterator 的 hasNext()和 next()源码实现。
![](https://static001.geekbang.org/infoq/b5/b53bc348f87fe36438040735c773ac23.jpeg?x-oss-process=image%2Fresize%2Cp_80%2Fauto-orient%2C1)
acc 是一个安全管理器,debug 看值是 null,所以看 hasNextService()和 nextService()方法就可以了。在 hasNextService()方法中,会通过 PREFIX + service.getName()来拼接一个资源路径 URL,拼接这个 URL 的目的就是为了能供通过该 URL 获取文件中的内容,看到这里应该就明白了为什么实现 SPI 服务时,需要创建名为 META-INF/services/的文件夹,以及以接口名命名的文件,这是由 PREFIX 与 service.getName()决定的,那么下图中的实现类名称是如何来的呢?
![](https://static001.geekbang.org/infoq/53/53af4f21b5649fb32155f813c1d417b3.png)
既然我们这里可以通过 PREFIX + service.getName()来拼接一个资源路径 URL,那是不是可以通过该 URL 来获取所指向的文件资源的内容?答案是肯定的,正如源码中 parse()方法的实现一样, 通过 Java 提供的 InputStream 读取 URL 指向的文件内容。
![](https://static001.geekbang.org/infoq/4e/4ec0960a1be7f48926bb7c855b1cf1e3.png)
在读取文件内容时 ServiceLoader 主要做了几件事:
获取文本内容(实现类全路径名);
校验内容合法性(是否符合 Java 类命名规范);
若 providers 缓存中不存在该实现类(未加载),则保存该实现类全路径名以供下面流程进行加载该类;
![](https://static001.geekbang.org/infoq/13/135af87323c0f9fcb9d69fea7daef009.png)
接下来,在 nextService()方法中,则会通过上述解析到的实现类全路径名加载这个实现类,然后实例化对象,最终放入缓存中去。
![](https://static001.geekbang.org/infoq/68/6825d4129e278bb8b43bb4537cdc7203.png)
在迭代器的迭代过程中,会基于 Java 反射机制去完成所有实现类的实例化,这样就可以调用接口方法来使用 SPI 服务提供方实现的具体功能。
综上,Java SPI 的实现是依靠 ServiceLoader,ServiceLoader 通过使用线程上下文类加载器来加载 SPI 接口实现类,实现类的全路径名需配置在 META-INF/services/目录下,以接口名命名的文件内容中,ServiceLoader 会读取文件中的全路径名,通过反射机制实例化接口实现类。
5 应用
(1)日志框架 slf4j
SPI 的实际应用,最常见的应该是日志框架 slf4j,它就是个日志门面,并不提供具体的实现,需要绑定其他具体实现。例如可使用 log4j2 作为具体的绑定器,只需要在 pom 中引入 slf4j-log4j12,就可以使用具体功能。
引入项目后,点开它的 jar 包看一下具体结构:
![](https://static001.geekbang.org/infoq/22/225a6783243335bc70016d2d55a26daa.png)
jar 包的 META-INF.services 里面,通过 SPI 注入了 Reload4jServiceProvider 这个实现类,它实现了 SLF4JServiceProvider 这一接口,在它的初始化方法 initialize()中,会完成初始化等工作,后续可以继续获取到 LoggerFactory 和 Logger 等具体日志对象。
![](https://static001.geekbang.org/infoq/88/88c3cce156fa2e46b7a7ec77e5e01791.png)
(2)DriverManager
DriverManager 是 JDBC 里管理数据库驱动的的工具类。一个数据库可能会存在不同实现的数据库驱动。我们在使用特定的驱动实现时,通过一个简单的配置就而不用修改代码就可以达到效果。 例如,在运用 Class.forName("com.mysql.jdbc.Driver")加载 mysql 驱动后,会执行其中的静态代码把 driver 注册到 DriverManager 中。
![](https://static001.geekbang.org/infoq/f2/f242016eb4160764327b5eea560464c5.jpeg?x-oss-process=image%2Fresize%2Cp_80%2Fauto-orient%2C1)
查看 JDBC 源码可知,驱动实现接口 java.sql.Driver,然后通过 registerDriver 把当前 driver 加载到 DriverManager 中。查看 DriverManager 的源码,可以看到其内部的静态代码块 loadInitialDrivers 方法中使用了 ServiceLoader:
![](https://static001.geekbang.org/infoq/ac/aca03c4c3d2b4700be195ecababb432d.png)
查看 mysql-connector-java 的 jar 包在 META-INF/services 接口路径文件中的内容,可以看到 com.mysql.jdbc.Driver。
![](https://static001.geekbang.org/infoq/35/3589c3890f8e5c90de8ac96c547d6943.png)
(3)sharding-jdbc
sharding-jdbc 是一款用于分库分表的中间件,在数据库分布式场景中,为了保证数据库主键的唯一性,会采取相应的主键生成策略,而主键生成策略有很多种实现。sharding-jdbc 在主键生成策略使用了 SPI 进行装配。
源码中的 ShardingRule.class 主要封装分库分表的策略规则,包括主键生成,核心在于底层调用的 register 方法,其中也是使用了 ServiceLoader:
![](https://static001.geekbang.org/infoq/2d/2df6f2dbd931152f5d074d32ecfd6ab6.png)
![](https://static001.geekbang.org/infoq/46/4654b9198735d76fbabf37ad9a9b2256.png)
![](https://static001.geekbang.org/infoq/08/0802cb546811dcd3e01b895aa718401f.png)
这里就是应用的 SPI 机制,再看下 Jar 包的 META-INF/services/目录:
![](https://static001.geekbang.org/infoq/89/89f119faad90b942b29ab84442531173.png)
有两个实现,对应了 sharding-jdbc 的提供的两种生成策略分别是雪花算法和 UUID。
6 总结
Java 中的 SPI 提供了一种比较特别的服务发现和调用机制,通过接口将服务调用与服务提供者分离,将接口提供给第三方实现扩展,体现了依赖倒置的设计思想,是高内聚、低耦合的一种体现。但 SPI 也有缺点,就是加载一个接口,会把所有实现类都加载进来,可能会加载到不需要的冗余服务。总的来说,SPI 是一种非常不错的扩展、集成的思路。
参考资料
https://blog.csdn.net/CHIKA2333/article/details/132082244
《深入理解 Java 虚拟机:JVM 高级特性与最佳实践》--周志明
作者:京东物流 郭纬宙
来源:京东云开发者社区 自猿其说 Tech 转载请注明来源
版权声明: 本文为 InfoQ 作者【京东科技开发者】的原创文章。
原文链接:【http://xie.infoq.cn/article/c783df72a64c7c260a790f63b】。文章转载请联系作者。
评论