一、背景
服务端在向外提供接口服务时,不管是对前端提供 HTTP 接口,还是面向内部其他服务端提供的 RPC 接口,常常会面对这样一个问题,就是如何优雅的解决各种接口参数校验问题?
早期大家在做面向前端提供的 HTTP 接口时,对参数的校验可能都会经历这几个阶段:每个接口每个参数都写定制校验代码、提炼公共校验逻辑、自定义切面进行校验、通用标准的校验逻辑。
这边提到的通用标准的校验逻辑指的就是基于 JSR303 的Java Bean Validation,其中官方指定的具体实现就是 Hibernate Validator,在 Web 项目中结合 Spring 可以做到很优雅的去进行参数校验。
本文主要也是想给大家介绍下如何在使用 Dubbo 时做好优雅的参数校验。
二、解决方案
Dubbo 框架本身是支持参数校验的,同时也是基于 JSR303 去实现的,我们来看下具体是怎么实现的。
2.1 maven 依赖
<!-- 定义在facade接口模块的pom文件找那个 -->
<dependency>
<groupId>javax.validation</groupId>
<artifactId>validation-api</artifactId>
<version>2.0.1.Final</version>
<!-- 如果不想facade包有多余的依赖,此处scope设为provided,否则可以删除 -->
<scope>provided</scope>
</dependency>
<!-- 下面依赖通常加在Facade接口实现模块的pom文件中 -->
<dependency>
<groupId>org.hibernate.validator</groupId>
<artifactId>hibernate-validator</artifactId>
<version>6.2.0.Final</version>
</dependency>
复制代码
2.2 接口定义
facade 接口定义:
public interface UserFacade {
FacadeResult<Boolean> updateUser(UpdateUserParam param);
}
复制代码
参数定义
public class UpdateUserParam implements Serializable {
private static final long serialVersionUID = 2476922055212727973L;
@NotNull(message = "用户标识不能为空")
private Long id;
@NotBlank(message = "用户名不能为空")
private String name;
@NotBlank(message = "用户手机号不能为空")
@Size(min = 8, max = 16, message="电话号码长度介于8~16位")
private String phone;
// getter and setter ignored
}
复制代码
公共返回定义
/**
* Facade接口统一返回结果
*/
public class FacadeResult<T> implements Serializable {
private static final long serialVersionUID = 8570359747128577687L;
private int code;
private T data;
private String msg;
// getter and setter ignored
}
复制代码
2.3 Dubbo 服务提供者端配置
Dubbo 服务提供者端必须作这个 validation="true"的配置,具体示例配置如下:
Dubbo 接口服务端配置
<bean class="com.xxx.demo.UserFacadeImpl" id="userFacade"/>
<dubbo:service interface="com.xxx.demo.UserFacade" ref="userFacade" validation="true" />
复制代码
2.4 Dubbo 服务消费者端配置
这个根据业务方使用习惯不作强制要求,但建议配置上都加上 validation="true",示例配置如下:
<dubbo:reference id="userFacade" interface="com.xxx.demo.UserFacade" validation="true" />
复制代码
2.5 验证参数校验
前面几步完成以后,验证这一步就比较简单了,消费者调用该约定接口,接口入参传入 UpdateUserParam 对象,其中字段不用赋值,然后调用服务端接口就会得到如下的参数异常提示:
Dubbo 接口服务端配置
javax.validation.ValidationException: Failed to validate service: com.xxx.demo.UserFacade, method: updateUser, cause: [ConstraintViolationImpl{interpolatedMessage='用户名不能为空', propertyPath=name, rootBeanClass=class com.xxx.demo.UpdateUserParam, messageTemplate='用户名不能为空'}, ConstraintViolationImpl{interpolatedMessage='用户手机号不能为空', propertyPath=phone, rootBeanClass=class com.xxx.demo.UpdateUserParam, messageTemplate='用户手机号不能为空'}, ConstraintViolationImpl{interpolatedMessage='用户标识不能为空', propertyPath=id, rootBeanClass=class com.xxx.demo.UpdateUserParam, messageTemplate='用户标识不能为空'}]
javax.validation.ValidationException: Failed to validate service: com.xxx.demo.UserFacade, method: updateUser, cause: [ConstraintViolationImpl{interpolatedMessage='用户名不能为空', propertyPath=name, rootBeanClass=class com.xxx.demo.UpdateUserParam, messageTemplate='用户名不能为空'}, ConstraintViolationImpl{interpolatedMessage='用户手机号不能为空', propertyPath=phone, rootBeanClass=class com.xxx.demo.UpdateUserParam, messageTemplate='用户手机号不能为空'}, ConstraintViolationImpl{interpolatedMessage='用户标识不能为空', propertyPath=id, rootBeanClass=class com.xxx.demo.UpdateUserParam, messageTemplate='用户标识不能为空'}]
at org.apache.dubbo.validation.filter.ValidationFilter.invoke(ValidationFilter.java:96)
at org.apache.dubbo.rpc.protocol.ProtocolFilterWrapper$1.invoke(ProtocolFilterWrapper.java:83)
....
at org.apache.dubbo.remoting.exchange.support.header.HeaderExchangeHandler.received(HeaderExchangeHandler.java:175)
at org.apache.dubbo.remoting.transport.DecodeHandler.received(DecodeHandler.java:51)
at org.apache.dubbo.remoting.transport.dispatcher.ChannelEventRunnable.run(ChannelEventRunnable.java:57)
at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1149)
at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:624)
at java.lang.Thread.run(Thread.java:748)
复制代码
三、定制 Dubbo 参数校验异常返回
从前面内容我们可以很轻松的验证,当消费端调用 Dubbo 服务时,参数如果不合法就会抛出相关异常信息,消费端调用时也能识别出异常信息,似乎这样就没有问题了。
但从前面所定义的服务接口来看,一般业务开发会定义统一的返回对象格式(如前文示例中的 FacadeResult),对于业务异常情况,会约定相关异常码并结合相关性信息提示。因此对于参数校验不合法的情况,服务调用方自然不希望服务端抛出一大段包含堆栈信息的异常信息,而是希望还保持这种统一的返回形式,就如下面这种返回所示:
Dubbo 接口服务端配置:
{
"code": 1001,
"msg": "用户名不能为空",
"data": null
}
复制代码
3.1 ValidationFilter & JValidator
想要做到返回格式的统一,我们先来看下前面所抛出的异常是如何来的?
从异常堆栈内容我们可以看出这个异常信息返回是由 ValidationFilter 抛出的,从名字我们可以猜到这个是采用 Dubbo 的 Filter 扩展机制的一个内置实现,当我们对 Dubbo 服务接口启用参数校验时(即前文 Dubbo 服务配置中的 validation="true"),该 Filter 就会真正起作用,我们来看下其中的关键实现逻辑:
@Override
public Result invoke(Invoker<?> invoker, Invocation invocation) throws RpcException {
if (validation != null && !invocation.getMethodName().startsWith("$")
&& ConfigUtils.isNotEmpty(invoker.getUrl().getMethodParameter(invocation.getMethodName(), VALIDATION_KEY))) {
try {
Validator validator = validation.getValidator(invoker.getUrl());
if (validator != null) {
// 注1
validator.validate(invocation.getMethodName(), invocation.getParameterTypes(), invocation.getArguments());
}
} catch (RpcException e) {
throw e;
} catch (ValidationException e) {
// 注2
return AsyncRpcResult.newDefaultAsyncResult(new ValidationException(e.getMessage()), invocation);
} catch (Throwable t) {
return AsyncRpcResult.newDefaultAsyncResult(t, invocation);
}
}
return invoker.invoke(invocation);
}
复制代码
从前文的异常堆栈信息我们可以知道异常信息是由上述代码「注 2」处所产生,这边是因为捕获了 ValidationException,通过走读代码或者调试可以得知,该异常是由「注 1」处 valiator.validate 方法所产生。
而 Validator 接口在 Dubbo 框架中实现只有 JValidator,这个通过 idea 工具显示 Validator 所有实现的 UML 类图可以看出(如下图所示),当然调试代码也可以很轻松定位到。
既然定位到 JValidator 了,我们就继续看下它里面 validate 方法的具体实现,关键代码如下所示:
@Override
public void validate(String methodName, Class<?>[] parameterTypes, Object[] arguments) throws Exception {
List<Class<?>> groups = new ArrayList<>();
Class<?> methodClass = methodClass(methodName);
if (methodClass != null) {
groups.add(methodClass);
}
Set<ConstraintViolation<?>> violations = new HashSet<>();
Method method = clazz.getMethod(methodName, parameterTypes);
Class<?>[] methodClasses;
if (method.isAnnotationPresent(MethodValidated.class)){
methodClasses = method.getAnnotation(MethodValidated.class).value();
groups.addAll(Arrays.asList(methodClasses));
}
groups.add(0, Default.class);
groups.add(1, clazz);
Class<?>[] classgroups = groups.toArray(new Class[groups.size()]);
Object parameterBean = getMethodParameterBean(clazz, method, arguments);
if (parameterBean != null) {
// 注1
violations.addAll(validator.validate(parameterBean, classgroups ));
}
for (Object arg : arguments) {
// 注2
validate(violations, arg, classgroups);
}
if (!violations.isEmpty()) {
// 注3
logger.error("Failed to validate service: " + clazz.getName() + ", method: " + methodName + ", cause: " + violations);
throw new ConstraintViolationException("Failed to validate service: " + clazz.getName() + ", method: " + methodName + ", cause: " + violations, violations);
}
}
复制代码
从上述代码中可以看出当「注 1」和注「2」两处代码进行参数校验时所得到的「违反约束」的信息都被加入到 violations 集合中,而在「注 3」处检查到「违反约束」不为空时,就会抛出包含「违反约束」信息的 ConstraintViolationException,该异常继承自 ValidationException,这样也就会被 ValidationFilter 中方法所捕获,进而向调用方返回相关异常信息。
3.2 自定义参数校验异常返回
从前一小节我们可以很清晰的了解到了为什么会抛出那样的异常信息给调用方,如果想做到我们前面想要的诉求:统一返回格式,我们需要按照下面的步骤去实现。
3.2.1 自定义 Filter
@Activate(group = {CONSUMER, PROVIDER}, value = "customValidationFilter", order = 10000)
public class CustomValidationFilter implements Filter {
private Validation validation;
public void setValidation(Validation validation) { this.validation = validation; }
public Result invoke(Invoker<?> invoker, Invocation invocation) throws RpcException {
if (validation != null && !invocation.getMethodName().startsWith("$")
&& ConfigUtils.isNotEmpty(invoker.getUrl().getMethodParameter(invocation.getMethodName(), VALIDATION_KEY))) {
try {
Validator validator = validation.getValidator(invoker.getUrl());
if (validator != null) {
validator.validate(invocation.getMethodName(), invocation.getParameterTypes(), invocation.getArguments());
}
} catch (RpcException e) {
throw e;
} catch (ConstraintViolationException e) {// 这边细化了异常类型
// 注1
Set<ConstraintViolation<?>> violations = e.getConstraintViolations();
if (CollectionUtils.isNotEmpty(violations)) {
ConstraintViolation<?> violation = violations.iterator().next();// 取第一个进行提示就行了
FacadeResult facadeResult = FacadeResult.fail(ErrorCode.INVALID_PARAM.getCode(), violation.getMessage());
return AsyncRpcResult.newDefaultAsyncResult(facadeResult, invocation);
}
return AsyncRpcResult.newDefaultAsyncResult(new ValidationException(e.getMessage()), invocation);
} catch (Throwable t) {
return AsyncRpcResult.newDefaultAsyncResult(t, invocation);
}
}
return invoker.invoke(invocation);
}
}
复制代码
该自定义 filter 与内置的 ValidationFilter 唯一不同的地方就在于「注 1」处所新增的针对特定异常 ConstraintViolationException 的处理,从异常对象中获取包含的「违反约束」信息,并取其中第一个来构造业务上所定义的通用数据格式 FacadeResult 对象,作为 Dubbo 服务接口调用返回的信息。
3.2.2 自定义 Filter 的配置
开发过 Dubbo 自定义 filter 的同学都知道,要让它生效需要作一个符合 SPI 规范的配置,如下所示:
a. 新建两级目录分别是 META-INF 和 dubbo,这个需要特别注意,不能直接新建一个目录名为「META-INFO.dubbo」,否则在初始化启动的时候会失败。
b. 新建一个文件名为 com.alibaba.dubbo.rpc.Filter,当然也可以是 org.apache.dubbo.rpc.Filter,Dubbo 开源到 Apache 社区后,默认支持这两个名字。
c. 文件中配置内容为:customValidationFilter=com.xxx.demo.dubbo.filter.CustomValidationFilter。
3.3.3 Dubbo 服务配置
有了自定义参数校验的 Filter 配置后,如果只做到这的话,其实还有一个问题,应用启动后会有两个参数校验 Filter 生效。当然可以通过指定 Filter 的 order 来实现自定义 Filter 先执行,但很显然这种方式不稳妥,而且两个 Filter 的功能是重复的,因此只需要一个生效就可以了,Dubbo 提供了一种机制可以禁用指定的 Filter,只需在 Dubbo 配置文件中作如下配置即可:
<!-- 需要禁用的filter以"-"开头并加上filter名称 -->
<!-- 查看源码,可看到需要禁用的ValidationFilter名为validation-->
<dubbo:provider filter="-validation"/>
复制代码
但经过上述配置后,发现 customValidationFilter 并没有生效,经过调试以及对 dubbo 相关文档的学习,对 Filter 生效机制有了一定的了解。
a. dubbo 启动后,默认会生效框架自带的一系列 Filter;
可以在 dubbo 框架的资源文件 org.apache.dubbo.rpc.Filter 中看到具体有哪些,不同版本的内容可能会有些许差别。
cache=org.apache.dubbo.cache.filter.CacheFilter
validation=org.apache.dubbo.validation.filter.ValidationFilter // 注1
echo=org.apache.dubbo.rpc.filter.EchoFilter
generic=org.apache.dubbo.rpc.filter.GenericFilter
genericimpl=org.apache.dubbo.rpc.filter.GenericImplFilter
token=org.apache.dubbo.rpc.filter.TokenFilter
accesslog=org.apache.dubbo.rpc.filter.AccessLogFilter
activelimit=org.apache.dubbo.rpc.filter.ActiveLimitFilter
classloader=org.apache.dubbo.rpc.filter.ClassLoaderFilter
context=org.apache.dubbo.rpc.filter.ContextFilter
consumercontext=org.apache.dubbo.rpc.filter.ConsumerContextFilter
exception=org.apache.dubbo.rpc.filter.ExceptionFilter
executelimit=org.apache.dubbo.rpc.filter.ExecuteLimitFilter
deprecated=org.apache.dubbo.rpc.filter.DeprecatedFilter
compatible=org.apache.dubbo.rpc.filter.CompatibleFilter
timeout=org.apache.dubbo.rpc.filter.TimeoutFilter
tps=org.apache.dubbo.rpc.filter.TpsLimitFilter
trace=org.apache.dubbo.rpc.protocol.dubbo.filter.TraceFilter
future=org.apache.dubbo.rpc.protocol.dubbo.filter.FutureFilter
monitor=org.apache.dubbo.monitor.support.MonitorFilter
metrics=org.apache.dubbo.monitor.dubbo.MetricsFilter
复制代码
如上「注 1」中的 Filter 就是我们上一步配置中想要禁用的 Filter,因为这些 filter 都是 Dubbo 内置的,所以这些 filter 集合有一个统一的名字,default,因此如果想全部禁用,除了一个一个禁用外,也可以直接用'-default'达到目的,这些默认内置的 filter 只要没有全部或单独禁用,那就会生效。
b. 想要开发的自定义 Filter 能生效,不并一定要在<dubbo:provider filter="xxxFitler" >中体现;如果我们没有在 Dubbo 相关的配置文件中去配置 Filter 相关信息,只要写好自定义 filter 代码,并在资源文件/META-INF/dubbo/com.alibaba.dubbo.rpc.Filter 中按照 spi 规范定义好即可,这样所有被加载的 Filter 都会生效。
c. 如果在 Dubbo 配置文件中配置了 Filter 信息,那自定义 Filter 只有显式配置才会生效。
d. Filter 配置也可以加在 dubbo service 配置中(<dubbo:service interface="..." ref="..." validation="true" filter="xFilter,yFilter"/>)。
当 dubbo 配置文件中 provider 和 service 部分都配置了 Filter 信息,针对 service 具体生效的 Filter 取两者配置的并集。
因此想要自定义的校验 Filter 在所有服务中都生效,需要作如下配置:
<dubbo:provider filter="-validation, customValidationFilter"/>
复制代码
四、如何扩展校验注解
前面示例中都是利用参数校验的内置注解去完成,在实际开发中有时候会遇到默认内置的注解无法满足校验需求,这时就需要自定义一些校验注解去满足需求,方便开发。
假设有这样一个场景,某参数值需要校验只能在指定的几个数值范围内,类似于白名单一样,下面就以这个场景来演示下如何扩展校验注解。
4.1 定义校验注解
@Target({ METHOD, FIELD, ANNOTATION_TYPE, CONSTRUCTOR, PARAMETER })
@Retention(RUNTIME)
@Documented
@Constraint(validatedBy = { })// 注1
// @Constraint(validatedBy = {AllowedValueValidator.class}) 注2
public @interface AllowedValue {
String message() default "参数值不在合法范围内";
Class<?>[] groups() default { };
Class<? extends Payload>[] payload() default { };
long[] value() default {};
}
复制代码
public class AllowedValueValidator implements ConstraintValidator<AllowedValue, Long> {
private long[] allowedValues;
@Override
public void initialize(AllowedValue constraintAnnotation) {
this.allowedValues = constraintAnnotation.value();
}
@Override
public boolean isValid(Long value, ConstraintValidatorContext context) {
if (allowedValues.length == 0) {
return true;
}
return Arrays.stream(allowedValues).anyMatch(o -> Objects.equals(o, value));
}
}
复制代码
「注 1」中的校验器(Validator)并没有指定,当然是可以像「注 2」中那样直接指定校验器,但考虑到自定义注解有可能是直接暴露在 facade 包中,而具体的校验器的实现有时候会包含一些业务依赖,所以不建议直接在此处指定,而是通过 Hibernate Validator 提供的 Validator 发现机制去完成关联。
4.2 配置定制 Validator 发现
a. 在 resources 目录下新建 META-INF/services/javax.validation.ConstraintValidator 文件。
b. 文件中只需填入相应 Validator 的全路径:com.xxx.demo.validator.AllowedValueValidator,如果有多个的话,每行一个。
五、总结
本文主要介绍了使用 Dubbo 框架时如何使用优雅点方式完成参数的校验,首先演示了如何利用 Dubbo 框架默认支持的校验实现,然后接着演示了如何配合实际业务开发返回统一的数据格式,最后介绍了下如何进行自定义校验注解的实现,方便进行后续自行扩展实现,希望能在实际工作中有一定的帮助。
作者:vivo 官网商城开发团队-Wei Fuping
评论