写点什么

微服务分布式架构中,如何实现日志链路跟踪

  • 2022 年 1 月 11 日
  • 本文字数:2748 字

    阅读完需:约 9 分钟

摘要:接口设计出来返回结果值和编码,还有哪些是需要我们优化的结果参数?微服务分布式架构中,如何实现日志链路跟踪?

 

本文分享自华为云社区《微服务分布式架构中,如何实现日志链路跟踪?》,作者:码农架构。

Logback 背景

 

Logback 是由 log4j 创始人设计的另一个开源日志组件,官方网站: http://logback.qos.ch。它当前分为下面下个模块:

  • logback-core:其它两个模块的基础模块

  • logback-classic:它是 log4j 的一个改良版本,同时它完整实现了 slf4j API 使你可以很方便地更换成其它日志系统如 log4j 或 JDK14 Logging

  • logback-access:访问模块与 Servlet 容器集成提供通过 Http 来访问日志的功能

普通 debug 日志

 

 

SQL 执行日志

 

 

Logback 配置案例

 

日志级别排序为: TRACE < DEBUG < INFO < WARN < ERROR

  • %d:表示日期

  • %n:换行

  • %thread:表示线程名

  • %level:日志级别

  • %msg:日志消息

  • %file:表示文件名

  • %class: 表示文件名

  • %logger:Java 类名(含包名,这里设定了 36 位,若超过 36 位,包名会精简为类似 a.b.c.JavaBean)

  • %line:Java 类的行号



注意:

 

%-4relative %d{yyyy-MM-dd HH:mm:ss.SSS} [%thread][%X{TRACE_ID}] %-5level %logger{100}.%M\(%line\) - %msg%n
复制代码

 

在 logback 中,%relative 表示自应用程序启动以来打印相对时间戳(以毫秒为单位). %-4 只是元素的对齐方式.

案例

3452487 2021-08-03 15:19:36.940 [thread-monitor-daemon][] WARN  com.xxxx.common.util.MonitorLogger.warn(27) - 发现超时线程notify-replay-consumer...
复制代码


 

由于案例中是守护线程 thread-monitor-daemon,所以不记录链路 ID。对在系统设计的时候对于线程的命名规范也是有约束的 

 

这里就不做详细展开后续有机会会分享。

回归正题比如下面的例子中记录了请求的链路 ID

 

19006989 2021-08-04 22:35:25.776 [http-nio-0.0.0.0-8010-exec-10][1fc8pebmgwukw863w2p342rp2936a3r157w0:0:] INFO  com.xxx.framework.eureka.core.listener.EurekaStateChangeListener.listen(58) - 服务实例[XX-PAAS]注册成功,当前服务器已注册服务实例数量[3]
复制代码

 

对于上图中显示的系统启动时间、当前时间、当前线程、对应路径按照 logback 官方配置就可以逐步完善对于的日志信息,但是对于链路 ID 的生成写入就需要特殊处理。 


 

链路 ID 设计

 

对于链路追踪设计我个人比较喜欢两种方案

第一种

 

 

在每一次请求中链路编号(traceId)、单元编号(spanId)都是通过 HttpHeader 的方式进行传递,日志的起始位置会主动生成 traceId、spanId,而起始位置的 Parent SpanId 则是不存在的,值为 null。

 

这样每次通过 restTemplate、Openfeign 的形式访问其他服务的接口时,就会携带起始位置生成的 traceId、spanId 到下一个服务单元。

 

第二种

在每一次请求中链路编号(traceId),没经过一次微服务对于深度(Deep)加 1

 

public static class ThreadTraceListener implements ThreadListener {		@Override		public void onThreadBegin(HttpServletRequest request) {			String traceToken = ThreadLocalUtil.getTranVar(TRACE_ID);			String fromServer = ThreadLocalUtil.getTranVar(FROM_SERVER);			int deep;			String traceId;			if (StringUtils.isBlank(traceToken)) {				traceId = IDGenerator.generateID();				deep = 0;				traceToken = StringHelper.join(traceId, ":0");			} else {				int index = traceToken.lastIndexOf(':');				traceId = traceToken.substring(0, index);				deep = Integer.valueOf(traceToken.substring(index + 1));			}			ThreadLocalUtil.setLocalVar(TRACE_ID, traceId);			ThreadLocalUtil.setLocalVar(TRACE_DEEP, deep);			ThreadLocalUtil.setTranVar(TRACE_ID, StringHelper.join(traceId, ":", deep + 1));			ThreadLocalUtil.setLocalVar(FROM_SERVER, fromServer);			ThreadLocalUtil.setTranVar(FROM_SERVER, getCurrentServer());			MDC.put(TRACE_ID, StringHelper.join(traceToken, ":", fromServer));		}
@Override public void onThreadEnd(HttpServletRequest request) { MDC.remove(TRACE_ID); } }
复制代码


 请求拦截

 

protected void doFilterInternal(HttpServletRequest request,			HttpServletResponse response,			FilterChain chain) throws ServletException, IOException {		long startTime = System.currentTimeMillis();		// 从Header中装载传递过来的变量		Map<String, Object> tranVar = new HashMap<String, Object>();		Enumeration<String> headers = request.getHeaderNames();		while (headers.hasMoreElements()) {			String key = headers.nextElement();			if (!StringUtils.isEmpty(key)					&& key.startsWith(ThreadLocalUtil.TRAN_PREFIX)) {				tranVar.put(key.substring(ThreadLocalUtil.TRAN_PREFIX.length()),						request.getHeader(key));			}		}		ThreadLocalHolder.begin(tranVar, request);		try {			if (isGateway) {				response.addHeader("X-TRACE-ID", TraceUtil.getTraceId());			}			// 检查RPC调用深度			checkRpcDeep(request, response);			// 业务处理			chain.doFilter(request, response);			// 记录RPC调用次数			logRpcCount(request, response);		} catch (Throwable ex) {			// 错误处理			Response<?> result = ExceptionUtil.toResponse(ex);			Determine determine = ExceptionUtil.determineType(ex);			ExceptionUtil.doLog(result, determine.getStatus(), ex);			response.setStatus(determine.getStatus().value());			response.setCharacterEncoding("UTF-8");			response.setContentType(MediaType.APPLICATION_JSON_UTF8_VALUE);			response.getWriter().write(JsonUtil.toJsonString(result));		} finally {			try {				doMonitor(request, response, startTime);				if (TraceUtil.isTraceLoggerOn()) {					log.warn(StringHelper.join(							"TRACE-HTTP-", request.getMethod(),							" URI:", request.getRequestURI(),							", dt:", System.currentTimeMillis() - startTime,							", rpc:", TraceUtil.getRpcCount(),							", status:", response.getStatus()));				} else if (log.isTraceEnabled()) {					log.trace(StringHelper.join(request.getMethod(),							" URI:", request.getRequestURI(),							", dt:", System.currentTimeMillis() - startTime,							", rpc:", TraceUtil.getRpcCount(),							", status:", response.getStatus()));				}			} finally {				ThreadLocalHolder.end(request);			}		}}
复制代码


​​点击关注,第一时间了解华为云新鲜技术~

发布于: 刚刚阅读数: 2
用户头像

提供全面深入的云计算技术干货 2020.07.14 加入

华为云开发者社区,提供全面深入的云计算前景分析、丰富的技术干货、程序样例,分享华为云前沿资讯动态,方便开发者快速成长与发展,欢迎提问、互动,多方位了解云计算! 传送门:https://bbs.huaweicloud.com/

评论

发布
暂无评论
微服务分布式架构中,如何实现日志链路跟踪