写点什么

Istio + SkyWalking + Spring Boot 实战 -Zadig 自测模式搞定开发者子环境

作者:KodeRover
  • 2022 年 5 月 20 日
  • 本文字数:3140 字

    阅读完需:约 10 分钟

Istio + SkyWalking + Spring Boot 实战 -Zadig 自测模式搞定开发者子环境

Istio + SkyWalking + Spring Boot 实战 -Zadig 自测模式搞定开发者子环境微服务架构被企业级开发广泛采用,而随着业务迅速发展,服务数量也呈现爆炸式的增长。日常开发过程中一套测试环境可能包含成千上百个服务。在协作过程中等待环境、抢占环境、验证冲突已成为常态。而长期发展导致的技术债和基础架构复杂度又非常高,复制多套环境存在较高难度,工程师日常协作只能在等待中苦不堪言。


在 Zadig V1.11.0 版本中推出了环境自测模式,工程师可以基于一套含全量服务的基准环境低成本搭建独享的开发者子环境。利用 Istio 和 Tracing 组件的链路追踪和流量动态路由的能力,实现开发者子环境与基准环境联调的目的,从而解决大规模微服务下工程师被环境问题阻塞的情况。


下面以服务网格组件 Istio + 企业采用率非常广泛的 SkyWalking + 典型微服务架构 Spring Boot 项目 PiggyMetrics 为例,演示如何使用 Zadig 自测模式实现工程师日常自测联调过程。


Zadig on Github

Zadig on Gitee

项目简介


本例 PiggyMetrics 项目,架构如下:


服务配置文件参考 YAML,服务组成如下:


8 个 Spring Boot 应用程序:

  • account-service

  • auth-service

  • config-service (主要管理服务依赖的 configmap 和 secret 等配置)

  • gateway

  • monitoring-service

  • notification-service

  • registry-service

  • statistics-service


4 个 MongoDB 实例:

  • account-mongodb

  • auth-mongodb

  • notification-mongodb

  • statistics-mongodb


1 个 RabbitMq:

  • rabbitmq


对于 statistics-service 服务开发者需要自测联调,可以基于基准环境拉起一套含有 config-service' 和 statistics-service' 服务的子环境,通过访问基准环境的地址,并且在请求中加上子环境相应的 header 信息可实现访问子环境的能力。效果图如下:


前置准备工作

基础组件信息

  • Kubernetes 版本:v1.20.11(Node 2*8c16g)

  • Zadig 版本:1.11.0+

  • Skywalking 版本:v8.8.1

  • ElasticSearch 版本:7.5.1

  • Istio 版本:1.12.1

安装组件

  1. 安装 Zadig:

安装方式参考官方文档:快速安装 | Zadig 文档

  1. 安装 Istio:

安装方式参考官方文档:Installation Guides

  1. 安装 SkyWalking:

kubectl create ns skywalking
git clone https://github.com/apache/skywalking-kubernetescd skywalking-kuberneteshelm repo add elastic https://helm.elastic.cohelm dep up chart/skywalking
helm install skywalking skywalking -n skywalking -f ./skywalking/values-es7.yaml
复制代码



准备基准环境

1、在 Zadig 上创建项目 piggymetrics ,配置服务,服务 YAML fork 自 Zadig 代码库,可使用「从代码库同步」方式批量导入服务配置。


服务 YAML 声明中,已通过 initContainer 共享 SkyWalking Agent jar 到业务容器。initContainer 所使用的 IMAGE 通过以下方式生成:

# 选择对应版本的 Agent jar 包下载,并构建成镜像。Dockerfile示例如下:FROM busybox:latestRUN mkdir -p /usr/skywalking/agent/ADD apache-skywalking-apm-bin/agent/ /usr/skywalking/agent/WORKDIR /
复制代码

Agent jar 包下载


业务镜像所使用的 IMAGE 生成方式举例:

FROM java:8-jre
ADD ./target/statistics-service.jar /app/ENTRYPOINT ["sh","-c","java -Dapp.id=$SW_AGENT_NAME -Xmx200m $JAVA_OPTS -Dskywalking.agent.service_name=$SW_AGENT_NAME -Dskywalking.collector.backend_service=$SW_AGENT_COLLECTOR_BACKEND_SERVICES -jar /app/statistics-service.jar"]EXPOSE 7000
复制代码


需要根据实际情况修改服务 YAML 的环境变量中 skywalking-oap 的地址:SW_AGENT_COLLECTOR_BACKEND_SERVICES 的值,即 <service-name>. <namespace-name>.svc.cluster.local

2、创建包含全量服务的基准环境 base


部署完成后,可从 SkyWalking UI 上查看的服务之间的依赖关系如下:


开启自测模式

在基准环境准备完成以后即可开启自测模式并创建包含 config-servicestatistics-service服务的子环境 subdev.



创建完成后,修改子环境的中服务依赖的中间件等配置,环境配置-编辑 configmap special-config-env,修改中间件地址为:<service-name>. <namespace-name>.svc.cluster.local。

apiVersion: v1data:  account_mongodb_host: account-mongodb.piggymetrics-env-base.svc.cluster.local  auth_mongodb_host: auth-mongodb.piggymetrics-env-base.svc.cluster.local  auth_service_host: auth-service.piggymetrics-env-base.svc.cluster.local  notification_mongodb_host: notification-mongodb.piggymetrics-env-base.svc.cluster.local  rabbitmq_host: rabbitmq.piggymetrics-env-base.svc.cluster.local  registry_service_host: registry.piggymetrics-env-base.svc.cluster.local  statistics_mongodb_host: statistics-mongodb.piggymetrics-env-base.svc.cluster.localkind: ConfigMapmetadata:  name: special-config-env
复制代码



完成配置修改后,子环境环境即可正常和基准环境交互。


验证自测模式

访问 gateway 服务的接口:/account/current

访问链路如下:

1、访问基准环境

本机访问集群中的 gateway 服务,需要先做端口转发。

kubectl port-forward service/gateway 8085:80 -n  piggymetrics-env-base
复制代码
  • 方式一:Chrome 访问 localhost:8085 页面正常操作,即访问的是基准环境。

  • 方式二:使用 curl 命令请求基准环境

curl -v -X PUT -H "Authorization: Bearer c7f5d94f-8eca-4702-96b4-f496837e8e29" -H "Content-Type:application/json" -d '{"note":null,"incomes":[{"income_id":1,"title":"10000www","icon":"wallet","currency":"USD","period":"MONTH","amount":"10000","converted":"NaN"}],"expenses":[],"saving":{"amount":0,"capitalization":false,"deposit":false,"currency":"USD","interest":0}}' localhost:8085/accounts/current
复制代码

上述请求中的 access token Bearer c7f5d94f-8eca-4702-96b4-f496837e8e29 可以通过登录 piggymetrics web 端新建用户获取,如下图所示。


2、访问子环境

访问地址使用 base 环境的地址,并在请求 header 中添加字段:

方式一:利用 Chrome 插件 ModHeader,使页面发起的请求在 header 中添加字段。加上字段后,可以使用 Chrome 页面操作,访问子环境进行自测联调。


方式二:使用 curl 命令将请求转发到子环境,使用子环境进行自测联调,请求 header 中添加字段 x-env、sw8。

curl -v -X PUT -H "Authorization: Bearer c7f5d94f-8eca-4702-96b4-f496837e8e29" -H 'x-env: subdev' -H 'sw8: 1-Mjk3ZWIyYTIzNzk2NGQzZDgzMzVkMjk3MTA3NjliNjQuNDkuMTY1MTczNjc1NDEwNTAwMDE=-Mjk3ZWIyYTIzNzk2NGQzZDgzMzVkMjk3MTA3NjliNjQuNDkuMTY1MTczNjc1NDEwNTAwMDA=-1-U2VydmljZUI=-MTEwY2VhMzFhODcwNDBlZTkwN2QxZjQxOTg0MjUzMTFAMTkyLjE2OC4wLjI0MA==-R0VUOi9ncmVldGluZy97bmFtZX0=-U2VydmljZUE6ODA=' -H "Content-Type:application/json" -d '{"note":null,"incomes":[{"income_id":1,"title":"10000www","icon":"wallet","currency":"USD","period":"MONTH","amount":"10000","converted":"NaN"}],"expenses":[],"saving":{"amount":0,"capitalization":false,"deposit":false,"currency":"USD","interest":0}}' localhost:8085/accounts/current
复制代码


查看子环境 subdev 中 statistics-service 服务的日志,可知请求已到子环境服务中。

kubectl logs statistics-service-5966d6b65c-5sc98 -n piggymetrics-env-subdev|grep "statistics-service-"
复制代码



至此已实现自测模式的能力,工程师可以根据实际情况基于基准环境创建属于自己的子环境。


Zadig,让工程师更专注创造!欢迎加入 开源吐槽群🔥

Zadig on Github

Zadig on Gitee

发布于: 刚刚阅读数: 9
用户头像

KodeRover

关注

软件交付更丝滑~ 2022.04.06 加入

Zadig 是 KodeRover 团队基于 K8s 自主研发的开源分布式持续交付产品,重点解决企业级软件交付验证的痛点,并且 100% 开放源代码

评论

发布
暂无评论
Istio + SkyWalking + Spring Boot 实战 -Zadig 自测模式搞定开发者子环境_DevOps_KodeRover_InfoQ写作社区