返回介绍

监控与管理

发布于 2024-08-18 11:12:34 字数 14765 浏览 0 评论 0 收藏 0

在微服务架构中,我们将原本庞大的单体系统拆分成多个提供不同服务的应用。虽然各个应用的内部逻辑因分解而得以简化,但是由于部署应用的数量成倍增长,使得系统的维护复杂度大大提升。对于运维人员来说,随着应用的不断增多,系统集群中出现故障的频率也变得越来越高,虽然在高可用机制的保护下,个别故障不会影响系统的对外服务,但是这些频繁出现的故障需要被及时发现和处理才能长期保证系统处于健康可用状态。为了能对这些成倍增长的应用做到高效运维,传统的运维方式显然是不合适的,所以我们需要实现一套自动化的监控运维机制,而这套机制的运行基础就是不间断地收集各个微服务应用的各项指标情况,并根据这些基础指标信息来制定监控和预警规则,更进一步甚至做到一些自动化的运维操作等。

为了让运维系统能够获取各个微服务应用的相关指标以及实现一些常规操作控制,我们需要开发一套专门用于植入各个微服务应用的接口供监控系统采集信息。而这些接口往往有很大一部分指标都是类似的,比如环境变量、垃圾收集信息、内存信息、线程池信息等。既然这些信息那么通用,难道就没有一个标准化的实现框架吗?

当我们决定用Spring Boot来作为微服务框架时,除了它强大的快速开发功能之外,还因为它在Starter POMs中提供了一个特殊依赖模块spring-boot-starter-actuator。引入该模块能够自动为Spring Boot 构建的应用提供一系列用于监控的端点。同时,Spring Cloud 在实现各个微服务组件的时候,进一步为该模块做了不少扩展,比如,为原生端点增加了更多的指标和度量信息(比如在整合 Eureka 的时候会为/health 端点增加相关的信息),并且根据不同的组件还提供了更多有空的端点(比如,为API网关组件Zuul提供了/routes端点来返回路由信息)。

spring-boot-starter-actuator模块的实现对于实施微服务的中小团队来说,可以有效地省去或大大减少监控系统在采集应用指标时的开发量。当然,它也并不是万能的,有时候也需要对其做一些简单的扩展来帮助我们实现自身系统个性化的监控需求。所以,在本节将详细介绍一些关于spring-boot-starter-actuator模块的内容,包括原生提供的端点以及一些常用的扩展和配置方式等。

初识actuator

下面,我们通过对“快速入门”小节中实现的Spring Boot应用增加spring-boot-starter-actuator模块功能,来对它有一个直观的认识。

在现有的 Spring Boot 应用中引入该模块非常简单,只需要在 pom.xml 的dependency节点中,新增spring-boot-starter-actuator的依赖即可,具体如下:

<dependency>

<groupId>org.springframework.boot</groupId>

<artifactId>spring-boot-starter-actuator</artifactId>

</dependency>

增加该依赖之后,重新启动应用。此时,我们可以在控制台中看到如下图所示的输出:

上图显示了一批端点定义,这些端点并非我们自己在程序中创建的,而是由spring-boot-starter-actuator模块根据应用依赖和配置自动创建出来的监控和管理端点。通过这些端点,我们可以实时获取应用的各项监控指标,比如访问/health端点。我们可以获得如下信息:

{

"status": "UP",

"diskSpace": {

"status": "UP",

"total": 491270434816,

"free": 383870214144,

"threshold": 10485760

}

}

在没有引入其他依赖之前,该端点的内容较为简单,后续我们在使用Spring Cloud的各个组件之后,它的返回会变得非常丰富,这些内容将帮助我们制定更为个性化的监控策略。

原生端点

通过在快速入门示例中添加spring-boot-starter-actuator模块,我们已经对它有了一个初步的认识。接下来,我们详细介绍一下spring-boot-starter-actuator模块中已经实现的一些原生端点。根据端点的作用,可以将原生端点分为以下三大类。

- 应用配置类: 获取应用程序中加载的应用配置、环境变量、自动化配置报告等与Spring Boot应用密切相关的配置类信息。

- 度量指标类: 获取应用程序运行过程中用于监控的度量指标,比如内存信息、线程池信息、HTTP请求统计等。

- 操作控制类: 提供了对应用的关闭等操作类功能。

下面我们来详细了解一下这三类端点都分别可以为我们提供怎样的有用信息和强大功能,以及我们如何去扩展和配置它们。

应用配置类

由于Spring Boot为了改善传统Spring应用繁杂的配置内容,采用了包扫描和自动化配置的机制来加载原本集中于 XML 文件中的各项内容。虽然这样的做法让我们的代码变得非常简洁,但是整个应用的实例创建和依赖关系等信息都被离散到了各个配置类的注解上,这使我们分析整个应用中资源和实例的各种关系变得非常困难。而这类端点可以帮助我们轻松获取一系列关于 Spring 应用配置内容的详细报告,比如自动化配置的报告、Bean 创建的报告、环境属性的报告等。

- /autoconfig:该端点用来获取应用的自动化配置报告,其中包括所有自动化配置的候选项。同时还列出了每个候选项是否满足自动化配置的各个先决条件。所以,该端点可以帮助我们方便地找到一些自动化配置为什么没有生效的具体原因。该报告内容将自动化配置内容分为以下两部分。

- positiveMatches中返回的是条件匹配成功的自动化配置。

- negativeMatches中返回的是条件匹配不成功的自动化配置。

从如上示例中我们可以看到,每个自动化配置候选项中都有一系列的条件,比如上面没有成功匹配的 HealthIndicatorAutoConfiguration.DataSourcesHealthIndicatorConfiguration 配置,它的先决条件是需要在工程中包含org.springframework.jdbc.core.JdbcTemplate类,由于我们没有引入相关的依赖,它就不会执行自动化配置内容。所以,当我们发现有一些期望的配置没有生效时,就可以通过该端点来查看没有生效的具体原因。

- /beans:该端点用来获取应用上下文中创建的所有Bean。

[

{

"context": "hello:dev:8881",

"parent": null,

"beans":[

{

"bean": "org.springframework.boot.autoconfigure.web.

DispatcherServletAutoConfiguration$DispatcherServletConfiguration",

"scope": "singleton",

"type": "org.springframework.boot.autoconfigure.web.

DispatcherServletAutoConfiguration$DispatcherServletConfiguration$$EnhancerBySpring CGLIB$$3440282b",

"resource": "null",

"dependencies":[

"serverProperties",

"spring.mvc.CONFIGURATION_PROPERTIES",

"multipartConfigElement"

},

{

]

"bean": "dispatcherServlet",

"scope": "singleton",

"type": "org.springframework.web.servlet.DispatcherServlet",

"resource": "class path resource

[org/springframework/boot/autoconfigure/web/DispatcherServletAutoConfiguration$Disp atcherServletConfiguration.class]",

"dependencies":[]

}

]

}

]

在如上示例中,我们可以看到在每个Bean中都包含了下面这些信息。

- bean:Bean的名称。

- scope:Bean的作用域。

- type:Bean的Java类型。

- resource:class文件的具体路径。

- dependencies:依赖的Bean名称。

- /configprops:该端点用来获取应用中配置的属性信息报告。从下面该端点返回示例的片段中,我们看到返回了关于该短信的配置信息,prefix 属性代表了属性的配置前缀,properties代表了各个属性的名称和值。所以,我们可以通过该报告来看到各个属性的配置路径,比如我们要关闭该端点,就可以通过使用endpoints.configprops.enabled=false来完成设置。

{

"configurationPropertiesReportEndpoint": {

"prefix": "endpoints.configprops",

"properties": {

"id": "configprops",

"sensitive": true,

"enabled": true

}

},

...

}

- /env:该端点与/configprops不同,它用来获取应用所有可用的环境属性报告。包括环境变量、JVM属性、应用的配置属性、命令行中的参数。从下面该端点返回的示例片段中,可以看到它不仅返回了应用的配置属性,还返回了系统属性、环境变量等丰富的配置信息,其中还包括了应用还没有使用的配置,所以它可以帮助我们方便地看到当前应用可以加载的配置信息,并配合@ConfigurationProperties注解将它们引入到我们的应用程序中来进行使用。另外,为了配置属性的安全,对于一些类似密码等敏感信息,该端点都会进行隐私保护,但是我们需要让属性名中包含 password、secret、key 这些关键词,这样该端点在返回它们的时候会使用*来替代实际的属性值。

{

"profiles":[

"dev"

],

"server.ports": {

"local.server.port": 8881

},

"servletContextInitParams": {

},

"systemProperties": {

"idea.version": "2016.1.3",

"java.runtime.name": "Java(TM)SE Runtime Environment",

"sun.boot.library.path": "C:\\Program Files\\Java\\jdk1.8.0_91\\jre\\bin",

"java.vm.version": "25.91-b15",

"java.vm.vendor": "Oracle Corporation",

...

},

"systemEnvironment": {

"configsetroot": "C:\\WINDOWS\\ConfigSetRoot",

"RABBITMQ_BASE": "E:\\tools\\rabbitmq",

...

},

"applicationConfig:[classpath:/application-dev.properties]": {

"server.port": "8881"

},

"applicationConfig:[classpath:/application.properties]": {

"server.port": "8885",

"spring.profiles.active": "dev",

"info.app.name": "spring-boot-hello",

"info.app.version": "v1.0.0",

"spring.application.name": "hello"

}

}

- /mappings:该端点用来返回所有Spring MVC的控制器映射关系报告。从下面的示例片段中,我们可以看到该报告的信息与我们在启用Spring MVC的Web应用时输出的日志信息类似,其中bean属性标识了该映射关系的请求处理器,method属性标识了该映射关系的具体处理类和处理函数。

{

"/webjars/**": {

"bean": "resourceHandlerMapping"

},

"/**": {

"bean": "resourceHandlerMapping"

},

"/**/favicon.ico": {

"bean": "faviconHandlerMapping"

},

"{[/hello]}": {

"bean": "requestMappingHandlerMapping",

"method": "public java.lang.String com.didispace.web.HelloController.index()"

},

"{[/mappings || /mappings.json],methods=[GET],produces=[application/json]}": {

"bean": "endpointHandlerMapping",

"method": "public java.lang.Object

org.springframework.boot.actuate.endpoint.mvc.EndpointMvcAdapter.invoke()"

},

...

}

- /info:该端点用来返回一些应用自定义的信息。默认情况下,该端点只会返回一个空的JSON内容。我们可以在application.properties配置文件中通过info前缀来设置一些属性,比如下面这样:

info.app.name=spring-boot-hello

info.app.version=v1.0.0

再访问/info端点,我们可以得到下面的返回报告,其中就包含了上面我们在应用中自定义的两个参数。

{

"app": {

"name": "spring-boot-hello",

"version": "v1.0.0"

}

}

度量指标类

上面我们所介绍的应用配置类端点所提供的信息报告在应用启动的时候就已经基本确定了其返回内容,可以说是一个静态报告。而度量指标类端点提供的报告内容则是动态变化的,这些端点提供了应用程序在运行过程中的一些快照信息,比如内存使用情况、HTTP请求统计、外部资源指标等。这些端点对于我们构建微服务架构中的监控系统非常有帮助,由于Spring Boot应用自身实现了这些端点,所以我们可以很方便地利用它们来收集我们想要的信息,以制定出各种自动化策略。下面,我们就来分别看看这些强大的端点功能。

- /metrics:该端点用来返回当前应用的各类重要度量指标,比如内存信息、线程信息、垃圾回收信息等。

{

"mem": 541305,

"mem.free": 317864,

"processors": 8,

"instance.uptime": 33376471,

"uptime": 33385352,

"systemload.average":-1,

"heap.committed": 476672,

"heap.init": 262144,

"heap.used": 158807,

"heap": 3701248,

"nonheap.committed": 65856,

"nonheap.init": 2496,

"nonheap.used": 64633,

"nonheap": 0,

"threads.peak": 22,

"threads.daemon": 20,

"threads.totalStarted": 26,

"threads": 22,

"classes": 7669,

"classes.loaded": 7669,

"classes.unloaded": 0,

"gc.ps_scavenge.count": 7,

"gc.ps_scavenge.time": 118,

"gc.ps_marksweep.count": 2,

"gc.ps_marksweep.time": 234,

"httpsessions.max":-1,

"httpsessions.active": 0,

"gauge.response.beans": 55,

"gauge.response.env": 10,

"gauge.response.hello": 5,

"gauge.response.metrics": 4,

"gauge.response.configprops": 153,

"gauge.response.star-star": 5,

"counter.status.200.beans": 1,

"counter.status.200.metrics": 3,

"counter.status.200.configprops": 1,

"counter.status.404.star-star": 2,

"counter.status.200.hello": 11,

"counter.status.200.env": 1

}

从上面的示例中,我们看到有如下这些重要的度量值。

- 系统信息:包括处理器数量processors、运行时间uptime和instance.uptime、系统平均负载systemload.average。

- mem.*:内存概要信息,包括分配给应用的总内存数量以及当前空闲的内存数量。这些信息来自java.lang.Runtime。

- heap.*:堆内存使用情况。这些信息来自 java.lang.management.MemoryMXBean 接口中 getHeapMemoryUsage 方法获取的 java.lang.management.MemoryUsage。

- nonheap.*:非堆内存使用情况。这些信息来自 java.lang.management.MemoryMXBean接口中getNonHeapMemoryUsage方法获取的java.lang.management.MemoryUsage。

- threads.*:线程使用情况,包括线程数、守护线程数(daemon)、线程峰值(peak)等,这些数据均来自java.lang.management.ThreadMXBean。

- classes.*:应用加载和卸载的类统计。这些数据均来自java.lang.management.ClassLoadingMXBean。

- gc.*:垃圾收集器的详细信息,包括垃圾回收次数gc.ps_scavenge.count、垃圾回收消耗时间 gc.ps_scavenge.time、标记-清除算法的次数 gc.ps_marksweep.count、标记-清除算法的消耗时间gc.ps_marksweep.time。这些数据均来自java.lang.management.GarbageCollectorMXBean。

- httpsessions.*:Tomcat 容器的会话使用情况。包括最大会话数httpsessions.max和活跃会话数httpsessions.active。该度量指标信息仅在引入嵌入式Tomcat作为应用容器的时候才会提供。

- gauge.*:HTTP请求的性能指标之一,它主要用来反映一个绝对数值。比如上面示例中的gauge.response.hello: 5,它表示上一次hello请求的延迟时间为5毫秒。

- counter.*:HTTP 请求的性能指标之一,它主要作为计数器来使用,记录了增加量和减少量。上述示例中的counter.status.200.hello: 11,它代表了hello请求返回200状态的次数为11。

对于gauge.*和counter.*的统计,这里有一个特殊的内容请求star-star,它代表了对静态资源的访问。这两类度量指标非常有用,我们不仅可以使用它默认的统计指标,还可以在程序中轻松地增加自定义统计值。只需要通过注入org.springframework.boot.actuate.metrics.CounterService 和 org.springframework.boot.actuate.metrics.GaugeService 来实现自定义的统计指标信息。比如我们可以像下面这样自定义实现对hello接口的访问次数统计。

@RestController

public class HelloController {

@Autowired

private CounterService counterService;

@RequestMapping("/hello")

public String greet(){

counterService.increment("didispace.hello.count");

return "";

}

}

/metrics端点可以提供应用运行状态的完整度量指标报告,这项功能非常实用,但是对于监控系统中的各项监控功能,它们的监控内容、数据收集频率都有所不同,如果每次都通过全量获取报告的方式来收集,略显粗暴。所以,我们还可以通过/metrics/{name}接口来更细粒度地获取度量信息,比如可以通过访问/metrics/mem.free来获取当前可用内存数量。

- /health:该端点在一开始的示例中我们已经使用过了,它用来获取应用的各类健康指标信息。在spring-boot-starter-actuator模块中自带实现了一些常用资源的健康指标检测器。这些检测器都通过HealthIndicator接口实现,并且会根据依赖关系的引入实现自动化装配,比如下面列出的这些。

有时候,我们可能还会用到一些Spring Boot的Starter POMs中还没有封装的产品来进行开发,比如,当使用RocketMQ作为消息代理时,由于没有自动化配置的检测器,所以需要自己来实现一个用来采集健康信息的检测器。我们可以在Spring Boot的应用中,为org.springframework.boot.actuate.health.HealthIndicator 接口实现一个对RocketMQ的检测器类:

@Component

public class RocketMQHealthIndicator implements HealthIndicator {

@Override

public Health health(){

int errorCode=check();

if(errorCode !=0){

return Health.down().withDetail("Error Code",errorCode).build();

}

return Health.up().build();

}

private int check(){

//对监控对象的检测操作

}

}

通过重写 health()函数可实现健康检查,在返回的 Heath 对象中,共有两项内容,一个是状态信息,除了该示例中的 UP 与 DOWN 之外,还有 UNKNOWN 和OUT_OF_SERVICE,可以根据需要来实现返回;还有一个详细信息,采用 Map 的方式存储,在这里通过withDetail函数,注入了一个Error Code信息,我们也可以填入其他信息,比如,检测对象的IP地址、端口等。

重新启动应用,并访问/health接口,我们在返回的JSON字符串中,将会包含如下信息:

"rocketMQ": {

"status": "UP"

}

- /dump:该端点用来暴露程序运行中的线程信息。它使用java.lang.management.ThreadMXBean的dumpAllThreads方法来返回所有含有同步信息的活动线程详情。

- /trace:该端点用来返回基本的HTTP跟踪信息。默认情况下,跟踪信息的存储采用org.springframework.boot.actuate.trace.InMemoryTraceRepository实现的内存方式,始终保留最近的100条请求记录。它记录的内容格式如下所示:

操作控制类

仔细的读者可能会发现,我们在“初识actuator”小节中的示例的控制台中输出的所有监控端点,已经在介绍应用配置类端点和度量指标类端点时都讲解完了。那么还有哪些是操作控制类端点呢?实际上,由于之前介绍的所有端点都是用来反映应用自身的属性或是运行中的状态,相对于操作控制类端点没有那么敏感,所以它们都是默认启用的。而操作控制类端点拥有更强大的控制能力,如果要使用它们的话,需要通过属性来配置开启操作。

在原生端点中,只提供了一个用来关闭应用的端点:/shutdown(在后续我们引入了Eureka之后,会引入更多控制端点)。可以通过如下配置开启它:

endpoints.shutdown.enabled=true

在配置了上述属性之后,只需要访问该应用的/shutdown端点就能实现关闭该应用的远程操作。由于开放关闭应用的操作本身是一件非常危险的事,所以真正在线上使用的时候,需要对其加入一定的保护机制,比如定制actuator的端点路径、整合Spring Security进行安全校验等。

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。
列表为空,暂无数据
    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文