当前位置:首页 > 科技  > 软件

系统设计 | Java 应用中的配置含义和避坑

来源: 责编: 时间:2024-09-10 09:51:08 241观看
导读这篇文章整理了 Spring Boot 和常见的应用中间件配置含义,了解这些配置的目的和原理,避免因为错误配置导致生产出现问题,特别是有一些安全问题。PS:写下来发现东西非常多,很多时候我们都只是拷贝过来改改没问题就不管了,但

这篇文章整理了 Spring Boot 和常见的应用中间件配置含义,了解这些配置的目的和原理,避免因为错误配置导致生产出现问题,特别是有一些安全问题。Thm28资讯网——每日最新资讯28at.com

PS:写下来发现东西非常多,很多时候我们都只是拷贝过来改改没问题就不管了,但是这样囫囵吞枣,会给项目带来风险。Thm28资讯网——每日最新资讯28at.com

1. Spring Boot 相关

优雅停机

优雅停机是指当应用接收到停机信号时,能够妥善地处理正在进行的请求,释放资源,并在完成这些工作后再停止应用。Thm28资讯网——每日最新资讯28at.com

如果不开启优雅停机,有可能在部署的过程中让少量未完成的任务和请求直接终止,带来意想不到的问题。Thm28资讯网——每日最新资讯28at.com

默认情况下,Spring Boot 没有启用优雅停机,而且往往需要和云环境配合使用。Thm28资讯网——每日最新资讯28at.com

在 Spring Boot 中的配置方式为(本文以 yaml 的格式):Thm28资讯网——每日最新资讯28at.com

server:  shutdown: graceful

同时可以设置一个优雅停机的超时时间,如果在超时时间内请求没有完成,应用将强制停机。Thm28资讯网——每日最新资讯28at.com

spring:  lifecycle:    timeout-per-shutdown-phase: 30s

Kubernetes 在停止 Pod 时,会先发送一个 SIGTERM,并通过 Readiness Probe和Liveness Probe 两个探针来决定是否释放容器资源。Thm28资讯网——每日最新资讯28at.com

探针就是应用通过一个 API(可以是 HTTP 或者 TCP,通常都是 HTTP)告诉 Kubernetes 它当前的状态,让 Kubernetes 来决策何时重启,关于优雅停机的内容比较多,后面单独一篇文章讨论。Thm28资讯网——每日最新资讯28at.com

在 Spring Boot 中,探针就是 Spring Boot 的 health 接口,可以通过 Indicator 配置。Thm28资讯网——每日最新资讯28at.com

Indicator

Spring Boot 提供了一些健康状态的 API,这样就可以给云平台优雅停机使用,也可以提供给监控系统用来拨测,如果系统长时间不健康,可以进行告警。Thm28资讯网——每日最新资讯28at.com

在代码中实现健康状态的类叫做 Indicator,基本上默认配置的 Indicator 就够用了,但有时候需要根据自己需要配置一些 Indicator。Thm28资讯网——每日最新资讯28at.com

比如依赖了一个重要的三方系统,这个三方系统不启动起来,当前系统启动了也没意义,于是就可以加一个 Indicator,甚至把三方系统的状态暴露到当前系统的健康状态信息中。Thm28资讯网——每日最新资讯28at.com

暴露相关健康 API 需要引入一个 actuator 依赖:Thm28资讯网——每日最新资讯28at.com

<dependency>    <groupId>org.springframework.boot</groupId>    <artifactId>spring-boot-starter-actuator</artifactId></dependency>

下面是一个例子:Thm28资讯网——每日最新资讯28at.com

import org.springframework.boot.actuate.health.Health;import org.springframework.boot.actuate.health.HealthIndicator;import org.springframework.stereotype.Component;@Componentpublic class CustomHealthIndicator implements HealthIndicator {    @Override    public Health health() {        boolean isHealthy = checkSomeServiceHealth();                if (isHealthy) {            return Health.up().withDetail("customService", "UP").build();        } else {            return Health.down().withDetail("customService", "DOWN").build();        }    }    private boolean checkSomeServiceHealth() {        // 检查逻辑        return true;     }}

访问 /actuator/health 接口,返回结果大概像下面这样:Thm28资讯网——每日最新资讯28at.com

{  "status": "UP",  "components": {    "db": {      "status": "UP",      "details": {        "database": "MySQL",        "validationQuery": "isValid()"      }    },    "customService": {      "status": "UP",      "details": {        "CustomService": "UP"      }    },    ……  }}

打开相关配置:Thm28资讯网——每日最新资讯28at.com

management:  endpoints:    web:      exposure:        include: health,info

在这个配置中,info 类似 health, 提供了一些服务信息,例如名称、版本之类的,但是要注意避免把敏感信息从这个接口中暴露出去了。Thm28资讯网——每日最新资讯28at.com

Actuator

提到了 Actuator,这里有一些配置是不能在生产环境开启的,这是比较常见的错误,需要注意。Thm28资讯网——每日最新资讯28at.com

Actuator 除了提供了 health,info 两个接口,还提供了一堆接口,方便观察 Spring Boot 应用,这些接口都可以在开发环境开启。例如:Thm28资讯网——每日最新资讯28at.com

  • /health: 显示应用的健康状态及详细信息。
  • /info: 显示应用的一些基本信息(例如版本、描述等)。
  • /env: 查看和调试环境属性,了解配置项的来源。
  • /beans: 用于调试 Bean 的创建和依赖关系。
  • /metrics: 查看应用的性能指标,如内存使用情况、GC 活动等。
  • /httptrace: 用于查看最近 HTTP 请求的详细信息。
  • /mappings: 用于查看所有请求映射的路径,方便调试路由问题。

这些接口开启后会造成安全、性能问题。Thm28资讯网——每日最新资讯28at.com

所以推荐的配置如下。Thm28资讯网——每日最新资讯28at.com

开发环境:Thm28资讯网——每日最新资讯28at.com

management:  endpoints:    web:      exposure:        include: "*"  endpoint:    health:      show-details: always  # 显示详细健康信息,方便调试

endpoints 只是暴露外部是否可以访问,实际的功能需要单独开启,health,info,metrics 三个接口是默认开启的。Thm28资讯网——每日最新资讯28at.com

如果需要打开 beans,可以单独开启:Thm28资讯网——每日最新资讯28at.com

management:  logfile:    enabled: true           # 允许查看日志文件,方便调试  env:    enabled: true           # 允许查看环境变量配置  configprops:    enabled: true           # 允许查看配置属性,帮助调试  beans:    enabled: true           # 允许查看 Bean 信息,调试依赖关系  heapdump:    enabled: true           # 启用 Heap Dump,用于内存分析  threaddump:    enabled: true           # 启用线程转储,用于线程分析  mappings:    enabled: true           # 允许查看所有请求映射,调试路由问题  httptrace:    enabled: true           # 启用 HTTP 请求追踪

而生产环境,需要将其关闭,只保留需要开启的配置:Thm28资讯网——每日最新资讯28at.com

management:  endpoints:    web:      exposure:        include: "health,info,metrics"  endpoint:    health:      show-details: never   # 隐藏健康检查的详细信息,防止敏感数据泄露

日志

日志配置错误会导致磁盘被日志写满,另外日志级别过低,性能会急剧下降。Thm28资讯网——每日最新资讯28at.com

在以前还不是容器时代,我们常常使用日志文件存储日志,再使用一些工具转存走,有时候清理日志的脚本失效,导致磁盘被日志写爆的场景非常多。Thm28资讯网——每日最新资讯28at.com

下面是一个在容器环境下 Spring Boot 默认日志库的配置:Thm28资讯网——每日最新资讯28at.com

logging:  level:    root: INFO    org.springframework: WARN #这里放上特定包的日志配置  pattern:    console: "%d{yyyy-MM-dd HH:mm:ss.SSS} [%thread] %-5level %logger{36} - %msg%n"  file:    enabled: false # 生产环境通常不直接写入文件,而是由 K8s 日志收集系统处理  stdout:    enabled: true

在生产上我们一般将日志级别设置为 INFO,并关闭文件输出,而是将日志输出到 stdout 中,由容器捕获。Thm28资讯网——每日最新资讯28at.com

在开发环境,我们通常把日志设置为 DEBUG,更加方便调试。Thm28资讯网——每日最新资讯28at.com

秘钥和口令

正常情况下,大多数应用都不会把口令存放到配置文件中,敏感信息需要放到秘钥管理系统中(Key Management System)。Thm28资讯网——每日最新资讯28at.com

例如,在 k8s 中,我们可以使用 Secrets 代替明文的 ConfigMap;云平台往往提供了相关的 KMS 产品,例如 Alicloud KMS。Thm28资讯网——每日最新资讯28at.com

2.Mysql

这里给出一个 Mysql 和 Mybatis 的典型配置,并解释一下关键配置的含义和避坑经验。Thm28资讯网——每日最新资讯28at.com

spring:  datasource:    url: jdbc:mysql://localhost:3306/mydatabase?useUnicode=true&characterEncoding=utf-8&useSSL=false&serverTimezone=UTC&autoReconnect=true&rewriteBatchedStatements=true    username: your_username    password: your_password    driver-class-name: com.mysql.cj.jdbc.Driver    hikari:      maximum-pool-size: 10      minimum-idle: 5      idle-timeout: 30000      max-lifetime: 1800000      connection-timeout: 30000mybatis:  mapper-locations: classpath*:mapper/*.xml  type-aliases-package: com.example.project.domain  configuration:    map-underscore-to-camel-case: true    log-impl: org.apache.ibatis.logging.stdout.StdOutImpl

连接字符串中的配置:Thm28资讯网——每日最新资讯28at.com

  • useUnicode:启用了 Unicode 支持。
  • characterEncoding:字符编码,最好在 useUnicode 配置后,characterEncoding 也明确配置一下,否则它会选择一个默认的 Unicode 字符编码。另外,我们现在用的更多的是 utf8mb4,它是 UTF8 的拓展字符集,可以处理更多特性,例如表情,最多占用 4 个字节的空间。
  • useSSL:如果启用,需要证书,一般我们都没有配置。
  • serverTimezone:关于时区,我们一般都不让数据库决策,而让应用决定写入数据的时区,这个问题我在以前的文章,《系统设计中需要考虑到的时间问题》,做过详细说明。
  • autoReconnect:自动重连,如果不开启的话,数据库重启了应用也必须重启。
  • rewriteBatchedStatements:自动优化批量插入时的性能。

关于 driver-class-name,对于 MySQL Connector/J 8.0 以上,类名换成了 com.mysql.cj.jdbc.Driver,旧版本是 com.mysql.jdbc.Driver。Thm28资讯网——每日最新资讯28at.com

关于 hikari 配置的含义:Thm28资讯网——每日最新资讯28at.com

  • maximum-pool-size: 最大连接数,连接池中的最大连接数。
  • minimum-idle: 最小空闲连接数。
  • idle-timeout: 空闲连接被回收前的最大等待时间(毫秒)。
  • max-lifetime: 连接在池中的最长存活时间(毫秒)。
  • connection-timeout: 获取连接的超时时间(毫秒)。

hikari 的配置只是建议值,hikari 配置逻辑是什么呢?一般是基于性能测试反复调整,但还是有一些规律。Thm28资讯网——每日最新资讯28at.com

这里有个坑,有时候为了优化性能,提高了最大连接数。但一般数据库的连接数是有限制的,比如 1000。假设一个系统共同一个Mysql实例,系统共有 10 个服务,每个服务如果有 10 个容器,最大连接数最多就只能配置到 10 了,否则就会报没有链接的错误(而且是偶尔出现这类问题)。Thm28资讯网——每日最新资讯28at.com

maximumPoolSize 通常设置为数据库的并发连接限制的 50% 到 80% 之间,单个容器允许 10 个 Mysql 连接并不大,maximum-pool-size 可以在 10 - 50 之间调整。Thm28资讯网——每日最新资讯28at.com

connection-timeout 过短,在数据库负载高或网络不稳定的情况下,可能导致频繁的连接超时,可以尝试往长一点调整。Thm28资讯网——每日最新资讯28at.com

max-lifetime、minimum-idle 取决于负载情况,如果持续负载比较高,可以设置长一些,不用为数据库节省资源,让连接长时间保持。Thm28资讯网——每日最新资讯28at.com

关于 Mybatis 的 map-underscore-to-camel-case 配置有一个坑,这个配置的含义是把数据库列名中的下划线自动映射为 Java 对象中的驼峰命名。例如,user_name 列将映射为 userName 属性。但有的时候,命名不规范,有些词可能是一个词组而没有大写,会导致匹配失败。Thm28资讯网——每日最新资讯28at.com

本文链接:http://www.28at.com/showinfo-26-112788-0.html系统设计 | Java 应用中的配置含义和避坑

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: Vue3 无所不能!我用 Vue3 写接口给前端用你们信吗?

下一篇: DevOps流程最全详解(7大流程步骤图解)

标签:
  • 热门焦点
  • 6月iOS设备好评榜:第一蝉联榜首近一年

    作为安兔兔各种榜单里变化最小的那个,2023年6月的iOS好评榜和上个月相比没有任何排名上的变化,仅仅是部分设备好评率的下降,长年累月的用户评价和逐渐退出市场的老款机器让这
  • 如何通过Python线程池实现异步编程?

    线程池的概念和基本原理线程池是一种并发处理机制,它可以在程序启动时创建一组线程,并将它们置于等待任务的状态。当任务到达时,线程池中的某个线程会被唤醒并执行任务,执行完任
  • JavaScript学习 -AES加密算法

    引言在当今数字化时代,前端应用程序扮演着重要角色,用户的敏感数据经常在前端进行加密和解密操作。然而,这样的操作在网络传输和存储中可能会受到恶意攻击的威胁。为了确保数据
  • .NET 程序的 GDI 句柄泄露的再反思

    一、背景1. 讲故事上个月我写过一篇 如何洞察 C# 程序的 GDI 句柄泄露 文章,当时用的是 GDIView + WinDbg 把问题搞定,前者用来定位泄露资源,后者用来定位泄露代码,后面有朋友反
  • 一个注解实现接口幂等,这样才优雅!

    场景码猿慢病云管理系统中其实高并发的场景不是很多,没有必要每个接口都去考虑并发高的场景,比如添加住院患者的这个接口,具体的业务代码就不贴了,业务伪代码如下:图片上述代码有
  • 中国家电海外掘金正当时|出海专题

    作者|吴南南编辑|胡展嘉运营|陈佳慧出品|零态LT(ID:LingTai_LT)2023年,出海市场战况空前,中国创业者在海外纷纷摩拳擦掌,以期能够把中国的商业模式、创业理念、战略打法输出海外,他们依
  • 8月见!小米MIX Fold 3获得3C认证:支持67W快充

    这段时间以来,包括三星、一加、荣耀等等有不少品牌旗下的最新折叠屏旗舰都得到了不少爆料,而小米新一代折叠屏旗舰——小米MIX Fold 3此前也屡屡被传
  • 华为Mate60系列模具曝光:采用硕大圆形后置相机模组+拼接配色方案

    据此前多方爆料,今年华为将开始恢复一年双旗舰战略,除上半年推出的P60系列外,往年下半年的Mate系列也将迎来更新,有望在9-10月份带来全新的华为Mate60
  • Meta盲目扩张致超万人被裁,重金押注元宇宙而前景未明

    图片来源:图虫创意日前,Meta创始人兼CEO 马克&middot;扎克伯发布公开信,宣布Meta计划裁员超11000人,占其员工总数13%。他公开承认了自己的预判失误:&ldquo;不仅
Top