随笔- 154  文章- 0  评论- 41 

SpringBoot配置Druid监控

首先我们的项目是基于Druid连接池

 Druid 具有以下特点:

  • 亚秒级 OLAP 查询,包括多维过滤、Ad-hoc 的属性分组、快速聚合数据等等。
  • 实时的数据消费,真正做到数据摄入实时、查询结果实时。
  • 高效的多租户能力,最高可以做到几千用户同时在线查询。
  • 扩展性强,支持 PB 级数据、千亿级事件快速处理,支持每秒数千查询并发。
  • 极高的高可用保障,支持滚动升级。

 

1.在application.yml文件中添加连接池的配置信息

# spring 配置
spring:
  application:
    name: imodule-nexus-service
  # DataSource Config 数据源配置
  datasource:
    # 数据连接池类型
    type: com.alibaba.druid.pool.DruidDataSource
    # driver-class-name: com.mysql.jdbc.Driver
    # mysql-connector-java 8.0+ 使用这个新的接口
    driver-class-name: com.mysql.cj.jdbc.Driver
    url: ${db.nexus.url}
    username: ${db.nexus.username}
    password: ${db.nexus.password}

    # 初始化时建立物理连接的个数。初始化发生在显示调用init方法,或者第一次getConnection时
    initial-size: 10
    # 最大连接池连接数量,最大活跃连接数
    max-active: 150
    # 最小连接池连接数量,最小空闲数量
    min-idle: 10
    # 配置获取连接等待超时的时间
    max-wait: 5000
    # 是否缓存preparedStatement,也就是PSCache。PSCache对支持游标的数据库性能提升巨大,比如说oracle。在mysql下建议关闭。
    pool-prepared-statements: false
    # 指定每个连接上PSCache的大小
    # max-pool-prepared-statement-per-connection-size: 20
    # 和上面的等价
    # max-open-prepared-statements:
    # 指定检测连接sql,如果是null,会影响testWhileIdle、testOnBorrow、testOnReturn失效,如果底层代码use-ping-method是true,默认使用ping
    validation-query: SELECT 1
    validation-query-timeout: 500
    # 申请连接时会使用validationQuery检测连接是否有效,true会降低性能,如果是true,并且检测到连接已关闭,会获取其它的可用的连接
    test-on-borrow: false
    # 归还连接时会使用validationQuery检测连接是否有效,true会降低性能,如果是true,并且检测到连接已关闭,会获取其它的可用的连接,放回数据库线程池
    test-on-return: false
    # 建议配置为true,不影响性能,并且保证安全性。申请连接的时候检测,如果此连接空闲时间大于timeBetweenEvictionRunsMillis,执行validationQuery检测连接是否有效。
    test-while-idle: true
    # 1)配合testWhileIdle=true时使用,如果当前jdbc使用间隔大于timeBetweenEvictionRunsMillis配置的空闲连接过期时间,执行validationQuery检测连接是否有效。
    # 数据库会主动超时并断开连接,因此建议timeBetweenEvictionRunsMillis小于数据库的连接主动断开时间(如mysql的wait_timeout和interactive_timeout)
    # 2)配置间隔多久才进行一次检测,Destroy线程检测需要关闭的空闲连接的时间,单位是毫秒
    time-between-eviction-runs-millis: 60000
    # 配置一个连接在池中最小生存的时间,单位是毫秒
    min-evictable-idle-time-millis: 30000
    # max-evictable-idle-time-millis:
    # 属性类型是字符串,通过别名的方式配置扩展插件,常用的插件有: 监控统计用的filter:stat日志用的filter:log4j防御sql注入的filter:wall
    # 配置多个英文逗号分隔
    filters: stat,wall,log4j
    # 通过connectProperties属性来打开mergeSql功能;记录慢SQL
    connectionProperties: druid.stat.mergeSql=true;druid.stat.slowSqlMillis=5000

 

2.新增配置类 DruidConfig.java

这里需要注意  @ConfigurationProperties(prefix = "spring.datasource") 指定的是Druid连接池配置信息application.yml 层级关系一定要对应好,后面会指出和这里相关的问题

package com.imodule.demo.service.configuration;

import javax.sql.DataSource;

import org.springframework.boot.context.properties.ConfigurationProperties;
import org.springframework.boot.web.servlet.FilterRegistrationBean;
import org.springframework.boot.web.servlet.ServletRegistrationBean;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;

import com.alibaba.druid.pool.DruidDataSource;
import com.alibaba.druid.support.http.StatViewServlet;
import com.alibaba.druid.support.http.WebStatFilter;

/**
 * 线程池监控信息查看配置
 */
@Configuration
public class DruidConfig {
    @Bean
    public ServletRegistrationBean druidServlet() { // 主要实现WEB监控的配置处理
        ServletRegistrationBean servletRegistrationBean = new ServletRegistrationBean(
                new StatViewServlet(), "/druid/*"); // 现在要进行druid监控的配置处理操作
        servletRegistrationBean.addInitParameter("allow", "127.0.0.1,10.1.1.1"); // 白名单
       // servletRegistrationBean.addInitParameter("deny", "192.168.1.200"); // 黑名单
        servletRegistrationBean.addInitParameter("loginUsername", "admin"); // 用户名
        servletRegistrationBean.addInitParameter("loginPassword", "admin"); // 密码
        servletRegistrationBean.addInitParameter("resetEnable", "false"); // 是否可以重置数据源
        return servletRegistrationBean ;
    }

    @Bean
    public FilterRegistrationBean filterRegistrationBean() {
        FilterRegistrationBean filterRegistrationBean = new FilterRegistrationBean() ;
        filterRegistrationBean.setFilter(new WebStatFilter());
        filterRegistrationBean.addUrlPatterns("/*"); // 所有请求进行监控处理
        filterRegistrationBean.addInitParameter("exclusions", "*.js,*.gif,*.jpg,*.css,/druid/*");
        return filterRegistrationBean ;
    }

    @Bean
    @ConfigurationProperties(prefix = "spring.datasource")
    public DataSource druidDataSource() {
        return new DruidDataSource();
    }
}

 

3.项目中用到了Druid的话 肯定会先在pom里面引入相关依赖的,目前我们这个项目中引用的druid 1.1.15

pom.xml (下面两个选一个就可以了,我试过两种方案)

1. 使用组件common-dao层的依赖,统一引用的是 druid 1.1.15  (这个各公司的定义不同,意思就是说我们公司自定义的common包中包含了 druid 依赖,指定了版本号为1.1.15 ,所以我只需要直接引用common包就好了)

2.在引用公司的common包的时候排除druid依赖,然后再自己引入 druid-spring-boot-starter 包 

保持一致,我使用的是方案一,整体统一哈哈哈哈(如果你们在使用的时候没有其他包引用了druid ,自己手动将以下其中依赖信息添加到pom.xml即可,具体版本信息可能还需要对应一下哦)

<dependency>
  <groupId>com.alibaba</groupId>
  <artifactId>druid-spring-boot-starter</artifactId>
   <version>1.1.9</version>
</dependency>   

<dependency>
  <groupId>com.alibaba</groupId>
  <artifactId>druid</artifactId>
  <version>1.1.15</version>
</dependency>                      

 

4.启动SpringBoot项目,执行main方法,启动成功后访问druid 

druid监控访问地址: http://ip:port/context-path/druid/index.html

          eg:http://127.0.0.1:8080/demo/druid/login.html (这里的IP需要是上面配置文件中白名单指定的哦,多个可以使用逗号分割)

进入如下登录页面,用户名及密码就是在DruidConfig.java中配置的信息(本例中是:admin/admin)

 

登录成功后,即可看到如下信息

 

5.配置Druid监控过程中出现过两个问题

问题1:

Failed to bind properties under 'spring.datasource' to javax.sql.DataSource:

Property: spring.datasource.filters
Value: stat,wall,log4j
Origin: class path resource [application.yml]:53:14
Reason: org.apache.log4j.Logger

原因: spring.datasource下面的filters对日志的配置有问题,因为我项目中的日志为 slf4j,而连接池中配置的是log4j,所以出错了

处理方案: 将 application.yml 里面的 spring.datasource.filter 的 log4j 更改为 slf4j

 

问题2:启动没报错,也能正常访问Druid,但是Druid监控里面sql信息没有显示出来,数据源配置显示正常,连接池配置信息显示不正常,如下图所示

 

SQL监控:(执行查询数据库的脚本也没有任何信息显示)

 

这个问题纠结了我一上午了,查了无数遍,有人说是包的版本不对,也有人说是日志配置有问题... 都尝试了,不行

后来我眼睛一精,发现原来是我的配置文件 application.yml里面的内容定义有问题

原版配置文件在指定数据源配置信息: spring.datasource.DBINFO   spring.datasource.druid.DRUIDINFO

配置文件如下:

 

这个配置层级关系不对呀,在DruidConfig.java类中,我们指定的配置信息读取路径是 spring.datasource ,关于连接池信息又多了一层 druid(spring.datasource.druid),所以连接池相关配置信息没有被读取到,只读取到了数据源信息,这就出现了上方问题2的错误现象了

处理方案: 将druid这一层移除,调整后的配置文件如下

 

6.调整之后再次启动项目,访问druid监控,发现一切都正常了

 

7.最后提供一下完整的关于druid监控的application.yml

# spring 配置
spring:
  application:
    name: demo-service
  # DataSource Config 数据源配置
  datasource:
    # 数据连接池类型
    type: com.alibaba.druid.pool.DruidDataSource
    # driver-class-name: com.mysql.jdbc.Driver
    # mysql-connector-java 8.0+ 使用这个新的接口
    driver-class-name: com.mysql.cj.jdbc.Driver
    url: ${db.nexus.url}
    username: ${db.nexus.username}
    password: ${db.nexus.password}
    # 初始化时建立物理连接的个数。初始化发生在显示调用init方法,或者第一次getConnection时
    initial-size: 10
    # 最大连接池连接数量,最大活跃连接数
    max-active: 150
    # 最小连接池连接数量,最小空闲数量
    min-idle: 10
    # 配置获取连接等待超时的时间
    max-wait: 5000
    # 是否缓存preparedStatement,也就是PSCache。PSCache对支持游标的数据库性能提升巨大,比如说oracle。在mysql下建议关闭。
    pool-prepared-statements: false
    # 指定每个连接上PSCache的大小
    # max-pool-prepared-statement-per-connection-size: 20
    # 和上面的等价
    # max-open-prepared-statements:
    # 指定检测连接sql,如果是null,会影响testWhileIdle、testOnBorrow、testOnReturn失效,如果底层代码use-ping-method是true,默认使用ping
    validation-query: SELECT 1
    validation-query-timeout: 500
    # 申请连接时会使用validationQuery检测连接是否有效,true会降低性能,如果是true,并且检测到连接已关闭,会获取其它的可用的连接
    test-on-borrow: false
    # 归还连接时会使用validationQuery检测连接是否有效,true会降低性能,如果是true,并且检测到连接已关闭,会获取其它的可用的连接,放回数据库线程池
    test-on-return: false
    # 建议配置为true,不影响性能,并且保证安全性。申请连接的时候检测,如果此连接空闲时间大于timeBetweenEvictionRunsMillis,执行validationQuery检测连接是否有效。
    test-while-idle: true
    # 1)配合testWhileIdle=true时使用,如果当前jdbc使用间隔大于timeBetweenEvictionRunsMillis配置的空闲连接过期时间,执行validationQuery检测连接是否有效。
    # 数据库会主动超时并断开连接,因此建议timeBetweenEvictionRunsMillis小于数据库的连接主动断开时间(如mysql的wait_timeout和interactive_timeout)
    # 2)配置间隔多久才进行一次检测,Destroy线程检测需要关闭的空闲连接的时间,单位是毫秒
    time-between-eviction-runs-millis: 60000
    # 配置一个连接在池中最小生存的时间,单位是毫秒
    min-evictable-idle-time-millis: 30000
    # max-evictable-idle-time-millis:
    # 属性类型是字符串,通过别名的方式配置扩展插件,常用的插件有: 监控统计用的filter:stat日志用的filter:log4j防御sql注入的filter:wall
    # 配置多个英文逗号分隔
    filters: stat,wall,slf4j
    # 通过connectProperties属性来打开mergeSql功能;记录慢SQL
    connectionProperties: druid.stat.mergeSql=true;druid.stat.slowSqlMillis=5000

  

 posted on 2020-04-22 13:46  阿叮339  阅读(1720)  评论(0编辑  收藏