IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> java 与 grafana -> 正文阅读

[大数据]java 与 grafana


使用 grafana 监控 sql 执行耗时与次数 数据存储在 influxDB 中

效果

效果

grafana下载
influx db 下载

influx_db 建库

创建 sqlp 数据库

create database sqlp;

添加数据保留策略 这里设置为1天

 create retention policy "1d" on "sqlp"  duration 24h replication 1 DEFAULT ;

java 上报数据

使用 influxdb-java

<dependency>
			<groupId>org.influxdb</groupId>
			<artifactId>influxdb-java</artifactId>
			<version>2.22</version>
</dependency>

数据保存时用表名作为 measurement
并添加一个 sql_type 的 tag (select, insert, update, select count)
可以用 druid filter 统计耗时

@Slf4j
public class MyDruidFilter extends FilterEventAdapter {
    
    // 覆盖执行方法
    @Override
    public boolean preparedStatement_execute(FilterChain chain, PreparedStatementProxy statement) throws SQLException {
        long start = System.currentTimeMillis();
        try {
            this.statementExecuteBefore(statement, statement.getSql());
            boolean firstResult = chain.preparedStatement_execute(statement);
            this.statementExecuteAfter(statement, statement.getSql(), firstResult);
            return firstResult;
        } catch (SQLException var4) {
            this.statement_executeErrorAfter(statement, statement.getSql(), var4);
            throw var4;
        } catch (RuntimeException var5) {
            this.statement_executeErrorAfter(statement, statement.getSql(), var5);
            throw var5;
        } catch (Error var6) {
            this.statement_executeErrorAfter(statement, statement.getSql(), var6);
            throw var6;
        } finally {
            long consumeTime = System.currentTimeMillis() - start;
            SqlMonitor.monitorTime(statement.getSql().toString(), "b_file", consumeTime);
        }
    }
}

monitor time 方法

public static void monitorTime(String sql, String table, Long consumeTimeInMs) {
        sql = sql.replaceAll("\n", "");
        String tag = "default";
        if (sql.startsWith("SELECT COUNT")) {
            tag = "count";
        } else if (sql.startsWith("SELECT")) {
            tag = "select";
        } else if (sql.startsWith("INSERT")) {
            tag = "insert";
        } else if (sql.startsWith("UPDATE")) {
            tag = "update";
        }
        Point point = Point.measurement(table)
            .tag("sql_type", tag)
            .addField("consume_time", consumeTimeInMs)
            .addField("sql_count", 1)
            .build();
        InfluxDBUtil.write(INFLUX_DB, point);
    }

grafana 配置

添加 influxdb 数据源

url 设置为 http://localhost:8086
database 设置为 sqlp

添加面板

执行时间配置如下
在这里插入图片描述

执行次数

这里对 sql_count 作 sum 聚合 并 group by 1s 统计出来一共就是 sql 执行 的 qps
在这里插入图片描述

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2022-05-24 18:15:37  更:2022-05-24 18:19:28 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/23 20:17:40-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码