程序员经验分享-hwhale

如何使用 Apache IoTDB 分布式系统监控模块

2023-05-16

从 Apache IoTDB 0.13.0 版本开始，我们引入了系统监控模块，可以完成对 Apache IoTDB 的重要运行指标进行监控，本文介绍了如何在 Apache IoTDB 分布式开启系统监控模块，并且使用 Prometheus + Grafana 的方式完成对系统监控指标的可视化。

软件配置信息

  1. Apache IoTDB：1.0 版本及以上，可以前往官网下载
  2. Prometheus：2.30.3 版本及以上，可以前往官网下载
  3. Grafana：8.4.2 版本及以上，可以前往官网下载

集群基础信息

本文在一台机器上启动 1 个 ConfigNode 和 1 个 DataNode 来搭建最简单的 Apache IoTDB 分布式集群，后续可以根据自己的需求调整 ConfigNode 和 DataNode 的数量，相关的配置是类似的。本文搭建的集群的基本配置信息如下表所示：

集群角色节点IP监控模块推送器监控模块级别监控 Port
ConfigNode127.0.0.1PROMETHEUSIMPORTANT9091
DataNode127.0.0.1PROMETHEUSIMPORTANT9093

启动 Apache IoTDB 分布式集群

启动 Apache IoTDB ConfigNode

  1. 进入apache-iotdb-1.0.0-all-bin包
  2. 修改配置文件conf/iotdb-confignode.properties，修改如下配置，其他配置保持不变：
cn_metric_reporter_list=PROMETHEUS
cn_metric_level=IMPORTANT
cn_metric_prometheus_reporter_port=9091
  1. 运行脚本启动 ConfigNode：./sbin/start-confignode.sh，出现如下提示则为启动成功：
    在这里插入图片描述
  2. 在浏览器进入http://localhost:9091/metrics网址，可以查看到如下的监控项信息：
    在这里插入图片描述

启动 Apache IoTDB DataNode

  1. 进入apache-iotdb-1.0.0-all-bin包
  2. 修改配置文件conf/iotdb-datanode.properties，修改如下配置，其他配置保持不变：
dn_metric_reporter_list=PROMETHEUS
dn_metric_level=IMPORTANT
dn_metric_prometheus_reporter_port=9093
  1. 运行脚本启动 ConfigNode：./sbin/start-datanode.sh，出现如下提示则为启动成功：
    在这里插入图片描述
  2. 在浏览器进入http://localhost:9093/metrics网址，可以查看到如下的监控项信息：
    在这里插入图片描述

配置 Prometheus 进行监控指标采集

  1. 下载Prometheus的二进制包到本地，解压后进入对应文件夹：
tar xvfz prometheus-*.tar.gz
cd prometheus-*
  1. 首先，我们修改Prometheus的配置文件prometheus.yml如下
    1. 新增 confignode 任务收集 ConfigNode 的监控数据
    2. 新增 datanode 任务收集 DataNode 的监控数据
global:
  scrape_interval: 15s

scrape_configs:
  - job_name: "prometheus"
    static_configs:
    - targets: ["localhost:9090"]
  - job_name: "confignode"
    static_configs:
    - targets: ["localhost:9091"]
    honor_labels: true
  - job_name: "datanode"
    static_configs:
    - targets: ["localhost:9093"]
    honor_labels: true
  1. 启动Promethues
./prometheus --config.file=prometheus.yml
  1. 在浏览器中输入 http://localhost:9090，进入Prometheus
  2. 查看配置是否成功：我们点击进入Status下的Target界面

在这里插入图片描述
6. 当我们看到如下图State均为Up时表示配置成功并已经联通，点击左侧链接可以跳转到网页监控。
在这里插入图片描述

使用 Grafana 进行数据可视化

Grafana 安装、配置与启动

  1. 下载Grafana的二进制包到本地，解压后进入对应文件夹：
tar -zxvf grafana-*.tar.gz
cd grafana-*
  1. 启动Grafana并进入：
./bin/grafana-server web
  1. 在浏览器中输入 http://localhost:3000，进入Grafana，默认初始用户名和密码均为 admin。
  2. 首先我们在 Configuration 中配置 Data Source 为 Prometheus
    在这里插入图片描述
  3. 在配置 Data Source 时注意 Prometheus 所在的URL，配置好后点击Save & Test 出现 Data source is working 提示则为配置成功
    在这里插入图片描述

创建新的 Dashboard 进行数据可视化

  1. 首先创建Dashboard，然后创建Panel
    在这里插入图片描述
  2. 之后就可以在面板根据自己的需求对监控相关的数据进行可视化（所有相关的监控指标可以先在job中选择confignode/datanode筛选）
    在这里插入图片描述
  3. 选择关注的监控指标可视化完成后，我们就得到了这样的面板：
    在这里插入图片描述
    后续我们还会继续分享Apache IoTDB监控模块，敬请期待！

用户手册

中文用户手册

本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系:hwhale#tublm.com(使用前将#替换为@)

如何使用 Apache IoTDB 分布式系统监控模块 的相关文章

  • 在阿里云搭建CENTOS7系统以及图形界面

    1 搭建CentOS7操作系统服务器 首先要购买服务器 xff0c 推荐学生认证可以获得好几个月的免费服务器 略去具体的过程 阿里云默认的系统不是CentOS7 xff0c 所以需要先将操作系统改成CentOS7 在实例的基本信息中 xff

  • VSCode 配置git 环境

    VSCode 配置git 环境 安装插件 查询Git 安装路径 配置json 文件 安装插件 git history 打开 git bash 下面展示一些 内联代码片 查询git 路径 where git where git 配置json

  • 模拟实现trim 方法，去除字符串两端的空格

    思路 从字符串的两端分别遍历 xff0c 找寻第一个非空字符记录非空字符的索引截取头部第一个非空字符到尾部第一个非空字符串之间的内容 span class token keyword function span span class tok

  • git token使用

    2021年8月13日 xff0c git不再支持密码方式验证 xff0c 而是建议使用token token生成 个人设置 gt Settings gt Personal access tokens gt Generate new toke

  • 网页实现无插件RTSP 摄像头在线播放

    网页无插件RTSP 摄像头在线播放 为什么要求无插件1 xff0c flv js实现2 xff0c flv js的利弊延迟吃资源对网络要求高流可复用对声音处理比较麻烦 3 xff0c webrtc的利弊网络相关的资料少延迟低不吃资源 总结项

  • 计算机嵌入式开发技术考试错题集

    选择题 xff08 以前写的 xff0c 现在翻到了发出来 xff09 1 UTF 16采用的是双字节可变长编码 2 ARM处理器的7种类型的异常中 xff1a 最高的是 复位 xff1b 最低的是 未定义指令UND 和 软件中断SWI x

  • ROS——TF介绍及应用

    TF 的简单介绍 TF xff08 transform xff09 是一个允许用户时刻跟踪多个坐标架构的包 xff0c 能及时地维持树结构中坐标帧之间的关系 xff0c 并允许用户在任何时间点变化任何两个坐标帧之间的点和变量等 目前 TF

  • 计算机保研复习专业课篇（408+数学+部分专业课）

    1 计组 1 xff09 总线是什么 1 xff09 总线是一组能功能部件之间分时共享的公共信息传送线路 分时 共享是它的两大特点 2 xff09 分时是指同一时刻只能有一个部件向总线上发出信息 3 xff09 总线分为三大类 xff1a

  • STM32 四轴无人机的设计——代码整体设计

    1 前言 从现在开始我们要接触一个完整的工程 xff0c 所以我们要对整个工程进行分析 xff0c 将硬件设计 软件设计模块化 xff0c 一个模块一个模块的完成 xff0c 最后将各个模块融合在一起 xff0c 就是我们整个工程 模块化设

  • STM32-串口通信详解

    目录 前言 一 通信接口背景知识 1 并行通信和串行通信 2 串行通信的分类 二 STM32的串口通信基础 1 串口通信接口 2 串口通信框图 3 串口通信相关寄存器 4 波特率计算方法 三 库函数配置 1 串口配置一般步骤 总结 前言 众

  • 嵌入式裸机按键和CPU的中断系统学习笔记

    准备工作 一 按键介绍与硬件连接 按键介绍 按键是常见的外部中断设备 xff0c 类似于我们电路中的开关 一般的按键都有4个引脚 xff0c 这4个引脚成2对 xff1a 其中一对是常开触点 xff08 不按则断开 xff0c 按下则闭合

  • web前端——CSS实现加载页面效果

    先上图 html代码 span class token tag span class token tag span class token punctuation lt span div span span class token attr

  • docker学习之如何删除docker中的镜像

    目录 查找需要删除的镜像 直接删除 查询所有docker容器 停掉所需要删除镜像的容器 删除镜像 镜像成功删除 注意事项 xff1a 在安装调试完毕docker之后 xff0c 想要删除一些已经下载的镜像 发现怎么都删除不掉 xff0c 看

  • 德鲁周记06--VSLAM从入门到入坟

    VSLAM入门 介绍基础知识三维空间的刚体运动欧式变换四元数欧拉角 李群与李代数线性拟合相机单目相机双目相机深度相机 基本框架视觉里程计特征匹配ORB直接法对比 后端优化EKFBA Bundle Adjustment 回环检测建图 因为研究

  • imgcat

    安装 https pypi org project imgcat pip span class token function install span imgcat 使用

  • 德鲁周记12--带有颜色追踪功能的turtlebot(ROS+反向投影+camshift)

    带有颜色追踪功能的turtlebot 主要技术和算法颜色识别和追踪模块反向投影算法camshift 控制板块 xff08 ROS xff09 代码算法模块控制模块 这个是我前段时间完成的基于turtlebot实现跟随特定颜色的物体实现自主移

  • SLAM--PL-SLAM中基于线特征的初始化方法（LSD算法，LBD描述子，计算R和t）

    SLAM中基于线特征的初始化方法 线特征的初始化直线段检测算法 LSD xff1a a Line Segment Detector描述子 LBD xff1a Line detection and description计算旋转矩阵三焦点张量

  • 搭建windows下无人机软件在环仿真(SITL)仿真环境，无需任何无人机、飞控硬件，学习无人机通讯等知识

    SITL环境配置方法 APM飞控官网提供的SITL software in the loop 软件在环仿真 官网地址 通过该虚拟仿真环境可学习地面站操作 Mavlink通信协议等知识 参照此方法可构建出虚拟无人机平台 xff0c 打开电脑的

  • APM飞控SITL仿真环境 修改初始地理位置

    APM飞控SITL仿真环境 初始化设置 最近在sitl仿真时遇到了一个问题 xff0c 默认情况下仿真飞机的初始位置位于南半球 xff0c 而使用的国内卫星地图大多不提供中国以外地区的卫星地图 xff0c 所以希望设置仿真飞机的初始位置位于

  • MavLink通信协议 C++应用详细教程

    MavLink C 43 43 应用教程 0 前言 网上的各类MavLink通信协议教程 xff0c 往往只对协议本身进行介绍 xff0c 而不对开发中如何应用进行详述 有介绍应用的往往也都浅尝辄止 xff0c 讲完HeartBeat然后就

随机推荐

热门标签