EMQX Newsletter 2022-05|v5.0 发布 2 个 rc 版本、云服务新增外部认证与数据集成方式

2023-10-27

五月,EMQX 5.0.0-rc.3 & rc.4 版本陆续发布,该版本为规则引擎新增了对 jq 语法的支持,大幅度精简了默认配置文件,并对 Dashboard 菜单栏做了进一步的调整优化。EMQX 5.0 的正式发布已经越来越近。同时,v4.3 与 v4.4 的下一维护版本也进入了测试阶段,即将发布。

云服务方面,EMQX Cloud 本月海外站新增了 AWS 私网连接以及更多地区部署支持,同时外部认证和数据集成服务也有了更多选择。

EMQX

EMQX 5.0.0-rc.3 & rc.4 版本概览

在之前的文章中,我们通过 EMQX 5.0.0-rc.2 从 Dashboard 的角度对 EMQX 5.0 的部分新功能进行了介绍。目前 EMQX 5.0.0-rc.3 和 rc.4 也已发布,功能愈发完善稳定。

规则引擎支持 jq 语法

现在,我们可以在规则引擎的 SQL 中使用 jq 语法来处理更加复杂的 JSON 数据。我们可以对 JSON 数组进行索引和切片,可以按条件过滤数据,可以对 Key 进行模糊查询,可以使用管道命令组合多个过滤器,可以使用内置函数计算 JSON 的数组的平均值,甚至可以自定义函数来进行更复杂的计算处理。jq 赋予了规则引擎 SQL 更强大的数据处理能力,我们可以访问 jq Manual 来了解更多用法。以下是 jq 在规则引擎 SQL 中的简单使用示例:

SELECT
  jq('.', payload) as example
FROM
  "t/#"

EMQX 规则引擎

默认配置文件精简

在 5.0.0-rc.4 版本中,我们将默认配置文件精简到了百行以内,额外的配置文件示例将帮助用户了解所有配置项的使用。这将有效帮助用户从大部分不常使用到的配置项中解放出来,仅关注必要的配置项,进一步降低其使用难度。

EMQX 默认配置文件精简

其他优化
  • Dashboard 菜单栏调整优化
  • Dashboard 支持相对路径或自定义访问路径,方便 NGINX 等反向代理
  • 优化了 Dashboard 中速率限制功能的使用,现在可以为 Limiter 配置多个 Buckets,并且在 Listener 中选择 Limiter
  • 优化了 Dashboard 中 TLS 证书的配置方式
  • 优化了 Dashboard 中资源状态的展示逻辑
  • 修复了内存占用计算不准确的问题
  • 修复了手动离开集群将导致节点不可用的问题
  • 修复了网关监听器的多个错误
  • 修复了健康检查相关的多个错误

欲下载试用或了解更多的优化与错误修复信息,请访问 EMQX 5.0.0-rc.3 & EMQX 5.0.0-rc.4

4.3 & 4.4 维护版本升级预览

v4.3.15 等维护版本即将发布,预计将带来二十余项问题修复以及多项改进,包括 EMQX 支持在包含空格的路径下启动,改进 EMQX 在 Windows 下的启动以避免启动失败时无法看到错误信息,增加版本检查以避免跨大版本热升级等。此外,还有多项功能增强:

规则引擎支持阿里云 TableStore

包含版本: 企业版 v4.4.4

阿里云表格存储(Tablestore)是阿里云推出的一款云上的结构化数据存储产品,提供了物联网存储 IoTstore、宽表引擎、多元索引等能力来满足时序数据、消息数据、元数据场景的需求。

EMQX 与 Tablestore 团队针对产品高效对接都做了专项优化工作,实现了多元的 IoT 数据高效存储集成。通过 Tablestore 一体化架构,为 IoTstore 提供大规模、免运维的低成本、易扩展的一站式解决方案,有效解决了数据库产品的技术选型、分类存储等技术难点。

目前 EMQX 规则引擎 Tablestore 集成已经通过 10W TPS 吞吐性能测试,可以正式投入生产。

规则引擎 SQL 支持更多函数

包含版本: 开源版 v4.3.15、开源版 v4.4.4、企业版 v4.3.10、企业版 v4.4.4

  1. 时间转换函数

    现在,我们可以在规则引擎 SQL 中使用 format_date 函数将传入的整型时间戳或自动换取当前时间戳转换为指定格式的时间字符串,或者使用 date_to_unix_ts 函数将指定格式的时间字符串转换为整型的时间戳。示例:

    SELECT
      format_date('nanosecond', '+08:00', '%y-%m-%d %H:%M:%S%Z') as date1
      format_date('nanosecond', '+08:00', '%y-%m-%d %H:%M:%S%Z', timestamp) as date2
    FROM
      "t/#"
    
  2. 浮点输出精度控制函数

    增加 float2str/2 函数,支持指定浮点数的输出精度。

为 Pulsar 添加 Basic 和 JWT 认证支持

包含版本: 企业版 v4.3.10、企业版 v4.4.4

我们为 Pulsar 添加了 Basic 和 JWT 认证支持,与 TLS 配合使用,可以获得更佳的安全性。

支持将 JWT 用于鉴权

包含版本: 开源版 v4.3.15、开源版 v4.4.4、企业版 v4.3.10、企业版 v4.4.4

现在,客户端连接认证时使用的 JWT 可以继续用于鉴权,以获得更灵活的权限管理能力。此功能要求在 JWT 中携带符合格式要求的 acl 声明,详见官网使用文档。

使用内置数据库(Mnesia)作为数据源的认证鉴权支持多条件过滤和模糊查询

包含版本: 开源版 v4.3.15、开源版 v4.4.4、企业版 v4.3.10、企业版 v4.4.4

与查询客户端类似,现在使用内置数据库作为数据源的认证鉴权功能也提供了这些查询选项,例如 _like_clientid_like_usernametopic 等,其中 _like_clientid_like_username 支持使用子串进行模糊查询。

支持配置日志时间格式以兼容旧版本中的时间格式

新增 log.formatter.text.date.format 配置项,支持配置为 rfc3339 或格式化字符串,即 YYYY-MM-DDTHH:mm:ss.SSSZZ 的形式以兼容 4.2 等旧版本日志中的时间格式。

社区动态

EMQX 团队于 5 月 19-20 日参加了在瑞典斯德哥尔摩举行的 2022 Code BEAM 欧洲会议。

EMQ 软件工程师 William Yang 发表了题为“QUICER:BEAM 的下一代传输协议库”的启发性主题演讲,介绍了世界上第一个由 EMQ 提供支持的 MQTT over QUIC 实现以及为 BEAM 构建的新的开源 NIF 库 QUICER(GitHub - emqx/quic:用于 Erlang 和 Elixir 的 QUIC 协议)。

William Yang 演讲:QUICER:BEAM 的下一代传输协议库

EMQ 另一位数据工程师 Dmitrii Fedoseev 则讨论了如何使用 SNABBKAFFE 测试分布式一致性容错,介绍了 EMQ 如何成功地将基于跟踪的方法应用于生产中运行的实际应用程序。

Dmitrii Fedoseev 分享如何使用 SNABBKAFFE

EMQX Cloud

海外站支持创建 AWS PrivateLink

私网连接(PrivateLink)能够实现 EMQX Cloud 部署所在的专有网络 (VPC)与公有云上的服务建立安全稳定的私有连接,简化网络架构,实现私网访问服务,避免通过公网访问服务带来的潜在安全风险。

EMQX Cloud 海外站本月新增支持了对 AWS 上部署的 PrivateLink 的连接,将部署所在的 VPC 和在 AWS(海外)资源所在 VPC 连接起来,相当于实现了同一个网络内的通信。

海外站支持更多区域部署

EMQX Cloud 海外站创建部署的区域选择中,AWS 新增香港地区,Google Cloud Platform 新增台湾地区,费用和海外其他地区保持一致。涉及出海业务的企业用户将有更多部署选择。

外部认证支持 Redis

新增支持用户使用存放在自己的 Redis 服务中的数据来进行客户端的认证和访问控制。目前 EMQX Cloud 共支持 HTTP、 MySQL、 PostgreSQL、Redis 四种服务用于认证的和访问控制。了解更多关于外部认证的内容

数据集成新增 TDengine 和 Lindorm

数据集成添加了新的资源连接: TDengine 和 Lindorm 。TDengine 是一款开源、高性能、分布式、支持 SQL 的时序数据库,目前国内站和海外站都已支持。Lindorm 是阿里云的一款支持宽表、时序、对象、文件、队列、空间等多种数据模型的数据库,目前暂时只支持国内站。

EMQX Kubernetes Operator

五月,用于在 Kubernetes 上自动化部署、配置、管理 EMQX 集群的工具的 EMQX Operator 发布了 1.1.8 版本,提供了如下新功能:

功能更新

  1. 将 resource 操作日志完善为 events 事件记录
  2. 将 EMQX Operator 中部分 log 转换成 event
  3. EMQX Operator resource checklist 实现
  4. Better EMQX Custom Resource Status

完善优化

  1. 修复了镜像 tag 问题,支持基于私有仓库的 tag
  2. 修复了更新 .spec.listener.certificate 后,restart listener 异常问题

测试验证

  1. EMQX Operator 基于云环境实现 EMQX 100 万连接、50 万 TPS 的压力测试

即将到来

EMQX Operator 1.2 和 v1beta3 APIVersion 正在开发中,v1beta3 APIVersion 将带来更合理的 .spec 结构, 1.2 版本将引入更完善的事件日志以及集群状态描述。

版权声明: 本文为 EMQ 原创,转载请注明出处。

原文链接:https://www.emqx.com/zh/blog/emqx-newsletter-202205

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

EMQX Newsletter 2022-05|v5.0 发布 2 个 rc 版本、云服务新增外部认证与数据集成方式 的相关文章

随机推荐

  • SpringBoot返回Json数据

    Spring Boot 返回 Json 数据 XML 文件的解析常见的解析工具有 DOM4j JDOM 等 为了标准化 XML 文件解析 Java 中提出了 JAXP 规范 使用的解析模型有 DOM 将标记语言文档一次性加载进入内存中 在内
  • 第九课: 工作空间-Work Space介绍

    2 7 工作空间 Work Space介绍 工作空间是WorkBench3 3集成开发环境对项目工程进行集中管理的空间 用户创建的BootRom工程 VxWorks工程 Downloadable工程和静态库工程等都存在于Work Space
  • 微信小程序使用crypto.js加密解密

    微信小程序中使用crypto js crypto js是用来进行AES加密的 注意AES在使用时有7个配置项 前后端加解密记着统一参数 测试时注意配置项的选择是否一致 测试工具 AES加密测试工具 下载crypto js npm i cry
  • 闭环系统的零极点图判定稳定性_《自动控制原理》课后习题答案.doc

    第五章 线性系统的频域分析与校正 习题与解答 5 1 试求题5 75图 a b 网络的频率特性 a b 图5 75 R C网络 解 a 依图 b 依图 5 2 某系统结构图如题5 76图所示 试根据频率特性的物理意义 求下列输入信号作用时
  • 点陶极速版《隐私政策》

    点陶极速版 隐私政策 生效日期 2021年3月10日 提示条款 大石桥市多禾网络科技有限公司 以下可统称为 我们 或 多禾 高度重视个人信息的保护 在您使用 点陶极速版 app提供的服务时 以下可称为 点陶极速版 服务 我们将按照本隐私政策
  • c++知识系列:new、operator new、placement new

    总结 operator new 三种形式 http www cplusplus com reference new operator 20new throwing 1 void operator new std size t size th
  • angular11 报错 ERROR Error: If ngModel is used within a form tag, either the name attribute must be s

    angular 报错 ERROR Error If ngModel is used within a form tag either the name attribute must be set or the form control mu
  • hyperledger中cryptogen工具使用

    cryptogen 主要功能 1 生成秘钥和证书文件 2 查看配置模板的信息 cryptogen 命令详解 output 指定存放生成秘钥和证书文件的路径 默认为当前目录下的crypto config目录 config 指定所采用的配置模板
  • 基于注意力机制的 CNN-BiGRU 短期电力负荷预测方法

    提出了一种基于 Attention 机制的CNN BiGRU 卷积神经网络 双向GRU 注意力机制 短期电力负荷预测方法 该方法将历史负荷数据作为输入 搭建由一维卷 积层和池化层等组成的 CNN 架构 提取反映负荷复杂动态变化的高维特征 将
  • 优秀的程序员——勇于尝试新技术并能快速掌握

    一个人有了好奇心求知欲就完了吗 那不能 这可不够 除了好奇去探索外 你还得有把探索所得 转化成自己经验的能力 这种能力的外在表现就是勇于尝试新技术 而且还得快速掌握 再举另一个同事的例子 这个同事在工作中遇到了一个问题 就是存储海量数据的问
  • ruoyi权限验证

    目录 首先在ruoyi的菜单管理中添加权限测试的按钮 设置权限字符 在角色管理中勾选新增加的权限按钮 在ruoyi前端代码中自行添加按钮组件 ajax发送请求给后端接口 后端接口 效果 首先在ruoyi的菜单管理中添加权限测试的按钮 设置权
  • 谷粒商城--nginx--高级篇笔记四

    谷粒商城 nginx 高级篇笔记四 1 nginx搭建域名访问 反向代理 1 1 动静分离 1 2 正向代理与反向代理 正向代理隐藏客户端 反向代理隐藏服务端 1 3 nginx与windows搭建域名访问环境 为什么能够通过修改host文
  • HTML5 Canvas 碰撞检测的简单实现

    本示例中演示的是模拟声纳探测的动画 在黑色的背景中画了两个黑色的障碍物 通过鼠标点击发出的声波可以将其检测出来 声波碰撞到障碍物之后 障碍物将向外发出声波 代码如下 HTML代码
  • 什么是抽象类?

    第四章 抽象类 入门级 大牛忽略 4 1 抽象类概述 以下内容可能有点烦 但是通俗易懂 简直舒服 我们创建一个动物类 并且在这个类中创建动物对象 但是当你提到动物类 你并不知道我说的是什么动物 只有看到了具体的动物 你才知道这是什么动物 所
  • python error

    1 IndentationError expected an indented block 缩进问题 gt gt gt for i in 1 2 3 4 t s i File
  • 带妹玩转Vulnhub【一】

    前言 题目是不想在刷了 想学一学渗透测试的知识 由于是开头之作 所以会写的比较的详细 尽量让大家少走弯路 带妹是不可能带妹的 这辈子都不可能带妹的 开始 下载 我们首先需要下载LazySysAdmin的虚拟镜像 这里 但是打开之后是ovf
  • 深度学习编译器系列视频摘要

    文章目录 0 前言 深度学习编译器 一 综述 深度学习编译器 二 Auto TVM 深度学习编译器 三 Auto Schedule 0 前言 在B站黄雍涛博士发了几个深度学习编译器的视频 感觉说得挺好 所以记录一下 深度学习编译器 一 综述
  • 【数学建模常用模型】图论专题

    图论是研究点 线间关系的一门学科 现实生活中 凡是涉及到事物间的关系 都可以抽象为图论模型 图论模型也是各大数学建模中常见的一种模型 主要用于计算 规划最短距离 路线等问题 下面介绍几个基本概念和算法 单源最短路 单源最短路指的是构造网络中
  • docker 挂载 no such file or directory问题

    现象 docker run d p8080 8080 name flowable v data flowable opt tomcat flowable all in one 就报 Error response from daemon OC
  • EMQX Newsletter 2022-05|v5.0 发布 2 个 rc 版本、云服务新增外部认证与数据集成方式

    五月 EMQX 5 0 0 rc 3 rc 4 版本陆续发布 该版本为规则引擎新增了对 jq 语法的支持 大幅度精简了默认配置文件 并对 Dashboard 菜单栏做了进一步的调整优化 EMQX 5 0 的正式发布已经越来越近 同时 v4