基于深度学习网络 在可穿戴式机器人中使用IMU实现人体活动实时识别

2023-05-16

可穿戴式外骨骼机器人已成为支持人类运动的一种新兴高科技产品,能够在人体康复训练、日常活动和制造任务中提供必要的运动支持,而搭建高精度、低延迟的人体活动识别系统,能够帮助可穿戴式机器人快速准确地识别人体活动,更好地协助人类完成各项任务。

来自韩国的Tae-Seong Kim团队用一个集成了IMU(惯性测量单元)的可穿戴式机器人,在其边缘设备中嵌入了轻型的深度学习模型,以此来测试可穿戴式机器人实时识别人体活动的可行性。

图1 可穿戴式机器人和搭建的人体活动识别系统:(a)可穿戴式外骨骼机器人   (b)数据收集和预处理(c)深度学习模型   (d)硬件平台   (e)识别的活动

该可穿戴式机器人有两种主要的传感器元件负责记录活动信号:

1、两个旋转编码器位于执行器模块内部,负责测量髋关节角度。

2、一个九轴IMU传感器,集成在机器人的背包中。

该实验考虑了八种活动:

①站立(Stand)②站起(Stand up)③弯腰(Bend)④蹲下(Crouch)

⑤行走(Walk)⑥坐下(Sit down)⑦上楼(Stairs ascend)⑧下楼(Stairs descend)

收集了两种数据集:

1、历时数据集:八种活动被重复多次,并记录下每次迭代期间的活动信号。此数据集经过预处理和扩增后进行分割,80%作为训练集,20%作为测试集,用于训练、验证和优化PC和边缘设备上的深度学习模型。2、连续数据集:多个动作依次进行。此数据集用于测试边缘设备上人体活动识别系统的可行性。

团队采用了五种深度学习模型用于人体活动识别:CNN、RNN、LSTM、Bi-LSTM和GRU。模型结构如下图所示:

图2 深度学习模型结构:(a)CNN  (b)RNN  (c)LSTM  (d)Bi-LSTM  (e)GRU

实验结果表明,系统对站立、弯腰、 蹲下、行走、坐下、坐起和上下楼梯等8个动作的平均识别准确率为97.35%,推理时间低于10ms。

该实验验证了使用可穿戴式机器人实现实时人体活动识别的可行性,但是存在一个明显的缺点:对过渡活动的错误识别,这个问题未来可以通过部署更多的IMU传感器或者在深度学习模型中对这些活动进行建模和训练来解决,让可穿戴式机器人更好地帮助工人搬运重物,或是在人体康复过程中更有效地帮助患者进行康复训练。

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

基于深度学习网络 在可穿戴式机器人中使用IMU实现人体活动实时识别 的相关文章

  • px4offboard模式无法设置成功

    px4offboard模式无法设置成功 这两天在测试px4的offboard模式 xff0c 根据官方使用手册给出的代码测试成功 xff0c 在这个基础上修改结果发现无法设置成功了 经过与官方代码对比分析 xff0c 在设置offboard
  • VsCode 配置 C/C++ 开发环境,真的很简单

    旧日的旧图 工欲善其事 xff0c 必先利其器 最近在学习C语言版的数据结构 xff0c 要敲敲C C 43 43 的代码 xff0c DevC 43 43 成功把我劝退了 之前写后端用习惯了Idea 写前端习惯用VsCode了 xff0c
  • 8.16 IO多路复用——select的TCP服务器/客户端

    文章目录 select的TCP服务器 客户端select的服务器代码示例 select的客户端代码示例 select的TCP服务器 客户端 select的服务器 代码示例 span class token macro property sp
  • 毫米波雷达图解算法原理(基于TI雷达)

    毫米波雷达数据处理原理 前言基础bin文件解读 以下我们取1帧进行操作 xff1a 对数据矩阵进行操作前的转换 开始计算结果矩阵一维FFT xff08 距离 xff09 二维FFT xff08 速度 xff09 角度维FFT xff08 假
  • ubuntu18.04 安装ros与运行vins-mono

    Ubuntu18 04 安装环境及运行Vins mono xff08 2022年 xff09 AI技术聚合 安装 sudo apt get install ros melodic desktop full 正在解包 ros melodic
  • 全面认识海思SDK及嵌入式层开发(1)

    目录 一 全面认识和检测配套开发套装1 套装配件介绍2 检测开发板3 注意 二 视频设备开发的技术流1 视频从产生到被消费的整个流程2 视频行业的商业角度分段3 几个疑问点 一 全面认识和检测配套开发套装 购买方式 xff1a 淘宝搜索 g
  • Java网络编程——UDP通信原理(超详细解析一看就懂哦!!!)

    文章目录 前言一 TCP和UDP概述二 UDP1 UDP通信概述2 UDP通信特点3 UDP通信传输实现的基石3 1 DatagramPake常用方法3 2 DatagramSocket常用方法 4 UDP通信实现原理5 UDP通信原理 x
  • Linux脚本中如何删除换行符(血案)

    Linux脚本中如何删除换行符 Linux中换行符和Windows中换行符不同 xff0c 分别为 n和 r n 如何删除换行符呢 xff1f 如果你百度了半天才过来 xff0c 相信你应该看到过如下的处理方式吧 cat country t
  • raise ValueError(‘Expected input batch_size ({}) to match target batch_size ({}).‘

    raise ValueError Expected input batch size to match target batch size 记得在正向传播之前打印一下图片的尺寸 xff0c 这次没注意到图片其实都进来是 RGB 三通道的数据
  • RuntimeError mat1 dim 1 must match mat2 dim 0

    RuntimeError mat1 dim 1 must match mat2 dim 0 代码 self span class token punctuation span fc1 span class token operator 61
  • python 中 subprocess.Popen 总结

    python 中 subprocess Popen 总结 subprocess的目的就是启动一个新的进程并且与之通信 subprocess模块中只定义了一个类 Popen 可以使用Popen来创建进程 xff0c 并与进程进行复杂的交互 它
  • 相机标定(Camera calibration)原理、步骤

    相机标定 xff08 Camera calibration xff09 原理 步骤 简介 在图像测量过程以及机器视觉应用中 xff0c 为确定空间物体表面某点的三维几何位置与其在图像中对应点之间的相互关系 xff0c 必须建立相机成像的几何
  • python3-rosdep2 : Depends: python3-catkin-pkg but it is not going to be installed

    python3 rosdep2 Depends python3 catkin pkg but it is not going to be installed 今天在 Ubuntu18 04 中安装ros莫名其妙的出现了上述问题 xff0c
  • 旋转矩阵求导

    旋转矩阵的导数 证明 quad 假设旋转矩阵为 R mathbf R theta
  • VINS中陀螺仪零偏的估计

    VINS中关于陀螺仪零偏的初始化估计 对于窗口中得连续两帧 b k b k b k 和 b
  • 非线性优化问题基本形式概述

    非线性优化问题以及在视觉SLAM中的应用 1 0 最小二乘基础概念 定义 quad 找到一个 n 维的变量 x
  • Ceres 自动求导解析-从原理到实践

    Ceres 自动求导解析 从原理到实践 文章目录 Ceres 自动求导解析 从原理到实践1 0 前言2 0 Ceres求导简介3 0 Ceres 自动求导原理3 1 官方解释3 2 自我理解 4 0 实践4 1 Jet 的实现4 2 多项式
  • 如何在付费页面复制走想要的文字

    1 按F12打开控制台 出现如下界面 xff1a 2 点击图中方框按钮或者按Ctrl 43 B选择元素 xff0c 出现如下界面 xff1a 3 在左边点击想要复制的文字 xff0c 右边就会弹出对应的元素 xff0c 然后双击右边元素就可
  • 锂电池容量下降怎么办?锂电池容量下降修复方法

    锂电池容量下降怎么办 锂电池容量下降修复方法 据存能电气小编所知 xff0c 锂离子电池的容量在300 500次充放电循环后会下降到80 xff5e 85 xff0c 想要恢复初始续航性能必须更换新电池 近日声称有科研人员发明了能让锂离子电
  • 2021-02-18

    多旋翼飞行器学习笔记 二 机架设计 2 1布局设计 1 机身基本布局 交叉型 xff1a 目前常用的是X字型布局 xff0c 因为 xff1a xff08 1 xff09 机动性更强 xff1b xff08 2 xff09 前视相机的视场角

随机推荐