作者:邢蒙蒙; 魏国辉; 刘静; 张俊忠; 杨锋(综述); 曹慧(审校) 期刊:《生物医学工程学》 2020年第01期
人体动作识别(HAR)是智慧医疗、体育训练、视频监控等众多领域的技术基础,受到社会各界的广泛关注。本文概述了HAR的研究进展及意义,将其归纳为动作捕捉和基于深度学习的动作分类两个过程。首先,详细介绍了基于视频、基于深度相机以及基于惯性传感器的三种主流动作捕捉方式,列举了常用的动作数据集。其次,从特征自动提取及多模态特征融合两方面来描述基于深度学习的HAR,并介绍了正骨康复训练中如何通过HAR实现监督锻炼和模拟训练。...
一个微风习习的早晨,你舒适地在床上伸个懒腰,然后悠悠地来一句:"微波炉加热早饭。"然后,你起床,洗漱完毕,会发现微波炉已经加热好了一份热腾腾早餐。 山东师范大学传媒学院院长助理兼数字媒体系主任、副教授刘兴波向我们描述这样一个场景,"这个场景就是一个典型的人机交互(人机对话)的情节。其原理是计算机通过声音传感器,采集人的声音,并判断、输入指令‘启动微波炉’。"刘兴波向我们解释说。
当今高校普遍存在能源浪费、教学评估不全面、师生交流不充分和公共自习室利用率低问题。为了解决上述问题,该文基于物联网研发了智能教室系统。该系统拥有照明控制、自习室推荐、人数检测、教学模式分析4个主要功能,面向广大高校师生提供了图形化的桌面客户端和精美的配套网页。其中照明控制模块可以根据教室内人数自动控制照明,为实现"人走灯灭"的节能校园贡献一份力量。除了涵盖同类项目常有的智能照明和自习室推荐等功能外,还...
作者:张聪聪; 何宁 期刊:《南京信息工程大学学报·自然科学版》 2019年第06期
针对视频序列中人体动作识别存在信息冗余大、准确率低的问题,提出基于关键帧的双流卷积网络的人体动作识别方法.该方法构建了由特征提取、关键帧提取和时空特征融合3个模块构成的网络框架.首先将空间域视频的单帧RGB图像和时间域多帧叠加后的光流图像作为输入,送入VGG16网络模型,提取视频的深度特征;其次提取视频的关键帧,通过不断预测每个视频帧的重要性,选取有足够信息的有用帧并汇聚起来送入神经网络进行训练,选出关键帧并丢弃...
作者:李顺; 郭星; 吴建国 期刊:《传感器与微系统》 2019年第11期
提出了一种基于关键帧和骨骼信息的动作识别新方法。通过深度传感器Kinect v2实时获取人体各骨骼点信息,通过采用加权K-means算法提取动作视频中的关键帧。通过每个关键帧中25个骨骼点的三维坐标值,计算出关节角度和向量模比值两种特征量,通过优化后的动态时间规整(DTW)算法计算关键帧序列与模板库中动作模板的相似度,从而识别人体的实时动作。通过对6种常见动作的识别实验对比,结果表明:所提方法在识别速度和准确率上较高,具有实...
作者:何冰倩; 魏维; 张斌; 高联欣; 宋岩贝 期刊:《计算机应用研究》 2019年第10期
针对现有人体动作识别方法需输入固定长度的视频段、未充分利用时空信息等问题,提出一种基于时空金字塔和注意力机制相结合的深度神经网络模型,将包含时空金字塔的3D-CNN和添加时空注意力机制的LSTM模型相结合,实现了对视频段的多尺度处理和对动作的复杂时空信息的充分利用。以RGB图像和光流场作为空域和时域的输入,以融合金字塔池化层的运动和外观特征后的融合特征作为融合域的输入,最后采用决策融合策略获得最终动作识别结果。在...
作者:王召军; 许志猛 期刊:《电气技术》 2019年第11期
本文针对人体身份及动作识别的问题,提出一种基于低分辨率红外阵列传感器并使用卷积神经网络进行分类识别的方法,这种方法可以识别出人的身份和跌倒、坐下以及行走动作。本文使用的卷积神经网络是基于VGGNet搭建的,由输入层、5层卷积层、3层池化层、1层全连接层和输出层构成,自动提取红外热图像中的信息特征,对身份及动作进行分类,在良好的隐私保护下避免了繁琐的人工提取特征。经过实验测试,卷积神经网络算法识别动作平均准确率为...
作者:陈晓春; 林博溢; 孙乾; 张坤华 期刊:《计算机工程》 2019年第12期
针对视频动作识别中数据处理效率不高的问题,建立一种基于视频帧间差分序列的动作识别模型。利用帧间差分检测视频帧中的运动区域,以该区域为中心进行相应的图像剪切和增强处理。整个识别模型采用双流架构,在数据样本制作时通过适当的隔帧差分来扩大样本的时间跨度。采用分阶段逐步增加训练样本量的方法,以提升模型识别性能并解决训练过程中易出现的过拟合问题。实验结果表明,该模型可以在CPU级配置的电脑中完成快速动作识别,且在U...
作者:王斌; 刘煜; 王炜; 徐玮; 张茂军 期刊:《工程科学与技术》 2014年第02期
为克服BoF特征袋模型在视频人体动作识别中忽视局部特征间时空位置关系的问题,提出局部特征时空编码方法。将局部特征时空位置坐标引入特征编码中,直接对它们的时空位置关系建模。首先,将局部特征投影到人体运动子时空域,获得局部特征的时空位置坐标;然后,在特征编码阶段同时对局部特征的出现信息和时空位置坐标进行编码;最后,采用特征池提取该时空域内局部特征的统计信息用于动作分类。为进一步提高性能,多尺度时空编码...
作者:周艳青; 王磊 期刊:《齐鲁工业大学学报》 2012年第01期
识别视频中的人的动作是视频语义分析方向的一个关键研究课题,在很多领域有广阔的应用前景,如人机交互,智能监控,基于内容的视频数据检索等。本文从问题的定义,一般解决思路,到两大关键问题——动作表示和动作识别的解决方法进行了详细论述,并指出了现有方法存在的问题以及发展方向,为该领域的初学者提供有价值的参考。
作者:孙剑; 肜丽 期刊:《信阳农林学院学报》 2017年第02期
人体动作特征的选择直接关系到人体视角无关动作识别的准确率,单一的特征往往受到光照、环境、背景先验知识等条件的影响,识别效果不理想。本文提出了一种基于光流直方图与兴趣点视频段词袋直方图相结合的混合特征,该混合特征充分考虑了不同特征的优缺点,应用到视角无关的动作识别方法中。利用多视角IMAS动作识别数据库对该混合特征的实验结果表明,该特征对于人体视角无关动作识别具有较好识别效果。
作者:刘冰; 周赛青; 邹雪宇 期刊:《科学技术创新》 2019年第03期
体感识别模块接收Kinect摄像头捕捉到的人体动作数据,然后对其做出相应的解读,并把控制指令传给无线数据传输模块。无线数据传输模块会通过WiFi网络向家居控制模块传送该指令,家居控制模块在接收到控制指令后控制对应的家电改变状态。除此之外,用户可根据上位机界面查看人体动作,根据下位机界面查看和控制家电控制状态。
作者:周金成 期刊:《电子技术与软件工程》 2019年第05期
为解决动作识别问题,本文提出一种基于特征融合的方法。提取视频特征时,同时获得运动特征和表观特征,然后融合这两种特征训练SVM分类器。实验时,在J-HMDB数据集上获得了优异的表现,动作识别的精度可以达到94.8%。
作者:张明媛; 曹天卓; 赵雪峰 期刊:《安全与环境学报》 2018年第05期
建筑施工现场的跌落事故可视为跌落险兆事故的进一步演化,为深入认知跌落事故发生机理和主动预防跌落事故发生,需对各种环境条件下发生的跌落险兆事故进行探究。以三轴加速度和三轴角度信息描述施工人员不同运动状态的可能性,探究基于智能手机和ANN(人工神经网络)识别施工人员跌落险兆事故的应用潜力。鉴于跌落险兆样本的传统获取方式往往低效且易受人为主观因素的干扰,以平衡板模拟跌落险兆发生时的失、复稳状态,构建静、动态跌...
作者:左伍衡; 吴琳 期刊:《科技通报》 2018年第06期
针对目前人体动作识别算法精确度不高的问题,提出了一种关键帧样条插值优化位置偏移的虚拟教学动作识别策略。首先对运动数据进行去均值的预处理并转化为矩阵形式,然后通过对运动数据矩阵进行非线性降维处理,构建人体姿态空间集,接着在末端约束条件下对集合进行逆向运动学求解,最后对其进行关键帧样条插值优化。算法仿真实验结果表明,本文提出的改进算法具有较高的识别精度,可以精准识别虚拟教学动作,方便人机交互。
<正>牛津大学的研究人员称,他们已经研究出一种可以通过击键方式或者鼠标动作识别用户身份的新技术,该技术可被用作登录计算机或智能手机的新方式。每个人在进行电子设备操作时都有一种独特的身体行为方式,包括输入速度、鼠标移动方式和手机握持方式等,这些行为方式合在一起形成了"电子DNA",由于用户很难以一种"非我"的方式操
作者:周志强; 雷鸣 期刊:《天津理工大学学报》 2018年第02期
本文提出了一种新的动作识别的方法,该方法是在前人的基础上增加了一个模态特征.为了能更好的提高动作识别的准确率和泛化能力,在前人的RGB特征和深度特征模态的双线性异构信息的动作识别的方法的基础上,增加了一个骨骼特征模态,使三个特征模态经过压缩映射到一个共享学习空间上,同时这样也有利于减少噪声和捕捉有用的识别信息.本文采用和前人一样的方法—矩阵形式来表示三种模态特征以便获得复杂的动作时空信息.用矩阵的行和列参...
作者:吴常铖; 严余超; 曹青青; 费飞; 杨德华; 徐宝国; 宋爱国 期刊:《南京信息工程大学学报·自然科学版》 2019年第02期
基于肌电信号的手部动作识别中,肌电信号测量位置的选择直接关系到动作识别的准确率.本文以使用最少的肌电传感器和获得较高的动作识别率为目标,提出一种基于ANOVA(方差分析)和BP神经网络的肌电信号测量位置优选方法.使用4个肌电传感器采集受试者做出指定动作时的肌电信号,提取肌电信号的时域特征,并按测量位置组合构成15个不同的样本进行BP神经网络的训练和测试.采用单因素ANOVA分析测量位置对动作识别结果影响的显著性,采用Tukey...
作者:易芳君; 李宇轩; 王汉臣; 金佳琪 期刊:《工业控制计算机》 2019年第03期
针对大多数高校自习教室存在高峰期座位短缺、资源浪费、纪律维护困难、利用物品占座位现象严重等实际问题,设计与实现一个包含学生通道、管理通道的双通道自习室管理系统。该系统基于深度图像与大数据建模技术,以'自习格子'APP的形式为学生个性化选择自习室提供参考,同时将综合评价结果提供给学校相关管理部门,方便学校对自习室进行统筹规划。研究结果表明:该系统界面美观、交互良好、性能优异,能很好地满足高校自习教室管理需求...
作者:杨静 期刊:《自动化技术与应用》 2018年第10期
在体育视频通常存在像质量不佳、非静态视频以及图像分辨率低等问题的背景下,基于支持向量机(SVM)和光流分析,提出了一种识别体育视频中羽毛球运动员运动的新方法。该方法从视觉分析的角度出发,采用一种局部分析的网格分类方法提取动作识别的描述符算子。与传统的光流分析思路不同,该方法将目标区域中的光流矢量作为一种在移动模式下空间分布信息,并且使用SVM作为模型分类器和时间序列图像识别策略,对羽毛球运动员的三种典型挥拍动...