基于Kinect的指尖检测与手势识别方法 被引量：16

1

作者 谈家谱 徐文胜 《计算机应用》 CSCD 北大核心 2015年第6期1795-1800,共6页

针对基于视频的弯曲指尖点识别难、识别率不高的问题,提出一种基于深度信息、骨骼信息和彩色信息的手势识别方法。该方法首先利用Kinect相机的深度信息和骨骼信息初步快速判定手势在彩色图像中所在的区域,在该区域运用YCr Cb肤色模型分... 针对基于视频的弯曲指尖点识别难、识别率不高的问题,提出一种基于深度信息、骨骼信息和彩色信息的手势识别方法。该方法首先利用Kinect相机的深度信息和骨骼信息初步快速判定手势在彩色图像中所在的区域,在该区域运用YCr Cb肤色模型分割出手势区域;然后计算手势轮廓点到掌心点的距离并生成距离曲线,设定曲线波峰与波谷的比值参数来判定指尖点;最后结合弯曲指尖点特征和最大内轮廓面积特征识别出常用的12个手势。实验结果验证阶段邀请了6位实验者在相对稳定的光照环境条件下来验证提出的方法,每个手势被实验120次,12种手势的平均识别率达到了97.92%。实验结果表明,该方法能快速定位手势并准确地识别出常用的12种手势,且识别率较高。 展开更多

关键词 KINECT 肤色模型 开源计算机视觉库 指尖检测 手势识别

下载PDF 职称材料

基于像素滤波和中值滤波的深度图像修复方法 被引量：14

2

作者 刘继忠 吴文虎 +2 位作者 程承 王光辉 曾成 《光电子．激光》 EI CAS CSCD 北大核心 2018年第5期539-544,共6页

针对Kinect相机采集的深度数据一般有噪声和黑洞现象,直接应用于场景三维重建系统中效果差的问题,提出了像素滤波器和中值滤波器相结合的Kinect深度图像修复方法。首先对一帧图片上的像素进行搜索,找到像素值为0的点,以该点为中心,利用... 针对Kinect相机采集的深度数据一般有噪声和黑洞现象,直接应用于场景三维重建系统中效果差的问题,提出了像素滤波器和中值滤波器相结合的Kinect深度图像修复方法。首先对一帧图片上的像素进行搜索,找到像素值为0的点,以该点为中心,利用其邻域内的像素,定义一个两层的滤波器,根据像素滤波器的原理对其进行修复,填充深度图片的黑洞;然后采用中值滤波器,在平滑深度图像的同时保留边缘信息,去除孤立噪声点。实验结果表明,本文方法去噪的同时也能对黑洞进行修补,与原始深度图像相比,空洞明显减少,深度图像质量大大提高。 展开更多

关键词 KINECT 三维重建 深度图像修复 像素滤波器 中值滤波器

原文传递

基于Kinect的手势跟踪概述 被引量：10

3

作者 刘佳 郑勇 +2 位作者 张小瑞 偰冬慧 陆熊 《计算机应用研究》 CSCD 北大核心 2015年第7期1921-1925,共5页

综述了当前基于Kinect手势跟踪的几种代表性方法:基于轮廓和特征匹配运动目标跟踪算法、均值漂移跟踪算法、连续自适应均值漂移跟踪算法、卡尔曼滤波跟踪算法以及粒子滤波跟踪算法,分析其特点及相互关系,详细探讨了各方法的优缺点。最... 综述了当前基于Kinect手势跟踪的几种代表性方法:基于轮廓和特征匹配运动目标跟踪算法、均值漂移跟踪算法、连续自适应均值漂移跟踪算法、卡尔曼滤波跟踪算法以及粒子滤波跟踪算法,分析其特点及相互关系,详细探讨了各方法的优缺点。最后对手势跟踪发展趋势作出了展望。 展开更多

关键词 KINECT 人机交互 手势跟踪 匹配搜索 粒子采样

下载PDF 职称材料

基于体感技术的手势追踪与识别 被引量：8

4

作者 朱明茗 景红 《计算机系统应用》 2014年第8期228-232,共5页

体感技术使人们更直接的通过自己的肢体动作与电脑设备产生互动,减小了鼠标、键盘等传统输入设备带来的束缚.使用Kinect体感设备,对体感关键技术及Kalman滤波器算法进行了深入的研究,并在此基础上提出了一种基于骨骼坐标的手势识别算法... 体感技术使人们更直接的通过自己的肢体动作与电脑设备产生互动,减小了鼠标、键盘等传统输入设备带来的束缚.使用Kinect体感设备,对体感关键技术及Kalman滤波器算法进行了深入的研究,并在此基础上提出了一种基于骨骼坐标的手势识别算法.最后详细阐明了基于Kinect的手势追踪与识别系统的具体设计与实现方法. 展开更多

关键词 体感技术 KINECT 手势追踪 手势识别 KALMAN

下载PDF 职称材料

基于Kinect深度图像信息的手势分割和指尖检测算法 被引量：5

5

作者 徐鹏飞 张红英 《西南科技大学学报》 CAS 2014年第1期49-54,共6页

为克服传统二维彩色图像处理算法易受周围环境、光照变化、背景等因素的影响,提出利用Kinect深度图像信息,实现一种快速鲁棒的手势分割与指尖检测算法。首先,根据Kinect得到的深度信息对非人体部分图像进行筛选,得到包含人手的人体图像... 为克服传统二维彩色图像处理算法易受周围环境、光照变化、背景等因素的影响,提出利用Kinect深度图像信息,实现一种快速鲁棒的手势分割与指尖检测算法。首先,根据Kinect得到的深度信息对非人体部分图像进行筛选,得到包含人手的人体图像;然后对当前得到的人体图像进行直方图分析,计算能够区分人手与非人手的阈值,并通过该阈值对人体图像进行分割得到人手图像;最后,对人手图像进行形态学处理,计算掌心位置,并提取手部轮廓,结合人手轮廓关键几何特征对指尖进行有效检测。实验表明,该方法能够实时、有效地对指尖进行检测。 展开更多

关键词 体感相机 深度图像 手势分割 指尖检测 类间方差

下载PDF 职称材料

面向RGBD深度数据的快速点云配准方法 被引量：5

6

作者 苏本跃 马金宇 +2 位作者 彭玉升 盛敏 马祖长 《中国图象图形学报》 CSCD 北大核心 2017年第5期643-655,共13页

目的真实物体的3维重建一直是计算机图形学、机器视觉等领域的研究热点。针对基于RGBD数据的非匀速非固定角度旋转物体的3维重建问题,提出一种利用旋转平台重建物体3维模型的配准方法。方法首先通过Kinect采集位于旋转平台上目标物的深... 目的真实物体的3维重建一直是计算机图形学、机器视觉等领域的研究热点。针对基于RGBD数据的非匀速非固定角度旋转物体的3维重建问题,提出一种利用旋转平台重建物体3维模型的配准方法。方法首先通过Kinect采集位于旋转平台上目标物的深度数据和颜色数据,对齐融合并使用包围盒算法去除背景噪声和不需要的外部点云,获得带有颜色信息的点云数据。并使用基于标定物不同角度上的点云数据标定出旋转平台中心轴的位置,从而获得Kinect与旋转平台之间的相对关系;然后通过曲率特征对目标点云进行特征点提取并寻找与相邻点云的对应点;其中对于特征点的选取,首先针对点云中的任意一点利用kd-tree搜寻其k个邻近点,对这些点进行曲面拟合,进而计算其高斯曲率,将高斯曲率绝对值较大的n个点作为点云的特征点。n的取值由点云的点个数、点密度和复杂度决定,具体表现为能反映物体的大致轮廓或表面特征信息即可。对于对应点的选取,考虑到欧氏距离并不能较好反映点云中的点对在旋转过程中的对应关系,在实际配准中,往往会因为点云重叠或距离过远等原因找到大量错误的对应点。由于目标物在扫描过程中仅绕旋转轴进行旋转,因此采用圆弧最小距离寻找对应点可有效减少错误点对。随后,使用二分迭代寻找绕中心轴的最优旋转角度以满足点云间的匹配误差最小;最后,将任意角度获取的点云数据配准到统一的坐标系下并重建模型。结果使用斯坦福大学点云数据库和自采集数据库分别对该方法和已有方法在算法效率和配准结果上进行对比实验,实验结果显示在拥有平均75 000个采样点的斯坦福大学点云数据库上与传统ICP算法和改进ICP算法相比,迭代次数分别平均减少86.5%、57.5%,算法运行时间分别平均减少87%、60.75%,欧氏距离误差平方和分别平均减少7 展开更多

关键词 RGBD数据 3维扫描 点云配准 kineet 深度数据

原文传递

基于Kinect图像识别的翻书机设计 被引量：4

7

作者 千承辉 李继源 +1 位作者 张宇轩 王鹏飞 《单片机与嵌入式系统应用》 2018年第6期78-80,共3页

为了满足特殊人群正常阅读纸质书籍的需要,设计了一个基于Kinect图像识别的翻书机设计方案,利用图像处理技术和负压吸附原理,实现了非接触式翻书功能。设计最大的特点在于采用了微软公司Kinect系统实时捕捉用户肢体动作,并根据用户动作... 为了满足特殊人群正常阅读纸质书籍的需要,设计了一个基于Kinect图像识别的翻书机设计方案,利用图像处理技术和负压吸附原理,实现了非接触式翻书功能。设计最大的特点在于采用了微软公司Kinect系统实时捕捉用户肢体动作,并根据用户动作对其意图进行判断,从而准确、及时地发出翻书指令。同时,本设计采用简洁高效的机械结构以及负压吸附原理来实现翻书动作,克服了传统翻书机结构复杂、翻书动作繁琐的缺点。经测试,翻书机能够较好地实现翻书功能,指令识别准确率高、翻书成功率高,具有较好的应用前景。 展开更多

关键词 翻书机 KINECT 负压吸附

下载PDF 职称材料

一种基于深度学习的人体交互行为分层识别方法 被引量：4

8

作者 尹坤阳 潘伟 +1 位作者 谢立东 徐素霞 《厦门大学学报（自然科学版）》 CAS CSCD 北大核心 2016年第3期413-419,共7页

本文把人体交互行为分解为由简单到复杂的4个层次:姿态、原子动作、复杂动作和交互行为,并提出了一种分层渐进的人体交互行为识别方法.该方法共有3层:第1层通过训练栈式降噪自编码神经网络把原始视频中的人体行为识别为姿态序列;第2层... 本文把人体交互行为分解为由简单到复杂的4个层次:姿态、原子动作、复杂动作和交互行为,并提出了一种分层渐进的人体交互行为识别方法.该方法共有3层:第1层通过训练栈式降噪自编码神经网络把原始视频中的人体行为识别为姿态序列;第2层构建原子动作的隐马尔科夫模型(hidden Markov model,HMM),并利用估值定界法识别第1层输出的姿态序列中包含的原子动作;第3层以第2层输出的原子动作序列为输入,采用基于上下文无关文法(contextfree grammar,CFG)的描述方法识别原子动作序列中的复杂动作和交互行为.实验结果表明,该方法能有效地识别人体交互行为. 展开更多

关键词 人体行为识别 深度学习 隐马尔科夫模型(HMM) 上下文无关文法(CFG) KINECT

下载PDF 职称材料

基于深度图像的人体骨骼提取技术的研究 被引量：1

9

作者 关沫 梁梦雪 《微型机与应用》 2015年第12期38-41,共4页

利用Kinect设备获取深度图像,通过前景提取得到深度图像中的人体目标,使用距离变换(包括欧氏距离、城市街区距离、棋盘距离方法)和图像细化算法(包括Hilditch细化算法和Zhang快速并行细化算法)研究并实现了人体骨骼的提取,通过实验对各... 利用Kinect设备获取深度图像,通过前景提取得到深度图像中的人体目标,使用距离变换(包括欧氏距离、城市街区距离、棋盘距离方法)和图像细化算法(包括Hilditch细化算法和Zhang快速并行细化算法)研究并实现了人体骨骼的提取,通过实验对各算法的运行效果进行了对比分析。同时,利用深度图像具备深度信息这一特点解决了在骨骼提取中出现的人体自遮挡问题。在获取的人体骨骼线基础上根据人体测量比例定位人体各骨骼关节点,最终通过实验证明了该骨骼提取方法的有效性。 展开更多

关键词 KINECT 深度图像 细化算法 骨骼提取

下载PDF 职称材料

单台Kinect快速获取完整三维模型的方法研究

10

作者 毕义云 孙筱 +2 位作者 冯筱文 鞠素瑜 段春梅 《山东师范大学学报（自然科学版）》 CAS 2018年第3期282-287,共6页

随着3D打印技术的发展,快速、高效地获取三维模型成为亟需解决的问题.本文提出一种基于Kinect获取物体完整三维模型的方法.通过搭建合适的硬件和软件环境,利用Kinect设备从不同角度对物体进行全方位的旋转扫描,并结合Skanect软件记录物... 随着3D打印技术的发展,快速、高效地获取三维模型成为亟需解决的问题.本文提出一种基于Kinect获取物体完整三维模型的方法.通过搭建合适的硬件和软件环境,利用Kinect设备从不同角度对物体进行全方位的旋转扫描,并结合Skanect软件记录物体扫描建模的全过程.实验结果表明,本文方法成本低、效率高,能够快速重建物体的三维模型,有利于推动3D打印技术的进一步发展. 展开更多

关键词 三维重建 KINECT 3D打印 三维模型 Skanect

下载PDF 职称材料

基于Kinect手势识别的应用研究 被引量：8

11

作者 王攀 官巍 《计算机与数字工程》 2018年第8期1659-1663,共5页

论文针对人机交互领域中动态手势识别问题,利用Kinect传感器获取手势的深度图像,进而追踪人体手部骨骼的关键节点。利用多项式时间算法减少了DTW算法中最佳匹配过程中的冗余计算,然后将提取的手部特征序列模板与参考序列模板进行最佳匹... 论文针对人机交互领域中动态手势识别问题,利用Kinect传感器获取手势的深度图像,进而追踪人体手部骨骼的关键节点。利用多项式时间算法减少了DTW算法中最佳匹配过程中的冗余计算,然后将提取的手部特征序列模板与参考序列模板进行最佳匹配,得出两序列模板之间的最优规整路径(即两序列的相似度),进而得到有效的识别结果。最后将手势识别方法运用到视力检测中,实现了基于手势的视力测试平台,改变了传统视力测试的方式,提高了人机交互的体验。 展开更多

关键词 动态手势识别 Kinect传感器 DTW算法

下载PDF 职称材料

基于Kinect的机械臂增强现实示教研究 被引量：2

12

作者 邵泽燕 邵泽健 +3 位作者 陈成军 李东年 丁文科 刘鹏 《计算技术与自动化》 2017年第2期68-72,共5页

机械臂广泛地应用在工业自动化生产以及人们日常生活中,机械臂而示教学习作为一种重要的运动规划方式,是机械臂研究领域的一项重要研究内容。鉴于此,设计了一种基于Kinect的虚拟机械臂增强现实示教系统,通过Kinect传感器采集人手位置数... 机械臂广泛地应用在工业自动化生产以及人们日常生活中,机械臂而示教学习作为一种重要的运动规划方式,是机械臂研究领域的一项重要研究内容。鉴于此,设计了一种基于Kinect的虚拟机械臂增强现实示教系统,通过Kinect传感器采集人手位置数据,利用机械臂逆运动学模型驱动虚拟机械臂跟踪人手运动,实现对机械臂的虚拟示教;利用增强现实技术,将虚拟机械臂叠加到真实环境中,实现对机械臂的增强现实示教。实验结果表明该系统能够将虚拟机械臂准确地叠加到真实环境中,并实时跟踪人手运动,系统具有良好的交互性。 展开更多

关键词 机械臂示教 Kinect传感器 骨骼跟踪 逆运动学 增强现实

下载PDF 职称材料